鱼泡网首页职位公司校园意外险下载APP

登录注册后可以:

直接与老板/牛人联系

更精准匹配求职意向

获取更多的求职信息

python数据采集工程师

8千-1.6万/月
职位详情
微信扫码分享
举报
3-5年大专数据清洗数据采集反爬虫Python机票
职位描述 岗位职责: 1. 对目标网站实施网页抓取、数据提取及反爬策略破解; 2. 负责多平台数据抽取、清洗、入库及服务化相关的研发与性能优化; 3. 参与分布式网络爬虫系统的开发与设计,完成信息采集与分析任务; 4. 持续优化爬虫算法,提升系统稳定性与可扩展性; 5. 独立应对开发过程中各类数据需求与接口问题。 任职要求: 1. 本科及以上学历,计算机相关专业,具备3年以上相关工作经验; 2. 熟悉网页抓取机制,掌握正则表达式,能够高效提取结构化与非结构化数据; 3. 精通JAVA/PYTHON编程语言,了解数据库性能调优及常用缓存技术与策略; 4. 熟练使用一种主流开源爬虫框架,具备反爬虫处理与验证码识别经验者优先; 5. 熟悉互联网常见技术方案与通用解决方法,有源码级理解或开源项目贡献经历者优先; 6. 具备出色的逻辑思维能力,热衷于攻克技术难题,擅长问题分析与落地解决; 7. 掌握APP脱壳、逆向反编译、JS解密等逆向技术者优先。 加分项: 1)具备App端数据采集实践经验 2)有Airflow、DolphinScheduler或xxl-job等开源调度平台部署经验 3)具备浏览器插件实现数据采集的经验 4)在机票行业有相关工作背景者优先

职位总结

赵女士IP:陕西西安

易行慧通

·人事经理
工商信息

法定代表人:

杨爱铭

成立日期:

2011-04-12

查看全部

工作地址
西安雁塔区国际人才大厦A1005
点击查看地图

西安

搜索

各大行业职位任你选

首次验证通过即注册鱼泡直聘账号

获取验证码
已阅读并同意
《隐私政策》《服务协议》
登录/注册
请选择城市
热门城市ABCDEFGHJKLMNPQRSTWXYZ
全国