软件工程数据抓取技术员

职位描述 1、参与爬虫系统的架构设计、开发与编码工作，优化爬虫性能与执行效率； 2、制定爬虫抓取策略及反屏蔽机制，提高页面抓取速度与数据准确性； 3、开展网页采集需求分析，制定高效的数据采集实施方案； 4、持续优化分布式爬虫架构与调度策略。 任职要求 1、掌握Java、Python、Shell、R等编程语言中至少一种； 2、能够对目标网站进行数据解析与采集，并依规范完成数据清洗与整理； 3、具备良好的业务理解能力，出色的沟通表达与组织协调能力； 4、工作积极主动，学习能力强，关注大数据技术发展与应用。 福利 大数据行业热门商圈弹性工作远程工作