python数据采集工程师

岗位职责：

1、负责构建高效稳定的爬虫系统，满足企业多渠道数据采集需求；

2、持续优化爬虫逻辑与算法，提高数据抓取速度与准确性，应对各类反爬策略；

3、设计并维护分布式爬虫架构，管理爬虫集群，保障系统高可用性；

4、参与RPA技术开发，推动业务流程自动化落地与效率提升；

5、研究目标数据源特性，制定合理抓取方案，攻克验证码识别、JS加密等技术难点。

任职要求：

1、熟练掌握Python语言，具备规范的代码风格和良好的文档编写能力；

2、熟悉HTTP协议原理，掌握HTML、DOM、XPath、CSS、JavaScript等相关技术；

3、具备分布式爬虫开发背景，了解Scrapy等主流爬虫框架的使用与调优；

4、能够有效应对常见反爬机制，具有处理复杂验证码、JS动态加密的实际经验；

5、熟悉MySQL、MongoDB等数据库技术，具备数据库性能优化经验者优先；

6、拥有较强的技术学习能力与问题排查能力，能快速融入新项目并应对技术挑战。