爬虫开发工程师

【岗位职责】 1、负责数据采集、接入服务开发以及APP等平台信息的抓取与分析工作 2、依据业务需求完成数据抽取、清洗和加工处理 3、参与爬虫算法与策略的优化，实时监控爬虫运行状态并响应告警反馈 【任职条件】 1、统招本科及以上学历 2、计算机相关专业，具备3年以上网络爬虫领域工作经验 3、熟练使用JAVA或Python语言，掌握常用开发框架 5、了解数据抽取、清洗与加工流程，熟悉主流爬虫开源框架及反爬机制，具备分布式系统开发经验 6、掌握主流Web及APP移动安全防护机制与应对技术