职位详情
微信扫码分享
举报
1-3年本科爬虫工程师
1. 负责Web端数据的采集、清洗、解析及存储入库工作
2. 精通Python编程,具备JavaScript基础,熟悉基于fastapi的后端服务开发
3. 熟悉主流数据库技术,掌握redis、pgsql、mysql等数据库操作
4. 能够熟练运用docker完成服务的部署与管理
5. 熟悉多种网页抓取技术,了解反爬应对策略,包括代理使用、验证码识别处理等
6. 熟练应用正则表达式、xpath等工具,可高效提取结构化与非结构化数据
7. 掌握常见反爬机制,具备较强的破解能力,涵盖hook、Js防护、代码混淆、逆向分析等技术
8. 参与分布式爬虫系统的设计与性能优化,了解采集任务调度逻辑,具备爬虫状态监控与异常告警能力
9. 具备瑞数、国密相关逆向经验者优先考虑
职位总结围绕职位描述,归纳工作内容、招聘要求

李先生IP:北京
协合运维
·人事经理丰台区
相同职位推荐
企业招聘

