大小休，一定要有爬虫经验，需要有3年+经验！！

【职位职责】
1.构建并维护高并发、高可用的分布式爬虫架构，高效采集结构化与非结构化数据。
2.针对复杂页面（如JS动态渲染、加密接口、反爬策略）制定专属抓取方案。
3.提升爬虫效率，涵盖请求调度、并发管理、IP代理池建设、验证码处理、动态代理等技术落地。
4.对接数据存储、清洗及任务调度系统，为数据分析和数据产品提供稳定支持。
5.持续监控目标站点变化，快速响应反爬更新或页面结构调整。

【任职要求】
1.具备3年以上实际爬虫开发经验，精通Scrapy、Playwright、Selenium、Requests等主流爬虫框架。
2.掌握多种反爬应对方法，可逆向分析网页加密逻辑，熟练使用抓包工具、JS代码调试、ChromeDevTools，具备处理AJAX异步加载、验证码验证、签名参数校验等复杂场景的能力，能独立完成JS加密算法还原。
3.熟悉常见反检测手段，包括IP代理轮换、浏览器指纹规避、User-Agent伪装、Cookie维护等实践操作。
4.有成功逆向主流电商平台、营销平台及热门APP（如抖音、小红书、快手、微博、视频号）的经验，熟悉分布式爬虫部署、任务调度及大规模数据清洗流程。
5.熟练运用MySQL、PostgreSQL、Clickhouse等常用数据库。
6.掌握iOS逆向与Android逆向技术，具备丰富的风控对抗实战经历。
7.具备基于深度学习的验证码识别开发能力。

【加分项】
*掌握JAVA语言，且愿意未来向Java开发方向发展。
*有搭建和运维爬虫集群的实际经验