爬虫工程师
1.2-1.3万元/月
更新 2025-12-22 14:13:28
浏览 841
职位详情
爬虫工程师
1-3年
爬虫 · 自动化数据采集与清洗
外派小满科技项目
需具备CET-4或以上英语等级认证
岗位职责
●按照业务需求进行网页爬虫开发
●对采集的数据开展标注与清洗工作
●负责爬虫系统的部署及日常运维管理
任职要求
1.技术能力
●精通Python/PHP,具有良好的编程功底和数据结构掌握能力
●掌握HTTP/HTTPS协议与TCP/IP网络架构,能运用抓包工具(如Charles、Fiddler)进行请求分析
●熟悉PostgreSQL/Mysql数据库开发,具备SQL优化与索引设计能力
●熟练使用Scrapy、Selenium、Playwright等框架,了解分布式爬虫技术(如Scrapy-Redis)
2.经验要求
●具备1年以上爬虫开发经验,有海外社交媒体类数据采集项目经历者优先
3.其他要求
●全日制本科及以上学历
●获得CET-4或同等及以上英语水平认证
加分项
●掌握前端相关技术(HTML/CSS/JavaScript),可对动态渲染页面进行逆向解析
●熟知常见反爬机制(如JS混淆、验证码识别、IP频率限制),并具备实际应对经验
需具备CET-4或以上英语等级认证
岗位职责
●按照业务需求进行网页爬虫开发
●对采集的数据开展标注与清洗工作
●负责爬虫系统的部署及日常运维管理
任职要求
1.技术能力
●精通Python/PHP,具有良好的编程功底和数据结构掌握能力
●掌握HTTP/HTTPS协议与TCP/IP网络架构,能运用抓包工具(如Charles、Fiddler)进行请求分析
●熟悉PostgreSQL/Mysql数据库开发,具备SQL优化与索引设计能力
●熟练使用Scrapy、Selenium、Playwright等框架,了解分布式爬虫技术(如Scrapy-Redis)
2.经验要求
●具备1年以上爬虫开发经验,有海外社交媒体类数据采集项目经历者优先
3.其他要求
●全日制本科及以上学历
●获得CET-4或同等及以上英语水平认证
加分项
●掌握前端相关技术(HTML/CSS/JavaScript),可对动态渲染页面进行逆向解析
●熟知常见反爬机制(如JS混淆、验证码识别、IP频率限制),并具备实际应对经验
相似职位
很抱歉,暂无相似职位!