岗位职责：
【广州】
方向一：
1、参与分布式爬虫与数据采集系统的技术架构设计及编码实现；
2、负责网络数据抓取的方案制定，定时采集目标网站信息；
3、制定爬虫调度策略与反屏蔽机制，提高页面抓取效率与数据准确性；
4、参与数据底层建设，聚焦垂直行业数据获取，整合多渠道平台信息；
5、完成数据抽取、清洗、结构化处理、存储入库以及统计分析等相关任务；
6、持续优化算法逻辑，增强爬虫系统的健壮性与可扩展能力；
7、根据项目需求，配合完成上级交办的市场调研、数据研究或技术方案编制等工作。

方向二：
1、承担游戏自动化测试工具及相关平台后端模块的开发，推进dev-ops与测试流程自动化；
2、根据项目安排，协助完成上级指派的市场分析、数据整理或技术方案设计等其他工作。

【武汉】
1、参与Python语言构建的分布式爬虫系统和数据采集平台的设计、开发与日常维护；
2、参与基于Python的数据处理平台、Web接口服务、机器学习模块等方向的技术开发；
3、依据实际需要，配合完成上级布置的市场调研、数据分析或解决方案设计等附加任务。

岗位要求：
【广州】
方向一：
1、计算机类相关专业背景，具备爬虫与反爬对抗开发经历者优先，有移动端App数据采集经验者更佳；
2、熟悉Linux环境下的软件开发，精通Python语言，掌握主流爬虫框架及常用工具链；
3、熟练使用MongoDB、Redis、Mysql，了解消息队列技术，接触过HBase、KAFKA者优先考虑；
4、掌握HTTP通信协议，精通正则表达式、XPath、CSS选择器等解析方式，了解常见验证码识别手段；
5、具备独立排查并解决开发中各类技术问题的能力。

方向二：
1、计算机相关专业毕业；
2、熟练运用Python进行编程，具有Web后端开发经验者优先录用；
3、对游戏领域有兴趣，愿意投身于游戏自动化测试技术的研发工作。

【武汉】
1、计算机相关专业；
2、能熟练运用Python进行程序开发，具备良好的代码阅读与理解能力；
3、可独立分析大型网站页面布局，实现目标数据的采集、解析、筛选与持久化存储；
4、掌握Mysql等至少一种关系型数据库，熟悉Redis、MongoDB等非关系型数据库者优先；
5、了解Flask/Tornado/Django等Web开发框架者优先考虑；
6、具备数据挖掘、自然语言处理、信息检索或机器学习相关技术基础者优先；
7、学习能力强，能快速掌握新技能并应用到实际开发任务中。

提示：公司实行全面禁烟制度。