爬虫工程师（储备数据组长）
薪资：10-15K

职位描述
1、主爬虫工作（60%），以数据技术组组长作为培养未来发展方向，因为需要同时具备一定的数据分析、数据挖掘、AIGC应用相关能力，未来发展画像为综合型数据技术应用专家或数据团队管理者，仅专注爬虫发展的人才勿扰。
2、负责各类相关网站爬虫开发工作及采集方案设计，能够胜任所有主流招聘平台的采集工作；
3、研究各种网站、链接的形态，优化爬虫策略，解决技术疑难问题，包括反反爬、验证码识别、js加密破解等，提升网页抓取的效率和数据质量；
4、参与爬虫后数据处理、数据加工、数据挖掘/分析、AIGC应用等流程相关研发工作，有机串通数据整体应用路径。
5、负责构建维护公司数据资产体系。

职位要求
1、要求本科及以上学历，至少两年以上工作经验，计算机、大数据相关专业。
2、精通Python、计算机网络，熟练使用多线程/多进程，熟悉Scrapy等常用爬虫框架；
3、熟悉Linux操作，熟悉MySQL、MongoDB等常用数据库，了解各种Web前端技术；
4、熟练反爬破解操作，能够解决封账号、封IP、验证码识别、图像识别等问题；
5、具备较为全面的综合数据工程能力，深化爬虫技术的同时，具备数据工程横向其他数据能力；
6、具备优秀的学习能力，能独立分析和解决问题，具有较强的沟通技巧和团队协作能力；
7、具备强烈的上进心和责任感，拥有较成熟的职场经验，希望走综合型而非单项技术专家型发展路径。

其他信息：
任职部门：数据服务部-技术组
汇报对象：数据总监
团队描述：数据服务部是广东职教桥数据科技有限公司的核心部门之一，目前团队规模将近20人，团队规模及业绩自团队创建以来持续保持增长，未来发展空间巨大。