职位描述
-根据业务需求，负责构建与维护分布式网络爬虫架构，并完成数据的清洗与抽取；
-制定爬取策略及反屏蔽机制，优化页面抓取的速度与准确性；
-具备独立分析并处理开发中各类技术难题的能力；

任职资格
-计算机相关专业，本科及以上学历，具备2年以上爬虫系统开发经验；
-精通Python语言，掌握计算机网络原理，熟练运用多线程编程，了解Scrapy等主流爬虫框架；
-熟悉Linux系统操作，掌握正则表达式，熟悉Mysql、MongoDB、Redis等常用数据库与缓存技术；
-能有效应对账号封禁、IP封锁、验证码破解、图像识别等常见挑战；
-具备良好的沟通能力与团队协作精神

加分项
-掌握docker容器化技术者优先；
-有php/nodejs/go等其他语言实际项目经验者优先；