工作职责：

1. 负责开发通用爬虫系统，提取分析各种形态的数据；
2. 研究各种网站、链接、app的形态，发现它们的特点和规律；
3. 解决技术疑难问题，包括反反爬、压力控制等，提升网页抓取的效率和质量；

任职资格：

1. 掌握python，做过爬虫开发；
2. 能够解决封账号、封IP、验证码识别、图像识别等问题；
3. 能够对app进行逆向；
4. 有过Java业务开发经验优先。