Python爬虫工程师
要求:3-5年工作经验 大专学历即可(民教可查亦可) 13-15k
岗位职责:
1、负责爬虫软件设计开发及系统维护工作;
2、根据业务需求完成数据采集与爬取、解析处理、入库及备份数据日常工作;
3、负责信息抽取、数据清洗等研发和优化工作;
4、爬虫系统的维护和优化。
任职资格:
1、3年以上爬虫程序开发经验,熟悉linux平台开发,熟悉Python语言;
2、熟悉大规模网页爬取,有破解复杂验证码的经验,具有APK、XPK应用包信息获取经验优先,具有海外图片文件等信息获取经验优先;
3、熟悉搜索引擎的工作原理;熟悉Scrapy等开源框架;
4、精通分布式爬虫,多线程开发技术;
5、熟悉DOM、HTML5、CSS3等页面对象,熟练使用Htmlparser、xpath等解析页面;
6、熟悉正则表达式;具有丰富的数据库建模经验,有MySQL、MongoDB、Redis使用经验者优先;
7、熟悉常见的反爬策略,有JavaScript反爬、APP反爬、抓包分析、反爬策略探测、逆向等领域经验的优先。
招聘负责人:詹经理 153 0106 7960