职位&公司对比

职位详情

• 苏州
• 1-3年
• 本科

• 爬虫
• 数据开发
• Python
• 计算机相关专业
• 爬虫经验

岗位职责： 1.负责维护现有爬虫系统，进行多平台多终端信息的抓取和分析 2.负责网页/App端页面抓取及分析，能够对各种BOSS直聘页面解析设计详细的解决方案，并具体实现； 3.负责防屏蔽、数据清boss洗等爬虫相关研发和优化工作。 4.领导交办其他事项 任职要求： 1、本科及以上学历，1年以上爬虫开发工作经验； 2、熟悉html/css/xpath/ajax/xml等技术，熟悉HTTP传输kanzhun协议，精通网页抓取原理和整合技术，熟悉正则表达式； 3、熟悉Python，熟悉Scrapy爬虫框架和Linux操作系统，有丰富的反爬经验； 4、熟悉MongoDB/Redis/MySQL/Hbase/PQ/ES其中至少俩种。 5、有分布式爬虫经验优先考虑 6、有项目经验，能独立与客户对接沟通交流技术相关问题。 7、适应短时间出差。