职位&公司对比

职位详情

• 北京
• 不限
• 不限

• 爬虫

【岗位职责】 1、负责各大航空公司官网或者APP数据采集。 2、负责网页爬虫架构设计（包括基础资来自BOSS直聘源，如代理池技术、反爬技术、浏览器采集技术等等）与核心技术研发。 3、负责API或者爬虫获取数据，数据解析和分boss析等功能的研发。 4、验证码、模拟票预定、出票等。 【任职资格】 1、熟练掌握至少2门编程语言，如Python、Java，1年以上实际的爬虫项目经验； 2、熟悉主流数据库，如MySQL、MongoDB、来自BOSS直聘Redis等 3、熟悉TCP／BOSS直聘IP、HTTP协议熟练掌握HTML/CSS/JavaScript等Web技术； 4、独立解决各类网站的反爬措施（如代理IP、各种请求数据加密等） 5、实践过反JS防护、混淆、逆向分析，能解决BOSS直聘常见滑块验证码 6、熟悉常见的App及Web反爬策略，能解决IP封禁、参数加密、字体反爬、验证码、账号封禁等问题