职位&公司对比

职位详情

• 上海
• 3-5年
• 本科

• 数据处理经验
• 爬虫开发经验
• 反爬策略和实践经验
• 爬虫工程师
• Python

工作职责 1、大规模爬虫系统的设计、开发、维护、调优 2kanzhun、网页信息和APP数据抽取、清洗、消重等工作 3、实kanzhun时监控爬虫任务和项目异常报警等。 任职资格 1、2-3年爬虫经验，至少熟练掌握Python/Go其中一种语言 2、熟悉目前主流的一些爬虫框架 熟练使用 xpath、bs4、css、re等 3、掌握掌握js逆向知识，掌握shell，直聘docker自动化部署等linix操作 4、熟练使用 selenium、pyppeteer、playwright等自动化工具 5、熟练使用 MySQL Redis 等数据库 6、有解决复杂的反爬限制实践经验，能解决如图片验证码/滑块/账号限制/ip限制等问题 7来自BOSS直聘、有大规模数据采集,app逆向经验优先