职位&公司对比

职位详情

• 北京
• 5-10年
• 本科

• 数据抓取
• 爬虫

岗位职责： 1、负责站外数据的信息抽取和抓取策略研发，提升数据采集的质量和效率； 2、负责设计开boss发大规模、分布式、海量公开数据的抓取系统，支撑数据采集落地； 4、负责构建完善的监控机制，实时监控爬虫状态及数据质量； 岗位要求： 1、本科及以上学历，计算机等相关专业，5年以上工作经验； 2、熟悉P来自BOSS直聘ython、Jakanzhunva、C++至少一种编程语言，数据结构及算法基础扎实； 3、掌握主流的爬虫采集技术或开源框架，如Scrapy、Selenium等； 4、有搜索引擎经验者优先； 5、参与过大型分布式爬虫系统boss设计、优化以及成功的经验； 6、有抓取策略算法设计经验者优先；