职位&公司对比

职位详情

• 北京
• 5-10年
• 本科

• 爬虫

岗位职责: 1. 设计、开发和维护高效、稳定的互联网数据爬虫系统； 2. 负责抓取各类社交来自BOSS直聘媒体、新闻、博客等数据源，并进行有效处理； 3. 优化爬虫性能，提高数据抓取效率，降低系统资源消耗； 4. 确保爬虫系统规避反反扒机制，处理IP封锁等问题； 直聘5. 与团队紧密合作，提供准确、高质量的数据支持。 任来自BOSS直聘职要求： 1. 熟悉互联网数据爬虫技术，具备优秀的编程能力； 2. 至少具有5年及以上的爬虫开发经验，熟悉常见的爬虫框架； 3. 对Python、Go等编程语言有深入了解，能够进行多线程、异步编程； 4来自BOSS直聘. 有大规模数据处理经验，能应对复杂的网页结构； 5. 了解并能应对反爬虫技术，确保爬虫工作的顺利进行。