职位&公司对比

职位详情

• 深圳
• 大专
• 在校/应届

一、岗位职责： 1.负责各类主流直播来自BOSS直聘平台的数据爬取工作，如抖音，视频号，快手等。 2.配合公司业务，负责开发和维护高效的网BOSS直聘络爬虫系统，实现主播数据数据调度、抓取、解析和储存流程。 3.持续改进系统架构、核心算法或者核心技术等，研究优化爬虫算法，提升爬虫系统的稳定性、可扩展性。 4.负责实时监控网络直播数据并进行预警处理，提升抓取效率和数据质量，确保数据的准确性和可用性。 5.遵守robots.txt协议和相关法律法规，确保爬虫操作的合法性，解决各类直播平台的反爬策略和风控问题。 6.定期监控和维护爬虫系统，优化爬虫性能，确保其正常运行，确保数据抓取的稳定kanzhun性和效率，解决数据抓取过程中的技术难题。 二、任职要求： 1.本科毕业优先，计算机或软件工程相关专业，有1-2年以上网络直播平台数据采集实战经验优先。 2.有主流直播平台数据爬取经验者优先，能迅速响应直播平台变动做规则调整。 3.熟悉主流爬取技术及爬虫框架工具，如Scrapy、 Selenium、Playwright等，熟悉Python、go等至少一种开发语言，熟悉主流数据库MySQL、MongoDB、Redis等。 4.具有良好的逻辑思维能力，具有良好的数据分析报告的能力，能够从大量数据中提取有价值的信息。 5.熟悉常见反爬策略及应对措施应对，能够解决封账号、封IP、验证码、JS加密来自BOSS直聘、风控等问题。 6.有较强的学习能力以及良好的沟通和团队合作能力。 三、福利待遇 薪资范围：实习生200-250元每天，具体面议。 职位福利： 1.社保:为员工购买社保五险，提供交通补贴，餐补; 2.交通便利：公司位于地铁口，交通方便； 3.生活保障:公司配备微波炉，冰箱，方便自带餐; 4.工作时间:9:30-12:00 14:00-18:30，周末大小周; 5.公司氛围:年轻化团队，舒适、宽松、干净的BOSS直聘办公环境，积极、快乐、宽松的工作氛围。