职位&公司对比

职位详情

• 上海
• 3-5年
• 本科

• 爬虫，Crawl4ai

招聘岗位：爬虫网络工程师 岗位职责 1. 运用Deepseek、Grok和Crawl4ai等工具组合，设计并开发高效的网络爬虫系统，实现对各类网站数据的精准抓取。 2. 负责优化爬虫程序，提高数据采集的效率和质量，确保在复杂网络环境和反爬机制下仍能稳定运行。 3. 对采集到的数据进行清洗、整理和初步分析，为后续的数据分析和业务决策提供支持。 4. 与其他部门紧密合作，根据业务需求提供数据支持，协助解决数据相关的问题。 5. 关注行业技术动态，不断探索和引入新的爬虫技术和工具，提升团队的技术水平。 任职要求 1. 计算机相关专业本科及以上学历，3年以上网络爬虫开发经验。 2. 熟练掌握Pybossthon、Java等至少一种编程语言，具备良好的编程习惯和代码规范。 3. 精通Deepseek、Grok和Crawl4ai工具的使用，能够灵活运用它们解决直聘各种数据采集问题。 4. 深入理解HTTP协议、HTML、CSS、JavaScript等前端技术，熟悉网页结构和数据交互原理。 5. 有丰富的应对反爬虫策略的经验，如IP代理、验证码识别、动态页面解析等。 6boss. 具备良好的团队合作精神和沟通能力，能够承受一定的工作压力，有较强的学习能力和解决问题的能力。 薪资待遇 根据个人经验和能力，提供具有竞争力的薪资待遇，具体面议。 如果你认为自己具备以上能力和经验，欢迎投递简历至[具体邮箱2875254337qq.com)期待你的加入！