职位&公司对比

招聘中
  • 建筑工程咨询服务
  • 不需要融资
招聘中

爬虫工程师

-K
  • 互联网
  • 不需要融资

职位详情

  • 郑州
  • 1-3年
  • 本科

岗位职责: 1、负责分布式网络爬虫系统设BOSS直聘计,搭建系统框架,开发分布式网络爬虫系统。 2、负责数据的抓取、提取、数据分析等工作,满足业务部门对数据的需求。 3、设计和优化数据抓取策略,能够应对各种反爬策略,提高数据抓取的效率和质量。 4、理解数据需求,快速响应和解决数据相关问。 5、建立和维护数据抓取任务的监控系统,确保数据抓取的稳定性和及时性。 任职要求: 1、计算机相关专业本科及以上学历,有2年以上爬虫开发经验。 2、精通Python语言,至少boss熟练掌握主流爬虫框架中的一kanzhun种; 3、熟悉常见反爬机制,验证码识别,IP代理池、应用Ip池、js逆向、headers认证和cookie等; 4、有处理大规模数据的经验,对分布式爬虫有实际操作经验者优先。 BOSS直聘5、良好的问题解决能力,善于沟通和团队合作,喜欢研究新技术,能够在压力下工作。

职位详情

  • 郑州
  • 3-5年
  • 大专
  • nodejs
  • JavaScript

一、 岗位职责 1、责平台分布式网络爬虫系统的设计与研发工作、进行多平台网页、APP等数boss据的爬取和分析工作;有电商、航空公司、OTA等数据抓取经验更佳; 2、负责核心数据抓取及存储系统的架构设计、优化; 3、设计爬虫策略和防屏蔽规则,提升网页和APP的抓取效率和质量。 二、 岗位要求 1、二年以上JavaScript开发经验;熟练使用原生Ja直聘vaScript开发, 熟悉Python语言; 2、拥有丰富的chrome或其他浏览器调试经验,有较强的问题定位能力以及对移动端浏览器兼容性有良好的理解; 3、熟悉操作系统原理,熟悉常用加密密算法,有较强的程序逆向分析能力,对软件安全和逆向领kanzhun域有强烈爱好; 5、设计爬虫策略和防屏蔽规则,解决验证码、JS加密等难点攻克; 6、有较强独立开发和自学能力,了解后端开发,熟悉nodejs。

技能解析

专有技能
  • 问题解决能力
  • 善于沟通
  • 数据分析等
  • 数据分析
  • 善于沟通和
  • 数据相关
  • 系统设计
  • 理解数据
  • 团队合作
  • 解决能力
  • 问题解决
相同技能
  • 开发经验

数据来自CSL职业科学研究室

技能解析

专有技能
  • 软件安全
  • 分析能力
  • 独立开发
  • 架构设计
  • 系统的设计
  • 设计与研发
  • 浏览器兼容性
  • 研发工作
  • 自学能力
相同技能
  • 开发经验

数据来自CSL职业科学研究室

工作时间

上午09:00   -   下午06:00

工作时间

上午09:00   -   下午06:30
双休不加班

公司福利

  • 五险一金
  • 工龄奖
  • 带薪年假
  • 员工旅游
  • 节日福利

公司福利

  • 节日福利
  • 团建聚餐
  • 零食下午茶
  • 员工旅游
  • 带薪年假
  • 绩效奖金
  • 年终奖
  • 定期体检
  • 五险一金
更新于 2025-05-16