职位&公司对比

招聘中

爬虫工程师

-K
  • 移动互联网
  • A轮
招聘中

爬虫工程师

-K·薪
  • 大数据
  • 未融资

职位详情

  • 北京
  • 不限
  • 不限
  • Python

岗位职责: • 参与云合大数据分析平台的开发 • 网页爬虫构kanzhun架设计与核心技术开发 • 平台管理和运维 kanzhun技能要求: • 算法和数据结构基础 • 至少熟悉Python、Java、C++、Perl等语言中的一种 • 网页爬虫开发经验 • 分布式系统经验 加分项: • 大数据平台相关经验,如Spark,Hadoop,Kafka、HBase等boss • 数BOSS直聘据可视化、数据建模、数据挖掘等经BOSS直聘

职位详情

  • 北京
  • 3-5年
  • 本科
  • 爬虫工程师
  • 网络爬虫技术

(一)岗位描述: 1、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析 2、负责信息抽BOSS直聘取、数据清洗等研发和优化工作 3、负责抓取数据的深度提取和挖掘 4、参与爬虫核心算法的策略优化研究,提升网页抓取的效率和质量。 (二)任职要求: 1、熟直聘悉linux平台开发,精通Python/Java两种编程kanzhun语言中的至少一种 2、精通网页抓取原理及技术,精boss通正则表达式,从结构化的和非结构化的数据中获取信息 3、熟悉Mysql,有过数据库调优和海量数据存储经BOSS直聘验优先 4、具有搜索相关技术研发经验者优先

技能解析

专有技能
  • 算法和数据结构
  • 结构基础
  • 大数据分析
  • 数据分析
  • 技术开发
  • 开发经验
  • 数据建模
  • 分布式系统
  • 数据结构
  • 数据可视化
  • 数据挖掘

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 数据存储
    • 海量数据
    • 编程语言
    • 海量数据存储
    • 获取信息
    • 研发经验
    • 数据库调优
    • 数据清洗

      数据来自CSL职业科学研究室

      工作时间

      上午09:30   -   下午06:30
      双休弹性工作

      公司福利

      • 五险一金
      • 年终奖
      • 带薪年假
      • 员工旅游
      • 餐补
      更新于 2025-05-08