职位&公司对比

招聘中

爬虫工程师

-K
  • 大数据
  • A轮
招聘中

python爬虫工程师

-K
  • 新零售
  • 未融资

职位详情

  • 杭州
  • 1-3年
  • 本科
  • 数据挖掘
  • 后端开发
  • Java

岗位职责: 1、参与设计和开发爬虫系统 2、参与爬虫数据监控和数据分析系统的设计BOSS直聘与开发 3、参与业务系统支撑需求梳理与设计 职位要求: 1来自BOSS直聘、熟练掌握PythonBOSS直聘/Java等一到两种开发语言,具备开发爬虫系统和相关支撑系统的能力 2、擅长各类爬虫分析策略设定和防屏蔽规则设计,熟悉爬虫IP管理池、分布式爬虫设计机制,对于爬虫效率和质量的控制具备一定的经验 3、熟悉各类开源爬虫组件机制工来自BOSS直聘作原理,具备一定的二次开发能力 4、熟练掌握My直聘SQL数据库设计和开发经验,掌握一定的NOSQL数据库开发经验,诸如MongoDB,Hbase等数据库

职位详情

  • 杭州
  • 3-5年
  • 本科

工作内容 boss1、 负责基于跨境电商平台数据的爬取、采集、调优、排错等研发工作; 2、 负责对爬取boss数据进行的清洗、整理、修复工作,形成高质量的采集输出; 3、 负责爬虫系统的日常维护工作,确保对系统BOSS直聘的稳定对接。 岗位要求: 1、 负责为各个业直聘务线提供垂直,精准的数据采集,抽取,存储服务; 2、 设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量; 3、 掌握Python语言及面向对象程序设计,具有良好的表达能力及文档编写能力; 4、 掌Linux基本系统概念与常用命令;

技能解析

专有技能
  • 和数据分析
  • 数据分析
  • 数据监控
  • 二次开发
  • SQL数据库
  • 开发能力
  • 开发经验
  • 数据库开发
  • 系统的设计
  • NOSQL
  • 开发语言
  • 数据库设计

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 面向对象
    • 文档编写
    • 良好的表达能力
    • 文档编写能力
    • 程序设计
    • 良好的表达
    • 平台数据
    • 研发工作
    • 维护工作
    • 好的表达能力
    • 修复工作
    • 表达能力
    • 日常维护工作
    • 数据采集

      数据来自CSL职业科学研究室

      工作时间

      上午09:00   -   下午06:00

      工作时间

      上午9:00   -   下午6:30
      双休弹性工作

      公司福利

      • 生日福利
      • 节日福利
      • 有无线网
      • 团建聚餐
      • 零食下午茶
      • 餐补
      • 带薪年假
      • 加班补助
      • 股票期权
      • 年终奖
      • 定期体检
      • 五险一金

      公司福利

      • 五险
      • 生日福利
      • 节日福利
      • 有无线网
      • 团建聚餐
      • 零食下午茶
      • 节假日加班费
      • 底薪加提成
      • 保底工资
      • 绩效奖金
      • 定期体检
      更新于 2025-05-04