职位&公司对比

招聘中

爬虫工程师

-K
  • 大数据
  • A轮
招聘中

Python爬虫-杭州

-K
  • 电子商务
  • 未融资

职位详情

  • 杭州
  • 1-3年
  • 本科
  • 数据挖掘
  • 后端开发
  • Java

岗位职责: 1、参与设计和开发爬虫系统 2、参与爬虫数据监控和数据分析系统的设计与开发 3、参与业务系统支撑需求梳理与设计 职位要求: 1、熟练掌握Python/Javbossa等一到两种开发语言,具备开发爬虫系统和相关支撑系统的能力 2、擅长各类爬虫分析策略设定和防屏蔽规则设计,熟悉爬虫IP管理池、分布式爬虫设计机制,对于爬虫效率和质量的控制具备一定的经验 3、熟悉各类开源爬虫组件机制工作原理,具备一定的二次开发能力 4、熟练握MySQL数据库设计和开发经验,掌直聘握一定的bossNOSQL数据库开发经kanzhun验,诸如MongoDB,Hbase等数据库

职位详情

  • 杭州
  • 3-5年
  • 本科
  • js逆向
  • decimal

岗位职责: 1、负责分布式网络爬虫系统的架构设计与开发; 2、攻破各种反爬策略,快速解决各类技术疑难问题,建设反爬对抗组件库; 3、编写抓取直聘互联网爬虫代码,负责数据采集,参直聘与需求分直聘析和梳理,爬虫采boss集策略制定和实现; 4、研究各种网页、app、小程序端接口,提高网页抓取效率和质量; 5、攻克爬虫难题。 6、有高通量爬虫系统架构设boss计经验者优先

技能解析

专有技能
  • 和数据分析
  • 数据分析
  • 数据监控
  • 二次开发
  • SQL数据库
  • 开发能力
  • 开发经验
  • 数据库开发
  • 系统的设计
  • NOSQL
  • 开发语言
  • 数据库设计

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 设计经验
    • 系统架构设计
    • 需求分析
    • 架构设计
    • 系统架构
    • 疑难问题
    • 数据采集

      数据来自CSL职业科学研究室

      工作时间

      上午09:00   -   下午06:00

      工作时间

      上午08:00   -   下午05:00
      排班轮休不加班

      公司福利

      • 生日福利
      • 节日福利
      • 有无线网
      • 团建聚餐
      • 零食下午茶
      • 餐补
      • 带薪年假
      • 加班补助
      • 股票期权
      • 年终奖
      • 定期体检
      • 五险一金

      公司福利

      • 生日福利
      • 节日福利
      • 全勤奖
      • 工龄奖
      • 夜班补助
      • 加班补助
      • 底薪加提成
      更新于 2025-05-11