职位&公司对比

招聘中

爬虫开发工程师

-K·薪
  • 电子商务
  • 已上市

职位详情

  • 北京
  • 3-5年
  • 本科
  • 爬虫
  • 数据采集

负责多端网络公开数据获取,来自BOSS直聘参与采集&调度平台开发等工作; 职位要求 1、精通PYTHON开boss发,多线程、分布式等。来自BOSS直聘 2、熟悉分直聘布式爬虫系BOSS直聘统开发,有高并发/过亿量级经验者优先。 3、熟悉安卓、iOS开发或逆向背景优先。

职位详情

  • 北京
  • 3-5年
  • 本科

工作职责: 1、负责分布式爬虫系统的架构设计与开发; 2、负责App,Web等抓取,掌握常用 JavaScript 混淆的调试分析; kanzhun3、研究反爬虫策略,以及采集支撑服务建设,保障数据获取能力; 4、负责海量数据的爬取、清洗、解析、入库,维护抓取程序的监控和报警,kanzhun并且快速修复问题。直聘 任职要求: 1、计算机科学、软件工程或相关专业本科及以上学历; 2、扎实的编程能力,精通Python/C++/Java等至少一种编程语言‌ 3、精通网页抓取原理及技术,能从结构化和非结构化的数据中获取信息; 4、掌握web/app常见的反爬机制,精通各种反爬boss破解,包括但不限于:hook,js调试,js补环境,浏览器引擎,混淆、逆向分析工kanzhun程等技能; 5、熟悉TCP,Http协议原理;熟悉正则表达式,DOM,XPath等技术;

技能解析

专有技能
  • 熟悉分布式
  • PYTHON
  • 系统开发

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 海量数据
    • 编程语言
    • 获取信息
    • 架构设计
    • 软件工程
    • 编程能力

      数据来自CSL职业科学研究室

      工作时间

      上午09:00   -   下午06:00

      工作时间

      上午09:00   -   下午06:00
      双休弹性工作

      公司福利

      • 五险一金
      • 补充医疗保险
      • 年终奖
      • 股票期权
      • 员工旅游
      • 免费班车
      • 餐补
      • 交通补助
      • 节日福利
      • 零食下午茶

      公司福利

      • 五险一金
      • 补充医疗保险
      • 定期体检
      • 加班补助
      • 全勤奖
      • 年终奖
      • 股票期权
      • 带薪年假
      • 员工旅游
      • 免费班车
      • 餐补
      • 节日福利
      更新于 2025-04-16