职位&公司对比

招聘中

爬虫工程师

-K
  • 计算机软件
  • 未融资

职位详情

  • 上海
  • 1-3年
  • 本科
  • java爬虫
  • python爬虫
  • 自然语言处理

岗位职责: 1.负责爬虫软件工具和爬虫技术的选取; 2.负责爬虫采集器设计、开发、优化; 来自BOSS直聘 3.实现各种互联网来源的数据标准化处理boss入库; 任职要求: 1.本科及以上学历,能力优秀者可放宽到大专学历; 2.精通HTTP协议,熟悉各种WEB认证机制,掌握nutch来自BOSS直聘\solr\lucece\heritrix等工具kanzhun优先考虑; 3.一年以上JAVA/PYTHON使用开发经验,熟悉数据库架构,在PDF文本化、表格提取、图像OCR、文本清理、智能识别某一方面有一定的特长; 4.工作认真负责,能够快速学习种新技术,有强烈的专研精神和解决问题能力。

职位详情

  • 上海
  • 5-10年
  • 本科
  • 爬虫
  • python
  • 浏览器驱动
  • selenium
  • mqtt
  • js逆向
  • mysql
  • pyqt5

岗位职责: 跨境电商选品网站建设 需要有独自搭建架构,项目kanzhun规划,管理小组的能力 1,直聘对接全世界各大电商平台API,通过API调用获取数据,并存入数据库形成接口,返回数据给前端调用; 2,设计并实现高效稳定的Web爬虫系统,从多种数据源中抓取所需信息; 3,分析网站结构,制定合理的爬取策略,kanzhun规避反爬机制; 4,使用PyQt5开发复杂的软件界面; 任职资格: 1,商品kanzhun数据库API对接经验,购物比价系统对接经验; 2,计算机相关本科及以上学历,具备5年以上Python开发经验; 3,精通Python编程语言,擅长使用PyQT5进行软件界面开发,开发过软件自动更新的功能; 4,有丰富的网络爬虫开发经验,熟悉requests、Scrapy等常用爬虫框架; 加分项:mqtt,Selenium,js逆向和dephi(Pascal)开发经验。

技能解析

专有技能
  • JAVA
  • 熟悉数据库
  • 熟悉数据
  • HTTP协议
  • 解决问题
  • PYTHON
  • 解决问题能力
相同技能
  • 开发经验

数据来自CSL职业科学研究室

技能解析

专有技能
  • 网站建设
  • 商品数据
  • 编程语言
  • 项目规划
相同技能
  • 开发经验

数据来自CSL职业科学研究室

工作时间

上午9:00   -   下午5:30
双休弹性工作

工作时间

上午9:00   -   下午6:00
双休偶尔加班

公司福利

  • 五险一金
  • 加班补助
  • 年终奖
  • 带薪年假
  • 员工旅游
  • 餐补
  • 节日福利

公司福利

  • 五险一金
  • 年终奖
  • 包吃
  • 节日福利
  • 有无线网
  • 团建聚餐
  • 带薪年假
  • 企业年金
  • 底薪加提成
  • 保底工资
更新于 2025-05-09