职位&公司对比

招聘中

爬虫工程师

-K
  • 计算机软件
  • 未融资
招聘中

爬虫开发工程师

-K·薪
  • 计算机服务
  • 未融资

职位详情

  • 上海
  • 1-3年
  • 本科
  • java爬虫
  • python爬虫
  • 自然语言处理

岗位职责: 1.负责爬虫软件工具和爬虫技术的选取; 2.负责爬虫采集器设计、开发、优化; 3.实现各种BOSS直聘互联网来源的数据标准化处理入库; 任职要求: 1.本科及以上学历,能力优秀者可放宽到大专学历; 2.精通HTTP协议,熟悉各种WEB认证机制,掌握nutch\solr\lucece\heritrix等工具优先考虑; 3.一年以上JAVBOSS直聘A/PYTHON使用开发经验,熟悉数据库架构,在PDF文本化、表格提取、图像OCR、文本清理、智能识别某一方面有一定的特长; 4.工作认真负责,能够boss快速kanzhun学习各种新技术,有强烈的专研精神和解决问题能力。

职位详情

  • 上海
  • 不限
  • 大专
  • 爬虫
  • python

工作职责: 1、采用多种数据获取技术、方式, 对授权网站的数据进行网络抓取,确保数据获取的效率和准确性; 2、对抓取数据进行清洗、整理、入库; 3、解决常见的反爬虫问题; 任职要求 1、熟悉常用Python爬虫框架Scrapyboss、Feapder中的至少一种; 2、熟悉网页抓取原理及解析技术,熟练使用基于正则表达式、XPath、CSS等网页信息抽取技术; 3、熟悉网络抓包工具,如Fiddler、Wireshark等; 4、熟悉 Web JS来自BOSS直聘来自BOSS直聘向分析,反混淆等(优先); 5、熟悉 selenium 等自动化框架; 6、熟悉python web框架等; 7、熟悉 MySQL、redis等常用直聘组件; 8、良好的分析问题、BOSS直聘解决问题的能力,能独立承担开发任务; 9、良好的沟通能力和理解能力,以及自我推动的主观能动性;

技能解析

专有技能
  • JAVA
  • 熟悉数据库
  • 熟悉数据
  • 开发经验
  • HTTP协议
  • PYTHON
  • 解决问题能力
相同技能
  • 解决问题

数据来自CSL职业科学研究室

技能解析

专有技能
  • 良好的分析
  • 分析问题
  • 解决问题的能力
  • 开发任务
  • 沟通能力
  • 抓包工具
  • 理解能力
  • 沟通能力和
  • 好的沟通
相同技能
  • 解决问题

数据来自CSL职业科学研究室

工作时间

上午9:00   -   下午5:30
双休弹性工作

工作时间

上午09:00   -   下午06:00
双休弹性工作

公司福利

  • 五险一金
  • 加班补助
  • 年终奖
  • 带薪年假
  • 员工旅游
  • 餐补
  • 节日福利

公司福利

  • 五险一金
  • 加班补助
  • 年终奖
  • 股票期权
  • 带薪年假
  • 员工旅游
  • 零食下午茶
  • 住房补贴
更新于 2025-04-30