职位&公司对比

招聘中

爬虫工程师

-K
  • 互联网
  • 天使轮
招聘中

高级爬虫工程师

-K·薪
某计算机软件公司

职位详情

  • 杭州
  • 1-3年
  • 本科
  • 数据采集
  • 数据抓取
  • python爬虫

1、主导爬虫系统的架kanzhun构设计和开发; 2、主导爬虫核心算法的设计和优直聘化; 3、boss指导项目团队成员的日常开BOSS直聘发工来自BOSS直聘作,解决开发中的技术问题,满足数据爬取需求。

职位详情

  • 杭州
  • 5-10年
  • 大专
  • JS逆向
  • 爬虫
  • 数据采集

【岗位职责】 1、负责各大航空公司官网或者APP数据采集,主要是动态数据。 2、负责网页爬虫架构设计(包括基础资源,如代理池技术、反爬技术、浏览器采集技术等等)与核心技术研发。 3、负责API或者爬虫获取数据,数据解析和分析等功能的研发。 4、验证码、模拟票预定、出票等。 【任职资格】 1、本科及以上学历,5年以上相关工直聘作经验;熟悉tls指纹ja3,能够对抗akamai,shape ,PerimeterX,cloudbossflare风控;拥有国际数据采集经验优先; 2、扎实的java或者python语言基础,熟悉linux平台下主流Java或者python应用开发框架及中间件(如Spring、Spring Boot、Mybatis、Hibernate、Kafka、ElasticSearch等),能够对Java进行代码级的调优和调试 3、熟悉常用的浏览器调试技术; 4来自BOSS直聘、熟悉常见的反爬机制及对应的应对措施,如cookie识别; 5、精通网页爬虫、分布式、多线程开发技术; 6、具有很强的分析和解决问题的能力,具有攻克难题的强烈兴趣,以及提升技术能力的意愿; 7、善于主动学习,责任心强,能够承受较高的工作压力。

技能解析

专有技能
  • 技术问题
  • 开发工作
相同技能
  • 架构设计

数据来自CSL职业科学研究室

技能解析

专有技能
  • 分析和解决问题的能力
  • 攻克难题
  • 应用开发
  • 解决问题的能力
  • 解决问题
  • 语言基础
  • 开发技术
  • 主动学习
  • 开发框架
  • 多线程开发
  • 分析和解决问题
  • 数据采集
  • 调试技术
相同技能
  • 架构设计

数据来自CSL职业科学研究室

公司福利

  • 节日福利
  • 团建聚餐
  • 餐补
  • 员工旅游
  • 带薪年假
  • 定期体检
  • 五险一金

备注

职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。

更新于 2025-05-05