职位&公司对比
职位详情
- 杭州
- 1-3年
- 本科
- 数据采集
- 数据抓取
- python爬虫
1、主导爬虫系统的架kanzhun构设计和开发; 2、主导爬虫核心算法的设计和优直聘化; 3、boss指导项目团队成员的日常开BOSS直聘发工来自BOSS直聘作,解决开发中的技术问题,满足数据爬取需求。
职位详情
- 杭州
- 5-10年
- 大专
- JS逆向
- 爬虫
- 数据采集
【岗位职责】 1、负责各大航空公司官网或者APP数据采集,主要是动态数据。 2、负责网页爬虫架构设计(包括基础资源,如代理池技术、反爬技术、浏览器采集技术等等)与核心技术研发。 3、负责API或者爬虫获取数据,数据解析和分析等功能的研发。 4、验证码、模拟票预定、出票等。 【任职资格】 1、本科及以上学历,5年以上相关工直聘作经验;熟悉tls指纹ja3,能够对抗akamai,shape ,PerimeterX,cloudbossflare风控;拥有国际数据采集经验优先; 2、扎实的java或者python语言基础,熟悉linux平台下主流Java或者python应用开发框架及中间件(如Spring、Spring Boot、Mybatis、Hibernate、Kafka、ElasticSearch等),能够对Java进行代码级的调优和调试; 3、熟悉常用的浏览器调试技术; 4来自BOSS直聘、熟悉常见的反爬机制及对应的应对措施,如cookie识别; 5、精通网页爬虫、分布式、多线程开发技术; 6、具有很强的分析和解决问题的能力,具有攻克难题的强烈兴趣,以及提升技术能力的意愿; 7、善于主动学习,责任心强,能够承受较高的工作压力。
技能解析
- 技术问题
- 开发工作
- 架构设计
数据来自CSL职业科学研究室
技能解析
- 分析和解决问题的能力
- 攻克难题
- 应用开发
- 解决问题的能力
- 解决问题
- 语言基础
- 开发技术
- 主动学习
- 开发框架
- 多线程开发
- 分析和解决问题
- 数据采集
- 调试技术
- 架构设计
数据来自CSL职业科学研究室
公司福利
- 节日福利
- 团建聚餐
- 餐补
- 员工旅游
- 带薪年假
- 定期体检
- 五险一金
备注
职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。