职位&公司对比
职位详情
- 北京
- 不限
- 不限
- Python
岗位职责: • 参与云合大数据分析平台的开发 • 网页爬虫构kanzhun架设计与核心技术开发 • 平台管理和运维 kanzhun技能要求: • 算法和数据结构基础 • 至少熟悉Python、Java、C++、Perl等语言中的一种 • 网页爬虫开发经验 • 分布式系统经验 加分项: • 大数据平台相关经验,如Spark,Hadoop,Kafka、HBase等boss • 数BOSS直聘据可视化、数据建模、数据挖掘等经BOSS直聘验
职位详情
- 北京
- 3-5年
- 本科
- 爬虫工程师
- 网络爬虫技术
(一)岗位描述: 1、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析 2、负责信息抽BOSS直聘取、数据清洗等研发和优化工作 3、负责抓取数据的深度提取和挖掘 4、参与爬虫核心算法的策略优化研究,提升网页抓取的效率和质量。 (二)任职要求: 1、熟直聘悉linux平台开发,精通Python/Java两种编程kanzhun语言中的至少一种 2、精通网页抓取原理及技术,精boss通正则表达式,从结构化的和非结构化的数据中获取信息 3、熟悉Mysql,有过数据库调优和海量数据存储经BOSS直聘验优先 4、具有搜索相关技术研发经验者优先
技能解析
- 算法和数据结构
- 结构基础
- 大数据分析
- 数据分析
- 技术开发
- 开发经验
- 数据建模
- 分布式系统
- 数据结构
- 数据可视化
- 数据挖掘
数据来自CSL职业科学研究室
技能解析
- 数据存储
- 海量数据
- 编程语言
- 海量数据存储
- 获取信息
- 研发经验
- 数据库调优
- 数据清洗
数据来自CSL职业科学研究室
工作时间
公司福利
- 五险一金
- 年终奖
- 带薪年假
- 员工旅游
- 餐补