职位&公司对比

招聘中

大数据部门负责人

-K·薪
某大型互联网出行平台上市公司

职位详情

  • 北京
  • 5-10年
  • 硕士
  • 要求数据开发/架构经验
  • Java
  • Python
  • 其他
  • 要求有数据开发经验
  • 要求有数据架构经验
  • 5-10年
  • 数据平台开发经验
  • 数据平台架构经验
  • 其他

岗位职责: 1.负责数据标注平台的整体架构设计:根据业务场景落地需求,与BOSS直聘算法团队和IT基础设施团队紧密合作,提出大模型训练和优化数据规模、数据类型、数据结构等建议,确保架构有效实施。 2.负责搭建大模型数据平台:支撑大模型数据的存储、预处理(去重、相似度计算、脱敏等)诉求,针对大模型场景、数据类型、数据规模具有高扩展性,以支持大模型数据集持续迭代,实现高质量数据集沉淀,确保数据安全和隐私保护。 3.与算法团队紧密协作,抽象研发诉求,落地为便捷实用的的平台能力,提升整个团队的工作效率和数据处理能力。 4.根据语音和文本数据标注的业务需求,开发高效、易用的数据标工具,支持多种数据类型的标注; 5.监控平台的性能指标,优化数据库查询和存储结构,分析性能瓶颈,制定优化方案并实施; 6.关注数据标注领域的新术、新工具和新趋势,研究并引入适合平台的技术方案; 7.探索自动化标注技术的应用,通过机器kanzhun学习算法辅助标注,提高标注效率和质量; 8.参与人工智能和机器学习相关技术的研究,为平台的智能化发展提供技术支持; 任职要求: 1.硕士及以上学历,计算机、人工智能等专业优先; 2.具备5年以上全栈开发经验,3年以上团队管理经验,熟练掌握文本、多模态等非结构化数据处理方法,精通数据清洗、特征提取和数据增强等技术,能够解决数据工作中各种问题; 3.直聘精通Python、Java等至少一种编程语言,熟悉常用的数据处理、文本处理和图像处理库,能够高效地实现数据清洗和处理的算法和流程; 4.具备丰富的数据湖开发经验(Hudi、Iceberg、Hive等),并且对数据计算相关技术框架有深入的实践和理解(Spark、Flink、Hadoop、Ray); 5.具备优秀的分析问题和解决问题能力,勇于挑战和解决复杂问题; 6.具备良好的团队协作和沟通能力,能够有效协调组内外资源以推动项目进展; 7.主导过大模型或离在线场景下的数据平台建设,有海量图片、视频数据平台建设或大数据开源框架开发经验者优先。

职位详情

  • 北京
  • 不限
  • 本科
  • 要求数据开发/架构经验
  • 要求有数据架构经验
  • 数据平台架构经验
  • 大数据引擎架构经验
  • 其他数据架构经验
  • Spark
  • Hive
  • Flink
  • MySQL
  • 其他
  • Spark原理/源码
  • Hive原理/源码
  • Flink原理/源码
  • HBase原理/源码
  • Kafka原理/源码
  • 数据治理经验
  • 计算机相关专业
  • 数学/统计相关专业
  • Java
  • Python
  • SQL

工作职责 1、负责公司数据平台整体规划、技术路线、架构设计、平台开发和运营; 2、设计并优化大数据架构,包括数据采集、数据治理、数据安全、 数据仓库、数据应用等,支撑各个业务线快速增长对数据的使用需求; 3、推动公司数据安全治理体系建设,满足数据安全合规要求; 4、负责数据团队工作管理及能力提升。 任职资格 任职资格 1、计算机相关专业统招本科以上学历; 2、8年以上大数据行业相关经验,5年以上互联网大数据架构设计经验;3年以上互联网数据团队管理经验; 3、熟悉Hadoop、Spark、Flink、Kafka、Hive、HBase等主流大数据系统原理及源码,熟悉MySQL、Oracle等数据库; 4、熟悉Spring Cloud,Dubbo等微服务框架,有容器/微服务、中间件、开源大数据、kanzhun基础云服务等技术积累和实战经验; 5、对数据采集、数据开发、数据分析、数据建模、算法等有深刻认识和实战经验,具备大规模系统来自BOSS直聘的故障诊断与性能优化能力; 6、负责过多条大数据业务线或整个产品线的业务架构工作,组织过中等以上规模项目者优先,有企业级应用大数据行业经验优先; 7、在大数据架构、产品、技术等方面有深入思考和中长期的产品和技术视野,对技术架构演进有清晰、成熟的思路; 8、有较强的逻辑思维能力BOSS直聘,思路清晰,kanzhun善于分析、归纳、解决问题,能够独立或带队进kanzhun行项目开发; 9、工作主动积极,能承受高强度的工作压力,具有较强的沟通、表达、组织能力,爱学习爱分享。

技能解析

专有技能
  • 机器学习算法
  • 技术方案
  • 编程语言
  • 技术框架
  • 数据处理能力
  • 解决复杂问题
  • 紧密合作
  • 机器学习
  • 优秀的分析
  • 分析问题
  • 沟通能力
  • 优化方案
  • 图像处理
  • 团队协作
  • 开发经验
  • 平台建设
  • 模型训练
  • 数据标注工具
  • 学习算法
  • 开源框架
  • 隐私保护
  • 数据处理
  • 解决问题能力
  • 数据标注
  • 良好的团队协
  • 数据结构
  • 数据清洗
  • 项目进展
  • 性能指标
  • 框架开发
  • 数据计算
  • 提供技术支持
  • 人工智能等
相同技能
  • 数据安全
  • 团队管理经验
  • 团队管理
  • 管理经验
  • 解决问题
  • 架构设计

数据来自CSL职业科学研究室

技能解析

专有技能
  • 优化能力
  • 较强的逻辑思维能力
  • 技术路线
  • 善于分析
  • 数据仓库
  • 组织能力
  • 数据应用
  • 数据架构
  • 数据开发
  • 数据分析
  • 故障诊断
  • 性能优化
  • 逻辑思维
  • 设计经验
  • 团队工作
  • 逻辑思维能力
  • 技术架构
  • 较强的逻辑
  • 安全治理
  • 整体规划
  • 数据治理
  • 数据建模
  • 体系建设
  • 数据采集
相同技能
  • 数据安全
  • 团队管理经验
  • 团队管理
  • 管理经验
  • 解决问题
  • 架构设计

数据来自CSL职业科学研究室

工作时间

上午09:00   -   下午06:00
双休弹性工作

公司福利

  • 交通补助
  • 节日福利
  • 通讯补贴
  • 住房补贴
  • 零食下午茶
  • 餐补
  • 员工旅游
  • 带薪年假
  • 全勤奖
  • 加班补助
  • 股票期权
  • 年终奖
  • 定期体检
  • 补充医疗保险
  • 五险一金
  • 过节费
  • 年终奖

公司福利

  • 五险一金
  • 补充医疗保险
  • 定期体检
  • 年终奖
  • 股票期权
  • 带薪年假
  • 免费班车
  • 交通补助
  • 节日福利
  • 零食下午茶

备注

当前职位为【猎头】职位,具体公司信息可咨询职位发布人进行确认

备注

职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。

更新于 2025-05-14