职位&公司对比

招聘中

数据架构师

-K
  • 互联网
  • 不需要融资
招聘中

大数据交付架构师

-K·薪
  • 互联网
  • 不需要融资

职位详情

  • 北京
  • 5-10年
  • 本科
  • 数据处理
  • 数据库开发
  • 数据挖掘

岗位职责: 1、设计和开发 数聚力 数据系统 2、优化现有的数据系统,高性能、低成本 3、与产品和设计团队协作,满足业务需要 4、提高数据系统研发团队的工程化,引入最佳实践 任职要求: 1、计算机相关专业本科以上学历,8年以上工作经验,3年大数据架构相关经验,负责过日均 直聘TB 级、总体 PB 级别的数据系统总架构 2、对于 Flink、Spark、Hadoop、HBase、Kafka、ElasticSearch 等数据系统有深入研究 3、熟悉 SQL/NoSQL 数据库技术,有实际生产项目应用经验; 4、精通Linux/Unix环境,精通Jbossava/C++开发,同时熟悉Scala开发语言经验者优先 BOSS直聘 5、具备优秀的团队意识和沟通能力,学习能力和主动性强,具有钻研精kanzhun神,充直聘满激情,乐于接受挑战。

职位详情

  • 北京
  • 10年以上
  • 本科
  • 要求数据开发/架构经验
  • 要求有数据开发经验
  • 数据平台开发经验
  • 经验不限
  • Java
  • 其他
  • 数据治理经验

职位描述: 1. 主导商业化数据中台(涵盖Apache Hadoop/Apache Spark/Apache Flink技术栈)的架构设计与实施,统筹商务、售前、产品等多部门协作,确保千万级项目交付质量; 2. 设计多租户场景下的数据治理体系,制定Apache Atlas数据资产目录、Debezium数据同步等组件的最佳实践方案; 3. 攻克高并发(10k+ TPS)场景下的技术难题,主导核心模块开发,包括但不限于Apache Kafka实时管道、Apache Hudi等湖仓一体架构的实现; 4. 构建数据中台SLA保障体系,优化Elasticsearch检索性能(响应<200ms)、ClickHouse OLAP查询效率(百亿级数据秒级响应)等关键指标; 5. 推动技术演进路线,主导Delta Lake数据版本控制、Apache来自BOSS直聘 Doris MPP引擎等前沿技kanzhun术的生产级落地; 【任职要求】: 1. 本科及以上学历,计算机相关专业,主导大型企业(金融、政务、能源等强合规行业)私有化交付项目经验。 2. 精通Java技术栈: - 掌握Spring Cloud Alibaba生态(Nacos/Sentinel/Seata) - 熟练应用Reactor响应式编程、Netty网络通信框架 - 熟练使用Java/Scala进行核心模块开发,掌握JVM调优、分布式系统设计模式(CAP理论实践) 3. 深入理解以下组件原理及实践: - 计算引擎:YARN/Spark/Flink流批一体的架构体系,深度参与过底层代码开发优先 - 存储系统:HDFS/HBase - 消息队列:Kafka - OLAP引BOSS直聘擎:ClickHouse/Doris/StarRocks,深度参与过社区代码提交优先 4. 符合以下条件优先: - 具备商业化项目经验,优秀的抗压能力和技术文档编写能力,具有技术社区贡献者经历优先 - 熟悉AI工程化:MLflow模型管理/Kubeflow Pipeline - 具有数据要素流通项目经验 - 开源社区Committer/PMC成员身份,或拥有大数据领域技术专利优先考虑

技能解析

专有技能
  • 数据架构
  • 学习能力和
  • C++开发
  • 沟通能力
  • 团队协作
  • 数据库技术
  • 团队意识
  • 学习能力
  • 开发语言

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 文档编写
    • 架构体系
    • 代码开发
    • 文档编写能力
    • 架构设计
    • 技术文档编写
    • YARN
    • 设计模式
    • 技术难题
    • 模块开发
    • 数据治理
    • 消息队列
    • JVM调优
    • 分布式系统
    • 系统设计
    • 技术文档
    • 网络通信

      数据来自CSL职业科学研究室

      工作时间

      上午09:00   -   下午06:00
      双休偶尔加班

      工作时间

      上午09:00   -   下午06:00
      双休偶尔加班

      公司福利

      • 餐补
      • 免费班车
      • 补充医疗保险
      • 五险一金

      公司福利

      • 餐补
      • 免费班车
      • 补充医疗保险
      • 五险一金
      更新于 2025-05-12