职位&公司对比
职位详情
- 北京
- 5-10年
- 本科
- 数据处理
- 数据库开发
- 数据挖掘
岗位职责: 1、设计和开发 数聚力 数据系统 2、优化现有的数据系统,高性能、低成本 3、与产品和设计团队协作,满足业务需要 4、提高数据系统研发团队的工程化,引入最佳实践 任职要求: 1、计算机相关专业本科以上学历,8年以上工作经验,3年大数据架构相关经验,负责过日均 直聘TB 级、总体 PB 级别的数据系统总架构 2、对于 Flink、Spark、Hadoop、HBase、Kafka、ElasticSearch 等数据系统有深入研究 3、熟悉 SQL/NoSQL 数据库技术,有实际生产项目应用经验; 4、精通Linux/Unix环境,精通Jbossava/C++开发,同时熟悉Scala开发语言经验者优先 BOSS直聘 5、具备优秀的团队意识和沟通能力,学习能力和主动性强,具有钻研精kanzhun神,充直聘满激情,乐于接受挑战。
职位详情
- 北京
- 10年以上
- 本科
- 要求数据开发/架构经验
- 要求有数据开发经验
- 数据平台开发经验
- 经验不限
- Java
- 其他
- 数据治理经验
职位描述: 1. 主导商业化数据中台(涵盖Apache Hadoop/Apache Spark/Apache Flink技术栈)的架构设计与实施,统筹商务、售前、产品等多部门协作,确保千万级项目交付质量; 2. 设计多租户场景下的数据治理体系,制定Apache Atlas数据资产目录、Debezium数据同步等组件的最佳实践方案; 3. 攻克高并发(10k+ TPS)场景下的技术难题,主导核心模块开发,包括但不限于Apache Kafka实时管道、Apache Hudi等湖仓一体架构的实现; 4. 构建数据中台SLA保障体系,优化Elasticsearch检索性能(响应<200ms)、ClickHouse OLAP查询效率(百亿级数据秒级响应)等关键指标; 5. 推动技术演进路线,主导Delta Lake数据版本控制、Apache来自BOSS直聘 Doris MPP引擎等前沿技kanzhun术的生产级落地; 【任职要求】: 1. 本科及以上学历,计算机相关专业,主导大型企业(金融、政务、能源等强合规行业)私有化交付项目经验。 2. 精通Java技术栈: - 掌握Spring Cloud Alibaba生态(Nacos/Sentinel/Seata) - 熟练应用Reactor响应式编程、Netty网络通信框架 - 熟练使用Java/Scala进行核心模块开发,掌握JVM调优、分布式系统设计模式(CAP理论实践) 3. 深入理解以下组件原理及实践: - 计算引擎:YARN/Spark/Flink流批一体的架构体系,深度参与过底层代码开发优先 - 存储系统:HDFS/HBase - 消息队列:Kafka - OLAP引BOSS直聘擎:ClickHouse/Doris/StarRocks,深度参与过社区代码提交优先 4. 符合以下条件优先: - 具备商业化项目经验,优秀的抗压能力和技术文档编写能力,具有技术社区贡献者经历优先 - 熟悉AI工程化:MLflow模型管理/Kubeflow Pipeline - 具有数据要素流通项目经验 - 开源社区Committer/PMC成员身份,或拥有大数据领域技术专利优先考虑
技能解析
- 数据架构
- 学习能力和
- C++开发
- 沟通能力
- 团队协作
- 数据库技术
- 团队意识
- 学习能力
- 开发语言
数据来自CSL职业科学研究室
技能解析
- 文档编写
- 架构体系
- 代码开发
- 文档编写能力
- 架构设计
- 技术文档编写
- YARN
- 设计模式
- 技术难题
- 模块开发
- 数据治理
- 消息队列
- JVM调优
- 分布式系统
- 系统设计
- 技术文档
- 网络通信
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 餐补
- 免费班车
- 补充医疗保险
- 五险一金
公司福利
- 餐补
- 免费班车
- 补充医疗保险
- 五险一金