职位&公司对比
职位详情
- 福州
- 5-10年
- 本科
- 要求数据开发经验
- 数据平台开发经验
- Java
- Spark
- Flink
- 非外包类
- 数据治理经验
- 数据建模经验
岗位职责 1. 负责基于 Spark/Flink 的物联网大数据计算平台核心模块的设计、开发和运维，支撑海量数据的流式与批处理计算。 2. 优化平台计算任务的性能与资源效率，解决高并发、低延迟场景下的技术瓶颈，主导调优及稳定性保障工作。 3. 参与 Hadoop 生态组件的整合与优化，包括但不限于 HDFS、YARN、Hive 等，保障数据存储与计算的可靠性。 4. 探索大数据领域新技术（如实时计算、分布式存储），结合业务需求推动平台架构演进。 任职要求 基本要求： 1. 本科及以上学历，计算机、通信、数学等相关专业，5年以上大数据平台开发经验。 2. 精通 Spark 和 Flink 框架原理，具备流批一体计算（如 Spark Structured Streaming、Flink DataStreamBOSS直聘/Table API）的实际开发与调优经来自BOSS直聘验。 3. 熟悉 Apache DolphiBOSS直聘nScheduler 或类似调度系统（Airflow、Azkaban）的部署、配置。 4. 熟悉 Hadoop 生态体系，具备 HDFS/YARN/Hive 等组件的使用经验。 5. 掌握大数据性能调优方法论，熟悉 JVM、内存管理、Shuffle 优化、并行度设计等关键技术点。 6. 了解云厂商的大数据计算平台，如AWS，阿里云等的EMR。 7. 具备较强的问题排查能力，能独立解决大数据计算性能、资源调度等相关问题。 8. 良好的沟通协作能力，对技术有热情，能承担复杂系统的设计及落地压力。 加分项： 1. 熟悉 OceanBase 、ClickHouse等数据库，有大数据与数据库协同优化经验。 2. 对 Spark/Flink 源码有深入研究，具备社区贡献或boss定制化开发经验。
职位详情
- 福州
- 不限
- 本科
- Storm
- Shell
- Hadoop
- Kafka
- 数据建模
- Spark
- Flink
- Python
岗位职责： 1.参加大数据流批处理的研发，如实时计算通用组件研发、元数据、血缘分析、指标管理平台、质量管理平台等； 2.支持业务数据报告需求； 3.大数据资源的调度和优化； 4.协助运维做好集群的维护工作； 5.积极主动研究大数据时代的各种前沿技术、并能在产品中得以运用实施。 任职要求： 1.本科及以上boss学历，2年以上大数据开发经验，精通数据结构和算法，优秀的故障排查和架构设计能力； 2.有从事分布式数据存储与计算平台应用开发经验，熟悉boss hadoop/spark，有海量数据处理能力； 3.熟练掌握 kafka，有实时流计算项目经验（storm/spark-streaming/flink，熟练掌握其中一BOSS直聘种流式计算框架）； 4.掌握 Linux 系统下编程经验，熟练掌握一门脚本予言（shell，python 等）；直聘 5.熟悉 MPP 数据库的建模、使用和性能调优（如 HBase，ElasticSearch）； 6.注重代码规范，具有良好的学习能力、文档能力、沟通能力、团队合作意识； 7.强烈的责任心与主动性，对所负责工作有主人翁意识，并能自我驱动成长。
技能解析
- 关键技术
- 分布式存储
- 内存管理
- YARN
- 系统的设计
- 沟通协作
- 沟通协作能力
- 协作能力
- 独立解决
- 数据计算
- 好的沟通
- 平台架构
- 良好的沟通协
- 性能调优
- 数据存储
- 海量数据
- 开发经验
数据来自CSL职业科学研究室
技能解析
- 故障排查
- 应用开发经验
- 合作意识
- 设计能力
- 文档能力
- 业务数据
- 架构设计
- 数据处理能力
- 编程经验
- 数据开发
- 代码规范
- 沟通能力
- 大数据开发
- 数据处理
- 应用开发
- 数据结构和算法
- 海量数据处理
- 数据结构和算
- 团队合作
- 数据结构
- 质量管理
- 维护工作
- 团队合作意识
- 分布式数据
- 学习能力
- 性能调优
- 数据存储
- 海量数据
- 开发经验
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 交通补助
- 生日福利
- 节日福利
- 高温补贴
- 通讯补贴
- 团建聚餐
- 零食下午茶
- 带薪年假
- 法定节假日三薪
- 股票期权
- 年终奖
- 定期体检
- 意外险
- 补充医疗保险
- 五险一金
公司福利
- 定期体检
- 年终奖
- 股票期权
- 带薪年假
- 节日福利
- 团建经费
电子营业执照
京公网安备11010502032801