职位&公司对比
职位详情
- 太原
- 3-5年
- 本科
- 要求数据开发经验
- SQL
- 其他数据开发经验
- ETL开发经验
- BI报表开发经验
- Hive
1.3年以上大数据开发经来自BOSS直聘验 2.精通hive sql开发、spark sql开发。熟悉shell脚本编写,并有相关的调来自BOSS直聘优经验 3.负责基于hadoop、spark平台的数据采集、存储和分析 来自BOSS直聘直聘4.精通hdfs/hive/spark/等框架原理,有丰富的分布式编程来自BOSS直聘经验
职位详情
- 太原
- 5-10年
- 本科
- 要求数据开发经验
- 数据仓库开发经验
- Spark
- Flink
- MapReduce
- Clickhouse
- Python
- Scala
- ETL开发经验
- 金融行业经验
- 医疗行业经验
- 非外包类
一、岗位职责 1.参与公司大数据平台的架构设计来自BOSS直聘、搭建与优化,保障系统的高可用性、高扩展性与高性能,满足海量数据的存储、处理与分析需求。 2.负责数据采集、清洗、转换和加载(ETL)流程的开发与维护,整合多源异构数据,确保数据的准确性、完整性与及时性,为数据分析和挖掘提供高质量的数据基础。 3.基于 Hadoop、Spark、Flink 等大数据技术框架进行分布式程序开发,实现复杂的数据处理逻辑,如实时流计算、离线批处理任务,助力业务实时决策与深度洞察。 4.与数据分析师、数据科学家紧密合作,理解业务需求,协助开发数据模型和算法,将数据分析结果转化为实际业务价值,推动业务增长与创新。 5.负责大数据相关技术难题的攻关,跟踪行业最新技术动态,引入新技术、新工具,持续提升团队的技术实力与开发效率。 6.监控大数据平台运行状态,及时发现并解决系统故障、性能瓶颈等问题,保障业务连续性,制定并执行数据备份与恢复策略。 二、任职要求 1.本科及以上学历,计算机科学、软件工程、数学、统计学等相关专业毕业,8 年以上大数据开发工作经验。 2.扎实的编程基础,精通直聘 Java 或 Scala 语言,熟悉 Python 语言者更佳,具备良好的代直聘码规范与编程习惯,能够独立完成复杂模块的开发。 3.深入理解 Hadoop 生态体系,熟练掌握 Hive、HBase、Spark、Flink 等核心组件的原理与应用,具备丰富的实际项目开发经验,能够根据业务场景进行技术选型与架构设计。 4.熟悉数据仓库建模理论与方法,有 ETL 工具(如 Sqoop、Kettle 等)使用经验,能够独立设计与开发高效的数据抽取、转换和加载流程,保障数据质量。 5.具备较强的问题解决能力与调试技巧,能快速定位并解决大数据平台运行中的各类问题,熟悉分布式系统的故障排查与性能优化方法。 6.了解关系型数据库(如 MySQL、Oracle 等)与非关系型数据库(如 MongoDB、Redis 等),掌握 SQL 语句编写及优化技巧,能够进行数据查询、存储过程开发等操作。 7.具备良好的团队协作精神与沟通能力,能够与跨部门团队紧密合作,理解业务需求,将技术方案有效落地,有较强的学习能力与自我驱动力,关注大数据领域前沿技术发展趋势。 三、福利待遇 1.具有竞争力的薪资待遇:根据个人能力与经验提供行业领先的薪酬,年度调薪机会,确保您的付出与收获成正比。 2.完善的福利体系:五险、带薪年假、病假、婚假、产假等法定假期一应俱全,额外提供补充商业保险,为您和家人的健康保驾护航。 3.丰富的员工关怀:定期组织团队建设活动、节日福利、生日惊喜、年度体检等,让您在工作之余感受到公司的温暖与关怀。 4.多元化的培训与发展:公司重视人才培养,提供丰富的内外部培训资源,包括专业技能培训、职业素养提升培训等,为您的职业发展助力,鼓励员工不断成长与晋升,提供广阔的发展空间。 5.舒适的工作环境:现代化的办公设施,轻松愉悦的工作氛围,交通便利的办公地点,让您每天都能以最佳状态投入工作。
技能解析
- 脚本编写
- 编程经验
- 数据开发
- 开发经验
- 大数据开发
- 数据采集
数据来自CSL职业科学研究室
技能解析
- 故障排查
- 优化方法
- 团队协作精
- 数据仓库
- 数据质量
- 架构设计
- 软件工程
- 技术发展趋势
- 熟悉数据仓库
- 代码规范
- 数据科学
- 协作精神
- 数据模型
- 团队协作
- 性能优化
- 鼓励员工
- 数据处理
- 编程习惯
- 关系型数据库
- 解决能力
- 问题解决能力
- 开发效率
- 调试技巧
- 熟悉分布式
- 分析结果
- 较强的学习
- 数据技术
- 存储过程
- 分布式系统
- 学习能力
- 发展趋势
- 项目开发经验
- 海量数据
- 快速定位
- 技术发展
- 数据分析和挖掘
- 数据备份
- 技术方案
- 技术框架
- 开发与维护
- 数据分析
- 紧密合作
- 沟通能力
- 技术难题
- 熟悉数据
- 数据相关
- 程序开发
- 开发工作
- 编程基础
- 良好的团队协
- 问题解决
- 及时发现
- 团队协作精神
- 高可用性
- 数据仓库建模
- 团队建设
- 数据开发
- 开发经验
- 大数据开发
- 数据采集
数据来自CSL职业科学研究室
工作时间
公司福利
- 交通补助
- 节日福利
- 通讯补贴
- 住房补贴
- 团建聚餐
- 餐补
- 带薪年假
- 全勤奖
- 加班补助
- 年终奖
- 定期体检
- 五险一金