职位&公司对比
职位详情
- 成都
- 1-3年
- 本科
- 计算机相关专业
- 大数据开发经验
- 数仓建设经验
岗位职责: 1.交流和理解客户业务需求,根据业务需求进行数据模型的调研、设计、开发及验证工作,并持续进行模型的优化,推动研发团队提升产品体验; 2.负责相关产品的数据库和大数据需求分析、架构设计和具体实现,完成业务方向的落地; 3.参与大数据产品、解决方案的技术规划、解决方案架构设计,执行产品研发中的数据库、大数据相关的设计和开发任务; 4.负责完成数据规则的定义、数据模型的建立、数据清洗、数据迁移等工作; 5.对数据处理过程中的问题进行准确的分析和定位,并解决问题; 6.负责包括数据标准在内的项目相关的技术文档的输出; 7.培训与指导客户使用大数据产品。 任职要求: 1.计算机或相关专业,大学统招本科及以上学历; 2.两年以上数据库、大数据相关产品的软件设计开发相关工作经验,关系数据库和分布式存储的基础理论知识扎实; 3.精通SQL、对SQL调优有一定的经验,熟练使用Java及相关技术框架; 4.精通大数BOSS直聘据相关的开源技术:Hadoop、来自BOSS直聘Hive、Kafka、Flink、Spark、ElasticSearch等; 5.熟练掌握数据分析相关理论和实践,熟悉数仓开发; 6.熟悉大数据相关的资源调度组件、任务调度组件和相关开源框架,并具备对相关开源框架的改造能力; 7.了解boss微服务架构,了解API Gateway相关技术和开源框架; 8.性格积极乐观,具有良好的沟通能力、组织能力及团队协作精神,有较强的分析和解决问题的能力; 9.深刻理解软件设计原则和设计模式,独立承担过大中型系统数据架构和数据库设计开发工作优先。
职位详情
- 成都
- 3-5年
- 本科
- Hive
- 要求数据开发经验
- Hive原理/源码
- 大数据引擎开发经验
- Hadoop
- MySQL/SQL Server
- BI报表开发经验
- 数据平台开发经验
- 数据仓库开发经验
- SQL
Data Engineer -A Level Key Responsibilities: • 负责企业级数据仓库的Hive模型设计、开发与性能优化,日均处理PB级数据 • 编写高来自BOSS直聘效HQL脚本,开发ETL流程及数据清洗规则,保障数据质量(数据准确率≥99.98%) • 基于Hive on Spark/Tez进行查询优化,降低集群资源消耗20%+ • 设计分区表、分桶表及数据存储策略,搭建元数据管理体系 • boss与BI团队协作开发ADS层数据模boss型,支撑实时看板与决策分析 • 参与数据治理,制定Hive表生命周期管理规范 Job Requirements:直聘 • Essential Skills: 精通Hive原理及调优技巧(熟悉LLAP、CBO优先) 熟练编写复杂HQL(窗口函数、UDF开发经验) 熟悉Hadoop生态(HDFS/ YARN/ HBase/Flume) 掌握数据仓库分层建模(Kimball/ Inmon方法论) 具备SparkSQL/Flink集成开发经验 Qualifications: • 计算机相关专业本科以上,3年以上大数据开发经验 • 主导过至少2个完整数仓项目落地(需提供GitHub/文档样例) • 熟悉敏捷开发流程,具备CI/CD实践经验 • 有life science行业经验 • 英语读写要求
技能解析
- 指导客户
- 团队协作精
- 具有良好的沟
- 熟悉大数据
- 需求分析
- 精通SQL
- 技术框架
- 架构设计
- 分布式存储
- 组织能力
- 关系数据
- 数据架构
- 数据分析
- 沟通能力
- 验证工作
- 协作精神
- 数据相关
- 服务架构
- 开源框架
- 数据处理
- 开发工作
- 分析和解决问题的能力
- 数据产品
- 开发任务
- 解决问题的能力
- 开源技术
- 软件设计
- 解决问题
- 设计开发
- SQL调优
- 设计模式
- 数据库设计
- 关系数据库
- 较强的分析
- 解决方案
- 开发相关
- 团队协作精神
- 产品研发
- 好的沟通
- 系统数据
- 分析和解决问题
- 技术文档
- 数据模型
- 团队协作
- 数据清洗
数据来自CSL职业科学研究室
技能解析
- 数据管理
- 数据仓库
- 数据质量
- 元数据管理
- 开发流程
- YARN
- 生命周期
- 数据开发
- 数据存储
- 模型设计
- 数据治理
- 性能优化
- 开发经验
- 敏捷开发
- 大数据开发
- 管理体系
- 英语读写
- 数据模型
- 团队协作
- 数据清洗
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 五险一金
- 定期体检
- 年终奖
- 带薪年假
- 餐补
- 通讯补贴
- 交通补助
- 节日福利
- 生日福利
- 工作居住证