职位&公司对比

招聘中
  • 互联网
  • 不需要融资
招聘中

数据平台/数据仓库开发

-K·薪
某大型电子商务公司

职位详情

  • 上海
  • 3-5年
  • 本科
  • Linux
  • 数据库开发
  • 数据架构

岗位描述: 1、基于分布式直聘计算系统的数据开发,包括离线计算和实时计算 2、对不同类型数据进行分析直聘,数据建模,构建合理的数据架构 3、分析数据合理性,有效处理数据质量来自BOSS直聘问题,改善数据质量 岗位要求: 1、至少掌握一种主流数据库,如ORACLE,DB2,MYSQL等,精通SQL语句 2、熟悉Hadoop等分布式开发平台,有实际kanzhun数据开发经验 3、熟悉Linux系统,并具备Python, shel直聘l等脚本语言开发能力 4、三年以上工作经验

职位详情

  • 上海
  • 3-5年
  • 本科
  • 要求数据开发经验
  • 数据平台开发经验
  • 数据仓库开发经验
  • Spark
  • Hive
  • Flink
  • HBase
  • Clickhouse
  • 实时数仓开发经验
  • 非外包类
  • Java
  • Scala
  • Go

数据平台开发 岗位职责(工作要求、业务要求、工作权限等) 1、面向互联网金融风控及用户增长业务,打造领先的数据资产平台,通过在线数据分析、离线数据挖掘、实时数据特征、离线数据仓库等方式管理用户数据,建设覆盖互联网金融全场景的数据智能解决方案; 2、负责机器学习平台、模型推理平台,用户画像特征平台、知识图谱平台和分布式计算平台的构建和迭代,打造业界领先的存储、计算等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施; 3、负责海量用户行为数据的挖掘,在分布式计算平台基础上,进行大规模画像特征和实时行为特直聘征建设,构建大规模特征集市; 4、负责基于业务需求,以数据为驱动,研发和改进智能辅助决策平台,辅助业务场景的开展和优化; 5、负责大数据基础设施和平台的改进,解决大规模生产环境集群可用性和性能优化问题。 任职要求(学历、专业、行为能力等) 1、本科及以上学历,计算直聘机/数学/物理等相关专业; 2、熟悉Java、Go、Python等至少一门常用语言,有一定分布式计算框架或流式计算框架使用经验,对数据仓库建模有一定概念,对数据结构和算法设计有较为深刻的理解; 3、熟悉SpringMVC、SpringBoot、MySQL、Redis、Kafka、Spark、Flink等框架和中间件使用经验,对框架原理源码有一定研究,有一定大规模,高并发服务经验,有一定的系统性能调优经验,有一定的大数据任务优化经验; 4、有数据挖掘、智能风控、知识图谱实际项目经验者优先考虑。 数据仓库开发: 工作职责直聘 1. 负责金融信贷业务离线或实时数据仓库的规划、设计及落地。为数据产品团队、业务团队提供高效的数据支持; 2. 负责金融信贷业务离线或实时特征开发、部署及服务化。面向风控团队提供快速稳定的数服务; 任职要求(学历、专业、行为能力等) 1. 5年以上数据仓库(DW)/商业智能(BI)/数据统计相关工作经验; 2. 熟悉数据仓库体系架构、熟悉常见的数据建模方法与数据治理等相关知识;具备较强的业务理解和抽象能力; 3. 熟练掌握SQL、熟悉HQL执行计划、了解底层执行原理、具备调优与优化的能力; 4. 熟来自BOSS直聘悉主流的大数据处理、实时处理技术;如Hadoop、Spark、Flink、Kafka等; 5. 熟悉ES/Druid/Doris/Clickhouse等OLAP引擎一种或以上;了解Python/Java/Scala等开发语言一种或以上; 6. 有金融、风控、流量、国际化数据建设经验者优先;

技能解析

专有技能
  • 脚本语言
  • MYSQL
  • 数据质量
  • 精通SQL
  • ORACLE
  • SQL语句
  • 数据进行分析
  • 质量问题
  • 数据开发
  • 数据架构
  • 分析数据
  • 主流数据库
  • 开发能力
  • 开发经验
相同技能
  • 分布式计算
  • 数据建模

数据来自CSL职业科学研究室

技能解析

专有技能
  • 性能调优
  • 数据统计
  • 系统性能
  • 抽象能力
  • 海量数据
  • 数据仓库
  • 用户行为数据
  • 熟悉数据仓库
  • 数据分析
  • 机器学习
  • 熟悉数据
  • 性能优化
  • 算法设计
  • 数据处理
  • 数据挖掘
  • 数据产品
  • 建模方法
  • 数据结构和算法
  • 实时数据
  • 数据结构和算
  • 知识图谱
  • 数据服务
  • 数据结构
  • 数据支持
  • 解决方案
  • 数据治理
  • 对数据结构
  • 分布式系统
  • 数据仓库建模
  • 用户行为
  • 开发语言
相同技能
  • 分布式计算
  • 数据建模

数据来自CSL职业科学研究室

公司福利

  • 五险一金
  • 补充医疗保险
  • 定期体检
  • 加班补助
  • 年终奖
  • 带薪年假
  • 节日福利
  • 零食下午茶

备注

职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。

更新于 2025-05-09