职位&公司对比

职位详情

• 上海
• 3-5年
• 本科

• 要求数据开发经验
• 数据平台开发经验
• 数据仓库开发经验
• Spark
• Hive
• Flink
• HBase
• Clickhouse
• 实时数仓开发经验
• 非外包类
• Java
• Scala
• Go

数据平台开发 岗位职责（工作要求、业务要求、工作权限等） 1、面向互联网金融风控及用户增长业务，打造领先的数据资产平台，通过在线数据分析、离线数据挖掘、实时数据特征、离线数据仓库等方式管理用户数据，建设覆盖互联网金融全场景的数据智能解决方案； 2、负责机器学习平台、模型推理平台，用户画像特征平台、知识图谱平台和分布式计算平台的构建和迭代，打造业界领先的存储、计算直聘等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施； 3、负责海量用户行为数据的挖掘，在分布式计算平台基础上，进行大规模画像特征和实时行为特征建设，构建大规模特征集市； 4、负责基于业务需求，以数据为驱动，研发和改进智能辅助决策平台，辅助业务场景的开展和优化； 5、负责大数据基础设施和平台的改进，解决大规模生产环境集群可来自BOSS直聘用性和性能优化问题。 任职要求（学历、专业、行为能力等） 1、本科及以上学历，计算机/数学/物理等相关专业； 2、熟悉Java、Go、Python等至少一门常用语言，有一定分布式计算框架或流式计算框架使用经验，对数据仓库建模有一定概念，对数据结构和算法设计有较为深刻的理解； 3、熟悉SpringMVC、SpringBoot、MySQL、Redis、Kafka、Spark、Flink等框架和中间件使用经验，对框架原理源码有一定研究，有一定大规模，高并发服务经验，有一定的系BOSS直聘统性能调优经验，有一定的大数据任务优化经验； 4、有数据挖掘、智能风控、知识图谱实际项目经验者优先考虑。 数据仓库开发： 工作职责 1. 负责金融信贷业务离线或实时数据仓库的规划、设计及落地。为数据产品团队、业务团队提供高效的数据支持； 2. 负责金融信贷业务离线或实时特征开发、部署直聘及服务化。面向风控团队提供快速稳定的数据服务； 任职要求（学历、专业、行为能力等） 1. 5年以上数据仓库(DW)/商业智能(BI)/数据统计相关工作经验； 2. 熟悉数据仓库体系架构、熟悉常见的数据建模方法与数据治理等相关知识；具备较强的业务理解和抽象能力； 3. 熟练掌握SQL、熟悉HQL执行计划、了解底层执行原理、具备调优与优化的能力； 4. 熟悉主流的大数据boss处理、实时处理技术；如Hadoop、Spark、Flink、Kafka等； 5. 熟悉ES/Druid/Doris/Clickhouse等OLAP引擎一种或以上；了解Python/Java/Scala等开发语言一种或以上； 6. 有金融、风控、流量、国际化数据建设经验者优先；