职位&公司对比
职位详情
- 大连
- 1-3年
- 本科
- C#
- Java
- Hadoop
岗位职责: kanzhun 1、 开发与测试基于HDFS、Map/Rbosseduce、Hive与Hbase等的功能与代码,满足面向大数据分析的实际业务需求; 2、 开发与测试基于Spark技术或R语言的海量数据分析处理的功能与代码。 任职要求: 1、 学历不限,精通JAVA,熟悉Hadoop/Spark的体系结构与运行机制,对相关源码有深入研究; 2、 熟悉HDFS、Map/Reduce、Hive与Hbase等相关技术, 有Map/Reduce 程序的实战开发经验,熟悉Hadoo来自BOSS直聘p运行监控与调优技术; 3、 有kafka,flume或esb等数据集成经验,或者机器学习与数据挖掘经验尤佳; 4、 具有很强的团队意识和沟通能力,学习能力和工作主BOSS直聘动性强,个性开朗、充满激情、乐于接受挑战,可在大连稳定kanzhun工作。
职位详情
- 大连
- 3-5年
- 本科
- 要求数据开发经验
- 数据平台开发经验
- 其他
- Java
- 计算机相关专业
主要职责: 1、设计并优化数据架构,包括数据仓库、数据湖、数据流等,确保数据的可扩展性、可靠性和安全性。 2、开发并维护数据管道,包括数据的抽取(ETL/ELT)、转换、加载过程,实现数据的自动化流动和集成。 3、制定并执行数据质量策略,监控数据质量,发现并解决数据不一致性、错误等问题,确保数据的准确性和完整性。 4、根据业务需求和数据特性,选择合适的存储解决方案(如关系型数据库、NoSQL数据库、分布式存储系统等),并优化数据索引和查询性能。 5、确保数据的安全性和合规性,遵守相关法律法规和公司政策,实施数据加密、访问控制、审计等措施。 6、对数据处理和查询过程进行性能调优,提升数据处理的效率和响应速度。 7、为数据分析师、数据科学家等团队成员提供技术支持,编写数据架构、数据管道等相关文档,促进知识共享和团队协作。 8、关注数据工程领域的新技术、新工具和新方法,评估其适用性,并推动在团队中的应用。 任职要求: 本科及以上学历,计算机科学、信息技术、数学、统计学等相关专业毕业。 具备3年以上数据分析或相关领域工作经验,有政府、公安、反欺诈、金融风控等领域经验者优先。 专业技能: 1.熟练掌握至少一种编程语言(如Java直聘、Python、Scala等),具备良boss好的编程能力。 2.熟悉数据仓库和数据湖技术,了解Hadoop、Spark、Hive、Kafka等大数据处理框架。 3.熟悉关系型数据库(如MySQL、Oracle、PostgreSQL)和非关系型数据库(如MongoDB、Redis、Cassandra)的使用。 4.了解数据ETL/ELT过程,熟悉相关工具和框架(如Apache NiFi、Talend、Informatica等)。 4、具备数据架构设计能力,能够根据业务需求设计合理的数据架构和数据模型。 5BOSS直聘、具备强大的问题解决能力,BOSS直聘能够快速定位并解决数据处理过程中遇到的问题。 6、良好的沟通与协作能力,能够与团队成员、业务部门和其他利益相关者有效沟通,共同推动项目进展。 7、具备持续学习的能力,紧跟技术发展趋势,不断提升自己的技能水平。 8、对数据质量负责,具备较强的责任心和抗压能力,能够在高强度的工作环境下保持高效的工作状态。
技能解析
- JAVA
- 精通JAVA
- 大数据分析
- 学习能力和
- 海量数据
- 机器学习
- 沟通能力
- 开发经验
- 团队意识
- 学习能力
- 数据挖掘
- 数据分析
数据来自CSL职业科学研究室
技能解析
- 性能调优
- 数据处理框架
- 设计能力
- 数据仓库
- 快速定位
- 数据质量
- 技术发展
- 法律法规
- 编程语言
- 分布式存储
- 架构设计
- 技术发展趋势
- 熟悉数据仓库
- 数据架构
- 数据科学
- 质量负责
- 熟悉数据
- 团队协作
- 数据模型
- 信息技术
- 有效沟通
- 沟通与协作
- 相关法律法规
- 数据处理
- 关系型数据库
- 解决能力
- 问题解决能力
- SQL数据库
- 可扩展性
- 编程能力
- 问题解决
- 项目进展
- 监控数据
- 高效的工作
- 解决方案
- 协作能力
- 提供技术支持
- 好的沟通
- 良好的沟通与
- 发展趋势
- 数据分析
数据来自CSL职业科学研究室
工作时间
公司福利
- 五险一金
备注
职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。