职位&公司对比

职位详情

• 广州
• 3-5年
• 本科

• 大数据开发经验

职位描述： 1. 使用Java开发实时数据流处理应用程序，包括Flink和Spark Streaming。 2. 设计和实现Java接口，确保系统组件之间的顺畅通信。 3. 对大数据处理框架（如Apache Spark、Hadoop、Flink等）的各组件进行性能监控和分析，并提供优化建议。 4. 处理大规模数据集，包括在Hadoop、HBase、MPP数据库、PostgreSQL、Greenplum等存储系统中进行数据操作。 5. 参与大数据项目的需求分析、系统架构设计、并完成需求设计相应文档的编写。 6. 从事大数据平台或大数据产品的设计、开发、优化工作。 7. 进行大数据相关的新技术研究，提高技术创新能力。 职位要求： 1. 本科及以上学历，5年以上大数据开发经验，计算机相关专业。 2kanzhun. 精通Java编程语言，具有Flink和Spark Streaming实时数据处理经验。 3. 掌握Spring框架，能够设计和实现Java接口，并熟悉RESTful API设计和开发。 4. 熟悉Scala和Python等多种开发语言，能够根据项目需求选择合适的语言。 5. 熟悉业界常见的数据平台、产品和工具，如Hadoopkanzhun、腾讯TBDS，并熟悉开源大数据平台核心组件的工作原理。 6. 熟练使用HDFS、Hive、HBase、ES、Redis、Spark、Flink、Kafka等开源组件。 7. 熟悉事务型数据库(如Oracle、MySQL、PostgreSQL、SQL Server等)和BOSS直聘分析型数据库(如Greenplum等)，具有丰富的SQL语言开发经验和数据库调优经验。 8. 熟练使用Shell脚本和命令，进行数据处理、文件操作等任务，确保高效的大数据处理。 9. 良好的沟通能力、表达能力和文档编写能力。 10. 良好的抗压能力和团队协作能力。 11. 参与过电网、电力等能源行业BOSS直聘的数据加工和开发者优先。 12. 参与过电力及能源行业指标开发、标签模型设计优先。