职位&公司对比

招聘中

高级程序开发

-K
  • 企业服务
  • 未融资
招聘中

spark引擎研发

-K·薪
  • 互联网

职位详情

  • 北京
  • 5-10年
  • 本科
  • 技术管理
  • 系统架构
  • 高级技术管理

岗位职责: 1、基于JAVA、Groovy、C#的程序开发; 2、搭建系统开发环境,完成系统框架和代码编写及调试; 3、独立完成开发工作、调试,解决开发中的技术问题; 4、 关注新技术并合理应用以提高工作效率。 任职要求: 1、大学本科以上学历,专业不限; 2、熟悉数据库技术boss,能使用ORACLE/MYSQL/SQL SERVER的一种以上;BOSS直聘 3、熟练掌握.NET Framework(C#)或者JAVA开发,能开发C/S和B/S构架的应用程序;熟悉AJAX、JSON,并了解前端MVkanzhunC技术能与后台数据的交互; 4、熟悉HTML5,Javascbossript,熟悉HTML5,Javascript,CSS并有Single Page Application、Responsive Web Design经验;掌握Android, iOS手机开发者优先; 5、熟练使用node.js, JQuery、Angular.JS、React.JS、Bootstrap等框架,并至少精通一种以上; 6、熟悉apache, nginx, tomcat配置及部署; 7、做事严谨踏实,责任心强,条理清楚,善于学习总结,有良好的团队合作精神和沟通协调能力

职位详情

  • 北京
  • 3-5年
  • 本科
  • 互联网/AI
  • 分布式
  • 引擎
  • spark

职位名称:Spark引擎研发工程师 工作地点: [北京] 薪资范围: 面议 职位描述 参与Apache Spark核心模块研发,负责Spark SQL、DataFrame、RDD等核心组件的功能开发、性能优化及稳定性提升。 深度优化Spark执行引擎,针对Shubossffle、内存管理、任务调度等模块进行调优,解决海量数据场景下的性能瓶颈。 设计与实现分布式计算新特性,结合业务需求BOSS直聘开发定制化功能(如查询优化、资源调度、容错机制。 解决大规模集群生产问题,分析并修复Spark在千亿级数据场景下的稳定性问题(如OOM、数据倾斜、Shuffle失败等)。 跟踪社区动态,参与Spark开源社区贡献,推动技术成果回馈社区。 任职要求 硬性要求: 计算机相关专业本科及以上学历,3年以上大数据领域开发经验。 精通Java/Scala,熟悉Spark内部机制(DAG调度、Catalyst优化器、Tungsten执引擎等)。 深入理解分布式系统原理,熟悉HDFS/YARN/K8s等生态组件。 具备性能调优经验,来自BOSS直聘能通过日志分析、JVM调优、代码改造提升作业效率。 有大规模集群(千台节点以上)运维或开发经验者优先。 加分项: 熟悉LLVM、向量化执行、C++底层优化经验 参与过Spark社区贡献或有开源项目经验 了解Flink/Presto/Trino等其他计算引擎 有机器学习框架(如TensorFlow/PyTorch)集成经验

技能解析

专有技能
  • JAVA
  • 熟悉数据库
  • 技术问题
  • JSON
  • HTML
  • ORACLE
  • 熟悉数据
  • 善于学习
  • 数据库技术
  • 熟悉HTML
  • 合作精神
  • 程序开发
  • 开发工作
  • 后台数据
  • 团队合作精神
  • MYSQL
  • 沟通协调
  • 系统开发
  • 团队合作
  • 协调能力
  • 代码编写
  • 沟通协调能力
  • HTML5
  • 开发环境
  • JAVA开发
  • AJAX

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 性能调优
    • 海量数据
    • 机器学习
    • 分布式计算
    • 性能优化
    • 开发经验
    • 分布式系统
    • JVM调优
    • 内存管理
    • YARN

      数据来自CSL职业科学研究室

      工作时间

      上午08:30   -   下午06:00
      更新于 2025-05-12