职位&公司对比

职位详情

• 上海
• 本科
• 在校/应届

• 接受无数据开发经验
• 接受实习/在校生投递
• Hadoop
• Hive
• Spark
• Flink

我们正在寻找有激情和热情，愿意探索大数据技术领域的实习生加入我们的团队。本实习生将有机会参与到大数据系统开发的各个方面，从数据采集整合到实时数据流处理，从数据仓库管理到数据分析与报告，以及数据安全和合规方面的工作。这是一个独特的机会，可以接触到大数据领域的最前沿技术，并在实践中积累宝贵的经验。 职责和任务: 1.参与开发日均增量百亿级以上离线数据仓库处理技术，包括数据采集、整合和存储。 2.协助实现日均十亿级数据流的实时处理技术，使用分布式计算框架boss如Spark和FLiBOSS直聘nk。 3.参与构建多类数据源的数据湖，以满足不同业务需求。 来自BOSS直聘4.协助优化开源数据库和其他大数据介质，确保高性能和可扩展性。 遵循企业级大数据标准化操作、数据安全标准和数据权限控制等相关规范。 5.使用分布式存储和计算框架BOSS直聘，包括HDFS、PG\GP、CK、S3/COS/OSS等。 6.开发数仓整合ETL过程，包括使用云端介质如wedata和perl脚本。 7.配置和管理消息处理介质，如Kafka和MQ，确保数据可靠传输。 8.参与容器化和部署工作，使用Docker和K8s等技术。 9.协助开发工作，使用编程语言如Python和Go。 要求: 1.对大数据技术领域有浓厚兴趣，愿意学习和解决复杂的技术问题。 2.具备编程基础，熟悉Python和Go等开发语言者优先。 3.对分来自BOSS直聘布式存储、计算框架以及容器化技术有一定了解者优先。 4.良好的团队合作能力和沟通技巧。 5.积极主动，有责任感，能够独立工作和解决问题。 6.快速学习者，能够迅速适应新技术和工作环境。 7.热爱挑战，对自我提升有追求。