大数据开发工程师（数据湖方向） - Data-抖音/直播/电商/剪映

关于这个机会

团队介绍：推荐架构团队支撑字节跳动旗下多款APP产品，如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发，保障系统的稳定和高可用，致力于抽象系统通用组件和服务，建设推荐中台、数据中台；关于在线服务，在这里你有机会参与大规模机器学习在线预估框架的研发与优化，也有机会参与模型训练与调度等相关问题的研究与突破，解决系统瓶颈，降低成本开销；如你对大数据感兴趣，在这里也有机会参与通用实时计算系统的开发、构建统一的推荐特征中台，为推荐业务实现先进的消重、计数、特征服务等；我们期待热爱技术的你加入，一起创造更多可能。 1、为大规模推荐系统设计和实现合理的离线、实时数据架构； 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型； 3、生产系统的Troubleshooting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 4、打造业界领先的离线、在线存储、批式流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。

任职要求

1、2027届获得本科及以上学历； 2、对常见大数据计算系统Spark/Flink有框架源码级别了解，有过二次开发经验者优先；对Hudi、Iceberg、DeltaLake等至少一项数据湖技术有源码级别了解，有实践落地/二次开发等经验； 3、熟悉Java、C++、Scala等编程语言，有编码和trouble-shooting能力； 4、熟悉HDFS的原理和使用，对列式存储格式、Parquet/ORC的原理有了解加分；有其他大数据系统/框架经验加分（Hive、HBase、Kudu等）；有数仓建模经验加分； 5、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情，有PB级别数据处理经验加分。

内推申请说明

本站为独立内推协助平台。申请会交由管理员核实岗位与内推渠道，不等于已在公司官网投递；薪资、岗位状态和实际招聘流程以官方信息为准。