混元训练 Infra 工程师-Dataloader/Checkpoint 方向-(北京/深圳/上海/杭州)
Tencent Technology (Shenzhen) Co., Ltd.
北京Posted Aug 11, 2026via generic-json
1.分布式 Dataloader:多源数据加载框架研发,优化预处理流水线、IO 瓶颈与数据倾斜,对接对象存储 / 分布式文件系统,支持动态采样与增量更新;;
2.Checkpoint 管理:设计高吞吐存储 / 加载方案,优化压缩、分片与冷热分层,实现版本管理、备份恢复与分布式训练框架兼容;;
3.系统优化:监控吞吐 / 延迟 / 显存指标,定位性能瓶颈,保障极端场景下训练连续性;;
4.跨团队协作:对齐业务需求,沉淀技术最佳实践。。
Source URL: http://careers.tencent.com/jobdesc.html?postId=2064594834597003264