职位描述
1. 前沿多模态模型辅助研发:参与通用人形机器人 Omni 多模态大模型研发,协助开展文本、视觉、语音、动作等多模态统一表征、理解、推理相关实验验证,跟进前沿多模态算法复现与效果对比。
2. 算法实验与架构迭代支撑:协助研究员完成跨模态对齐、时序建模、流式交互、多模态生成等核心模块实验,参与模型小规模调参、消融实验、结果分析,输出标准化实验报告。
3. 多模态数据与训练辅助工作:参与多模态数据集清洗、标注校验、数据配比、质量评估;协助完成预训练、微调、偏好对齐等流程脚本开发,跟进小规模训练任务,记录训练日志、定位基础训练异常。
4. 机器人场景落地配套工作:配合工程师完成大模型与机器人感知、认知模块联调测试,完成交互场景功能验证、效果记录,整理场景落地问题清单。
5. 端侧推理优化辅助:协助开展模型量化、蒸馏、推理测速等基础实验,整理不同硬件平台下的时延、性能数据,撰写优化对比文档。
6. 前沿技术调研沉淀:跟进多模态大模型领域的学术与产业前沿进展,定期输出技术调研简报;协助整理专利、实验材料、技术文档。