大模型评估

岗位职责： 1. 负责视频生成、视频可控应用、多模态理解大模型、音视频生成大模型等相关方向算法项目的交付质量保障，涵盖数据集设计与完善、标注质量审核、成果验收及评测报告输出； 2. 开展音视频质量评估工作，对大模型生成的音视频内容进行主观评价，重点评估视频编辑能力、可控性表现，以及画面表现力、音频清晰度、播放流畅性、音画同步匹配度等方面，提供专业化的评估意见； 3. 参与评测方案的制定与落地执行，负责测试集构建，组织并指导标注团队开展工作，确保标注结果准确可靠，保障评测结论的有效性； 4. 对评测过程中产生的各类数据进行系统整理与深入分析，识别音视频生成中的潜在问题，输出完整的评测报告，为项目组提供专业参考和优化建议，助力模型迭代提升； 5. 跟进竞品动态，开展竞品分析，参与算法效果对比、问题归因分析及行业评测方法的研究与探索。 任职要求： 1. 具备视频生成、视频可控应用、多模态理解大模型、音视频生成大模型等相关领域项目质量管控经验，熟悉数据集建设、标注质量检查、交付验收流程及评测报告撰写； 2. 能够独立完成大模型生成音视频的主观质量评估，熟练判断视频功能实现、音频清晰度、流畅性及与画面内容的一致性，并给出专业评估结论； 3. 具有评测方案设计与实施能力，能参与测试集规划，具备对标注团队的培训与管理经验，可有效控制标注质量和评测准确性； 4. 具备良好的数据分析能力，能够从评测数据中发现问题、归纳规律，形成高质量的分析报告，为模型优化提供有力支持； 5. 关注行业动态，有竞品调研经验，能参与算法效果评估、问题溯源分析及前沿评测技术的探索工作。