面壁智能

【岗位职责】 本职位将及时跟踪AIGC技术前沿，承担高性能基础模评测与前沿技术的效果评估工作，驱动模型迭代与优化，直接影响前沿技术落地效果与用户体验： 1. 研究并跟踪国内外最新的大模型技术进展，搭建和维护科学、高效、可扩展的模型评测体系； 2. 深入参与团队内部模型训练的性能分析与评估，尤其聚焦在基础模型、多模态（图像、语音、Agent）和前沿技术（如强化学习对齐、Prompt工程）等方向的能力定量分析； 3. 分析评测结果，挖掘模型潜在瓶颈并提出改进建议，持续提升模型的质量与用户体验； 4. 参与制定模型评测的中长期规划，推动评测工具与流程自动化和标准化，构建业界领先的评测体系。 【任职要求】 1. 计算机、人工智能相关专业本科及以上学历； 2. 有机器学习、数据挖掘或算法评测相关工作经验，了解一些当前模型的评测方法和指标体系，能力优秀的同学可适当降低年限要求； 3. 熟练掌握Python/Java/C++中至少一种编程语言，了解常见深度学习框架（如PyTorch、TensorFlow）以及常见的评测框架（如OpenCompass/VLMEvalKit/EvalScope等等）； 4. 具备优秀的分析问题与解决问题的能力，对前沿技术具备敏锐的洞察力。 满足以下要求者优先考虑： 1. 有大模型训练、模型应用落地和性能优化相关经历； 2. 有大规模模型评测框架搭建或优化经验，或者熟悉业界主流评测工具与方法者； 3. 在NeurIPS、ICML、ACL、SIGKDD、CVPR等国际顶级会议上发表论文，或有相关竞赛获奖经历者。