大模型评测算法工程师

1. 参与大模型评测算法的设计与开发，构建贴近用户真实场景的评测基准，涵盖纯文本、图文、视频、Agent等多种场景。
2. 探索并落地评测分析能力，挖掘模型问题，提出改进建议，支持模型优化迭代。
3. 调研AI领域最新技术，协助团队引入创新评测方法。
5. 跟踪AI领域前沿技术，团队协作，完成算法评测相关科研任务。

1. 计算机、人工智能或相关专业硕士及以上学历，具备算法理论基础。
2. 研究方向聚焦LLM、MLLM、Agent相关领域，该领域有代表性科研成果。
3. 具备丰富的大模型或Agent算法评测经验，熟悉CV或NLP评测方法。
4. 熟悉Python、TensorFlow或PyTorch等开发工具，了解LLM、MLLM、Agent部署等，了解自动化测试流程。
5. 具备较强的数据分析能力和团队协作意识，善于解决技术问题。
6. 具备出色的逻辑思维、独立思考能力、分析能力和快速学习能力、对大模型前沿动向有足够的热情和好奇心。
7. 以上条件满足3点即可。在ICLR、ICML、ACL等顶会发表过论文者优先。