1、设计和实施大模型的评测方案，包含但不局限于准确率、鲁棒性、性能(néng)测试以及制定各种评测指标，对大模型进行全面评估，确保模型产(chǎn)品在不同的场景下的表现符合业務(wù)预期。 2、与产(chǎn)品、研发、业務(wù)部门紧密合作(zuò)，了解业務(wù)需求，确保智能(néng)體(tǐ)、模型评测方案的有(yǒu)效性。 3、分(fēn)析评测结果，识别智能(néng)體(tǐ)、模型瓶颈与不足，提出优化方案，协助提升准确率与响应速度。 4、跟踪最新(xīn)评测方法，参与开发AI大模型相关的评测框架，提高评测效率和准确率； 5、与团队成员进行有(yǒu)效沟通，促进团队的进步和成長(cháng)。

1、本科(kē)及以上學(xué)历，计算机科(kē)學(xué)、人工(gōng)智能(néng)、大数据等相关专业，有(yǒu)1年及以上AI大模型测试经验优先。 2、至少掌握Python 、Java 一种高级编程语言，熟悉LLM,VLM评测方案，有(yǒu)丰富模型评测经验，熟悉评测指标和方法，熟悉大模型技(jì )术栈（如Transformer、RLHF）。 3、良好的团队合作(zuò)精(jīng)神，对新(xīn)技(jì )术高度敏感，乐于接受挑战，共同推动项目成功。