CMMLU

AI模型评测 2023-12-14

CMMLU是一个综合性的中文评估基准,专门用于评估语言模型在中文语境下的知识和推理能力,涵盖了从基础学科到高级专业水平的67个主题。它包括:需要计算和推理的自然科学,需要知识的人文科学和社会科学,以及需要生活常识的中国驾驶规则等。此外,CMMLU中的许多任务具有中国特定的答案,可能在其他地区或语言中并不普遍适用。因此是一个完全中国化的中文测试基准。

©️版权声明:本网站活动转载来源网络,转载目的仅用于网络信息分享,请用户注意自行甄别虚假信息,谨防受骗! 用户参与活动需在活动方活动规则之内,活动中不得涉及违法行为且与本文无关,用户任何违法行为均与本站无关。 活动中涉及的活动规则、活动奖励及最终解释权归主办方所有。 如有侵权,请迅速联系我们删除。

相关文章