最新中文大模型测评:百川智能 Baichuan 3 国内第

2024-04-30 20:17:06

  从百川大模型官方获悉,今日国内大模型评测机构 SuperCLUE 发布了SuperCLUE 是国内通用大模型综合性测评基准,其前身是第三方中文语言理解测评基准 CLUE。不同于传统测评通过选择题形式的测评,SuperCLUE 纳入了开放主观问题的测评。通过多维度多视角多层次的评测体系以及对话的形式,模拟大模型应用场景,真实有效的考察模型生成能力。同时,SuperCLUE 通过构建多轮对话场景,更深层次考察大模型在真实多轮对话场景的应用效果,对大模型的上下文、记忆、对话能力全方位评测。

  据介绍,SuperCLUE 本次测评由十大基础任务组成,包括逻辑推理、代码、语言理解、长文本、角色扮演等,题目为多轮开放式简答题。评测集共 2194 题。

  测试结果显示,

下一篇:华为新款笔记本通过 3C 认证:酷睿 Ultra、X Pro 同
上一篇:七彩虹推出 iGame Mini 系列主机:显卡视窗设计、
返回顶部小火箭