近3000道题,商汤大模型拿了金牌
2024-11-08 15:32:19AI云资讯16245
模型表现好,金牌少不了。
刚刚,中文大模型测评基准SuperCLUE发布《中文大模型基准测评2024年10月报告》:
商汤日日新·商量大模型(SenseChat5.5)凭借出色的能力表现,总得分位列国内大模型第一梯队,获得金牌。
本次SuperCLUE10月报告覆盖23个国内模型,聚焦语言大模型的通用能力评估,分为三大维度:除了考察“文科”、“理科”基础能力外,还有考察模型更高阶能力的“Hard”附加任务,总共2900+道题:
【理科任务】分为计算、逻辑推理、代码、工具使用测评集;
【文科任务】分为知识百科、语言理解、长文本、角色扮演、生成与创作、安全六大测评集;
【Hard任务】分为精确指令遵循测评集,复杂任务高阶推理测评集。
商汤SenseChat5.5在多项评测任务中均位列第一梯队,文科中语言理解、安全等维度表现突出,也是理科中逻辑推理、代码学科的“尖子生”。
值得注意的是,在【Hard】的两项任务——精准指令遵循和高阶推理中,商汤SenseChat5.5是唯一两项任务均位于国内第一梯队的大模型,体现了模型优秀的复杂推理智能。
未来,商汤将继续坚持基础大模型的持续研发与投入,不断提升真正高阶推理及“慢思考”能力。
相关文章
- 商汤即将召开产品发布周:技术实用主义重塑AI产品
- 超越芯片预设上限!记忆张量与商汤大装置实现国产 GPGPU 体系级性能与成本双突破
- 商汤大装置获信通院“算模数用”三大奖项,彰显AI基础设施全栈实力
- 商汤元萝卜联动疯狂动物城推出朱迪系列新品,以用户体验传递成长力量
- 上海博物馆×商汤科技:AI助手上线,逛馆告别“人挤人”
- 商汤科技与正大集团共探AI与实体经济融合新机遇
- 商汤大装置AI Agent Infra实践,加速智能时代创新效能
- 商汤杨帆出席2025年国家网安周企业家座谈会
- 商汤大装置赋能绿盟科技,助力风云卫AI安全能力平台建设
- 商汤2025年中期业绩超市场预期:半年营收达24亿元,同比飙升36%
- 商汤2025年中期业绩:营收超市场预期达24亿元,同比增长36%
- 商汤大装置跻身中国大模型平台市场头部厂商,万象平台加速AI落地“最后一公里”
- 重磅!商汤元萝卜联动疯狂动物城发布朱迪系列新品
- 商汤科技连续九年领跑中国计算机视觉市场,CV 2.0时代再显龙头实力
- 千亿市场国产化!紫光汉图X商汤日日新:多模态AI打造“会判作业”的打印机
- 商汤大装置 x 铁一院:多模态大模型赋能铁路勘察设计,让70年经验“活”起来









