文/羊城晚报全媒体记者 潘亮 实习生 陈姿含图/受访者提供
近日，《麻省理工科技评论》中国最新发布的大模型评测报告显示，讯飞星火认知大模型V2.0在此次评测中以 81.5 分（百分制计）的成绩在本次评测中登顶，荣获“最聪明”的国产大模型称号。
《麻省理工科技评论》中国从研发和商业化能力、外界态度以及发展趋势等维度全方位检测大模型的能力，选取了“讯飞星火”“百度文心一言”“商汤商量”“阿里通义千问”作为中文大模型平台的代表，使用盲评方式，客观评估国产大模型的聪明程度。
本次评测使用的测试集包含600道题目，覆盖了语言专项、数学专项、理科综合、文科综合、逻辑思维、编程能力、综合知识、安全性共 8 个一级大类，126 个二级分类，290 个三级标签，并针对问题的丰富性和多样性做了优化。在本次评测中，讯飞星火在 6 个一级大类中得分率均排名第一，表现十分全面。尤其是在代码生成、数学能力、理科与逻辑等方面优势明显，是本次“最聪明的理科生”。
值得一提的是，从题型角度来看，主观简答题中讯飞星火凭借 83.98% 的得分率位居第一；而在客观题上，讯飞星火以 75.7% 的得分率排名第一，在主客观题型中均有良好表现。8月12日，新华社研究院中国企业发展研究中心发布《人工智能大模型体验报告2.0》，其中讯飞星火V1.5位列本次国产主流大模型测评榜首位，在四大评测维度中的智商指数和工具提效指数两个维度获得第一。
8月15日，讯飞星火认知大模型V2.0如期发布。技术获得重大突破的同时，其应用和产品也越来越丰富：既有辅助程序员高效工作的智能编码助手iFlyCode1.0、能够进行视频创作的讯飞智作2.0、能够便捷搭建轻应用的教育数字基座应用开发助手，还有帮助教师设计教学活动、一键生成课件的星火教师助手、面向英语学习者口语练习的星火语伴2.0，讯飞AI学习机也升级AI 1对1智能编程助手和AI 1对1创意绘画伙伴。此外，科大讯飞还和华为联合发布星火一体机，让每一家企业都有机会构建专属大模型。
来源 | 羊城晚报•羊城派责编 | 黄颖琳校对 | 桂晴
Related posts
