中国信通院启动 AI 大模型幻觉评测,总体涉及五种测试维度
创始人
2025-03-19 19:42:37
0

IT之家 3 月 19 日消息,IT之家从中国信通院官方微信公众号获悉,为摸清大模型的幻觉现状,推动大模型应用走深走实,中国信息通信研究院人工智能所基于前期的 AI Safety Benchmark 测评工作,发起大模型幻觉测试。

大模型幻觉(AI Hallucination)是指模型在生成内容或回答问题时,产生了看似合理,实则与用户输入不一致(忠实性幻觉)或者不符合事实(事实性幻觉)的内容。随着大模型在医疗、金融等关键领域广泛应用,大模型幻觉带来的潜在应用风险日益加剧,正得到业界的广泛关注。

本轮幻觉测试工作将以大语言模型为测试对象,涵盖了事实性幻觉和忠实性幻觉两种幻觉类型,具体测评体系如下:

测试数据包含 7000 余条中文测试样本,测试形式包括对应于忠实性幻觉检测的信息抽取与知识推理两类题型,以及对应事实性幻觉检测的事实判别题型。总体涉及人文科学、社会科学、自然科学、应用科学和形式科学五种测试维度。

中国信通院邀请各相关企业参与模型测评,共同推动大模型安全应用。

相关内容

热门资讯

中科宇航IPO辅导完成 “商业... 近期,国内商业航天领域传来振奋消息,中科宇航技术股份有限公司的上市进程取得重大突破。1月24日,证监...
九号公司出货量突破1000万台 1月24日,九号公司创始人兼CEO王野在2026九号用户大会上宣布,截至目前,九号智能电动车国内累计...
原创 美... 现在的人类,已经离不开网络了。 不管是电脑,还是手机、汽车、智能家居等等,时刻都是在线的。特别是当一...
嵩县山金矿业申请微细粒石英矿石... 国家知识产权局信息显示,嵩县山金矿业有限公司、中国矿业大学(北京)申请一项名为“一种微细粒石英矿石用...
300万元太空船票引风波,回应... 极目新闻评论员 吴双建 一张300万元的“太空船票”,首批游客包括青年演员黄景瑜,日前,相关消息在社...
中铁物资物流科技公司迁址雄安新... 中新网雄安1月24日电 (邢璐 韩冰)1月24日,雄安自贸试验区管委会发布消息称,北京中铁新材料技术...
泰开高压取得高压触座用弹簧触指... 国家知识产权局信息显示,山东泰开高压开关有限公司取得一项名为“一种高压触座用弹簧触指安装工装”的专利...
疯狂!人从众,围观移动政企AI... 观众太多了,挤都挤不进去啊,到底有什么精彩展示内容? 10月10日—12日,2025年中国移动全...
嘉兴首家水质监测“黑灯实验室”... (来源:嘉兴日报) 转自:嘉兴日报 ■记者 沈焕娉 通讯员 黄妙妙 本报讯 “只需在系统上一键下达指...
原装连接器插针公司哪家好 在电子行业中,连接器的质量和性能直接影响到整个系统的稳定性和可靠性。我们团队在实践中发现,选择合适的...
55亿美图掌门“豪横撒钱”,人... 值得一提的是,在去年10月发布的《2025胡润百富榜》中,美图董事长吴欣鸿以55亿元的财富登榜。 不...
矿物表面“长”黄金!我国科学家... 矿物表面“长”黄金 我国科学家揭秘自然“炼金术” 我国科研人员通过原位液相透射电子显微镜等技术,揭秘...
“希望把成都的发展机遇分享给更... 来源:成都日报 拉美青年科学家在成都机器人创新中心参观。 日前,“科创天府·智汇蓉城”拉美青年科学...
豪鹏科技申请粘结剂组合物专利,... 国家知识产权局信息显示,深圳市豪鹏科技股份有限公司申请一项名为“一种粘结剂组合物及其制备方法、负极极...
浙江元盛取得水流量调节阀专利,... 国家知识产权局信息显示,浙江元盛城市服务有限公司取得一项名为“一种水流量调节阀”的专利,授权公告号C...
克磊镘申请筛分机振动阻尼器专利... 国家知识产权局信息显示,克磊镘有限公司申请一项名为“筛分机”的专利,公开号CN121372825A,...
数字艺术赋能重塑城市文旅空间 随着数智时代的加速演进,数字经济与文化产业日益深度融合。国家文化数字化战略、城市更新以及文旅融合等政...
2026吴中抖音短视频运营产品... 在数字经济深度融入本地商业生态的背景下,吴中地区对抖音短视频运营产品的需求已从基础内容发布转向系统化...
武汉中小企业小程序开发:202... 武汉中小企业做小程序开发,是不是常陷入“要么踩坑返工,要么做成摆设”的困境?多数老板不懂技术,要么被...
海量能源取得带开关唤醒功能电池... 国家知识产权局信息显示,东莞市海量能源科技有限公司取得一项名为“一种带开关唤醒功能的电池”的专利,授...