关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者5264人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

澳海滩枪击惊魂50分钟:枪手占据天桥向下扫射

澎湃新闻 浏览 10445

专家:高市早苗收敛了一贯对华强硬的鹰派色彩

北京日报客户端 浏览 16218

今日起,数字人民币开始计息,这些变化影响你的钱包

红星资本局 浏览 4579

克洛普:斯洛特是特别好的人;当时没人告诉我还能这么花钱

懂球帝 浏览 5520

曼谷偶遇文咏珊,产子三个多月瘦得过分

八怪娱 浏览 4494

帧帧美若油画,库布里克大神杰作告别放映!

幕味儿 浏览 4434

19.88万买原厂合规越野车 212 T01长风柴油版上市

网易汽车 浏览 4810

古巴外交部谴责美国蓄意制造借口对委内瑞拉动武

上观新闻 浏览 5653

陶瓷业加速洗牌:政策倒逼转型,马可波罗如何引领行业突围?

红星资本局 浏览 4223

与中国“交好”,拿盟友“开刀”,战略已明朗

浏览 29295

波切蒂诺爆料:姆巴佩和梅西在巴黎踢不到一块去

体坛周报 浏览 2366

硅谷的「十万大裁员」:Meta按代码量裁员

新智元 浏览 5475

日均排队超千桌!“反预制”的年轻人捧红了地方菜

餐饮老板内参 浏览 4692

男导演曝丑闻 蒋欣的含金量还在上升

刘森森 浏览 5274

秦雯自曝袭警被抓后,让王家卫捞人找自己?

芊手若 浏览 5261

潘江:古德温确实很匹配山西,但因种种原因离开我们确实没办法

懂球帝 浏览 4593

助力识别、延缓或逆转老年疾病,全新“自然奖项”问世

上观新闻 浏览 6122

RMC:姆巴佩找到外部专家以检查膝伤,他有望3月中旬回归

懂球帝 浏览 3748

《年少有为》追剧团 41岁叶祖新和31岁彭昱畅同框

往史过眼云烟 浏览 4382

以总理发视频自证仍“在世”

每日经济新闻 浏览 3487

高市称若台湾有事日美将联合救助两国公民 外交部驳斥

外交部网站 浏览 8462
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1