关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者1689人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

海南"零关税"豪车引热议 保时捷卡宴鲜有符合要求车型

每日经济新闻 浏览 28914

大湾区晚会名场面!小沈阳被女儿抬走?

小娱乐悠悠 浏览 2502

2025年首例被北交所暂缓审议的企业出炉 永大股份上市缘何待考?

叩叩财讯 浏览 1505

彩虹-7高空高速隐身无人机成功首飞 实现重大突破

新京报 浏览 6900

他靠演反派爆火却对同事女儿一见钟情

张发林 浏览 2658

股市:开门红

小白读财经 浏览 961

皇马巴萨决裂:佛爷&拉波尔塔取消午餐会 卡瓦哈尔愤怒约谈亚马尔

风过乡 浏览 1874

伊姐周日热推:电视剧《看得见风景的窗》;电视剧《春日狂热》......

伊周潮流 浏览 813

高市暗藏意图:引入核武器 获取打击中国腹地能力

国际在线 浏览 14006

特朗普证实:已授权中情局行动

澎湃新闻 浏览 2014

清华Nature发布惊人结论:AI写论文3倍速,但科学边界被锁死

新智元 浏览 832

突然加速!避险资金拥抱消费ETF,什么信号?

券商中国 浏览 1964

最有种的女明星

江湖人称艾掌门 浏览 1752

荣耀手机应用商店正式上线金标专区

IT之家 浏览 771

官方:纽卡后卫刘易斯-米利当选英联杯1/4决赛最佳球员

懂球帝 浏览 862

1200亿元深耕中原!中国人寿助力河南区域经济高质量发展

证券市场周刊 浏览 1782

塔帅:若顺利哈弗茨未来几天能进名单;我们想赢得重要奖杯

懂球帝 浏览 904

法甲+欧联九连败,巴黎人报:尼斯主帅弗朗克-海瑟已正式下课

懂球帝 浏览 1060

三年半烧掉35亿!一帮金融人,带“火箭”冲科创板

财通社 浏览 915

大礼包?蓉城海港送对手亚冠首胜!上海双雄成唯二0胜队+包揽倒2

我爱英超 浏览 1887

天空:曼城想在冬窗签下一名中卫,格伊对转会曼城持开放态度

懂球帝 浏览 817
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1