关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者6316人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

北京越野豪华越野品牌定名泰钽 豪华配置拉满

网易汽车 浏览 1378

车企“偷换”电池背后:产能不足还是另有隐情

经观汽车 浏览 6592

大学副教授被精神病人持棍打死 二审:凶手发病期作案

扬子晚报 浏览 40647

最大纯电续航达335km 智己LS8官图发布

车质网 浏览 5692

大众与众08实车曝光 提供两种动力可选

车质网 浏览 6605

美国正式退出世卫组织 还欠费2.6亿美元

都市快报橙柿互动 浏览 23068

英超第8轮最佳球员候选:马奎尔、哈兰德、萨卡、内托在列

懂球帝 浏览 6555

撬开大模型黑箱!Anthropic新研究把AI思考过程公开了,隐藏动机发现率涨了4倍

智东西 浏览 3370

双向奔赴!澳优乳业再度携手江南大学 为营养健康行业发展注入创新动能

中国商报 浏览 6651

媒体:美国解除对白制裁 系大国格局中精心策划的变动

上观新闻 浏览 19857

中国留学生在德国遭袭反击致对方受伤 警方认定"防卫"

红星新闻 浏览 9013

她用整整十二年,打捞出鲜活的大师影迹

幕味儿 浏览 5826

日本球迷惊呆:中国队4场1球进了4强? 刘建宏:我们愿一直苟着?

风过乡 浏览 5619

解密福建舰电磁弹射背后的硬核支撑

上观新闻 浏览 6301

外国投资者7月美债持仓再创新高,加拿大、中国、印度持仓下降

华尔街见闻官方 浏览 7487

动物纹回潮,那很狂野了

时尚COSMO 浏览 5665

东部战区战士:已做好真打实打准备

北京日报客户端 浏览 4424

香港科技大学发现图片压缩优化AI内存效率

科技行者 浏览 6312

比亚迪秦家族新款7.98万起售!爆胎稳定系统上车,综合续航超2000km

车东西 浏览 5715

大连海鲜成双十一最热销特产之一 海参大虾扇贝备受追捧

半岛晨报 浏览 6430

癌症晚期男子驾车撞死婆孙2人后病亡 法院判赔超200万

台州交通广播 浏览 5518
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1