关闭广告

10倍压缩率,97%解码精度!DeepSeek开源新模型,为何赢得海内外关注

澎湃新闻8258人阅读

DeepSeek开源新模型:用视觉模式实现上下文压缩。

10月20日,DeepSeek宣布开源最新大模型DeepSeek-OCR。所谓的OCR,据DeepSeek在论文中解释称,是通过光学2D映射压缩长上下文可行性的初步研究。DeepSeek-OCR由两部分组成:DeepEncoder和作为解码器的DeepSeek3B-MoE-A570M。DeepEncoder作为核心引擎,设计为在高分辨率输入下保持低激活,同时实现高压缩比,以确保视觉tokens数量优化且可管理。

通俗而言,这是一种视觉-文本压缩范式,通过用少量的视觉token来表示原本需要大量文本token的内容,以此降低大模型的计算开销。

据公布的论文名单显示,该项目由DeepSeek三位研究员Haoran Wei、Yaofeng Sun、Yukun Li共同完成,但这三位核心作者都颇为低调,其中一作作者Haoran Wei曾在阶跃星辰工作过,曾主导开发旨在实现“第二代 OCR”的GOT-OCR2.0系统。


DeepSeek-OCR的架构分为两部分。一是DeepEnco

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

日本拟引进乌无人机 其防卫预算首次突破9万亿日元

扬子晚报 浏览 130210

阿里腾讯一起投!理想前高管组团做机器人,半年融了20亿

财通社 浏览 6065

梅西上演帽子戏法!一战刷17纪录无愧球王 美媒:震慑人心的GOAT

颜小白的篮球梦 浏览 4046

湖南省属最大国企再次增持长沙银行

湘财Plus 浏览 5072

OpenAI更新ChatGPT使用政策,禁止提供专业医疗、法律和财务建议

IT之家 浏览 7769

周末利好刷屏!中美元首通话、国常会重磅,下周一重磅发布会

看财经show 浏览 8655

张柏芝第三个孩子成谜,未成年人隐私何时能守

可乐谈情感 浏览 2536

小米新车曝光!雷军的致命子弹,射向李想和余承东

象视汽车 浏览 7962

坦克300泰国版外观酷似“大G”!预计售价亲民,搭载2.4T柴油+9AT

小史谈车 浏览 6885

300135前三季度由盈转亏!池州国资入主后大动作,沥青龙头跨界投资半导体

时代周报 浏览 7967

小米手表5灰度OS3.0.152.0版本,带来表端独立微信版本更新等

IT之家 浏览 7025

深蓝S07华为乾崑激光版增程车型上市 限时15.49万元起

网易汽车 浏览 4046

养老金增速领跑 险资投资版图更新

北京商报 浏览 7488

莱切足球:福法纳加盟,恩戈姆也即将到来

绿茵情报局 浏览 6943

媒体:都说与爱泼斯坦不熟 300万页文件让他们露馅

看看新闻Knews 浏览 9371

Anthropic秘密递交IPO招股书,最快今秋上市

华尔街见闻官方 浏览 4099

何小鹏给车企转型泼冷水:并非都能顺利成为人形机器人企业

快科技 浏览 6113

特朗普:美舰向伊朗货船开火炸出个洞

新华社 浏览 5212

曝国际巨头拟裁员3万人,多家美银行停止相关项目贷款;老外吐槽国产手机:为了像苹果,3个摄像头里1个是假的;闻泰业绩变脸:巨亏135亿元

雷峰网 浏览 6739

为什么说医疗AI的终局,必然有讯飞医疗一席之地?

锦缎研究院 浏览 6531

特朗普呼吁立即停火 遭俄方坚决驳斥

财联社 浏览 7913
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1