style="text-align:

/>

有人说，以DeeepSeek-V4为代表的开源模型需要跨越的差距越来越大了！

很期待，当V4等中国开源模型发布后，这一差距会如何随着时间演变。

/>

/>

被打假了？

style="text-align:

justify">不过，这几张流传出来的基准测试，很快被怀疑是假的。

style="text-align:

justify">比如在官方评分系统下，不可能有模型达到99.4%的分数。

最高分只能是119/120（99.2%）或

120/120（100%）。

style="text-align:

justify">另一个证据，就更加增加了这几张基准测试的可疑性。

style="text-align:

AI也确认，FrontierMath的数据是伪造的，因为只有他们和OpenAI有权对该数据集进行评估。

至少有两个基准测试被打假，证明这些图可信度确实不高。

style="text-align:

justify">而且，据说DeepSeek新模型的官方发布时间，已经被推迟到了三月底。

style="text-align:

justify">如果模型本体还在封闭开发阶段，那么所谓83.7%的

SWE-Bench

Verified，是基于哪个版本跑出来的？是内部原始checkpoint？还是已经定型的最终权重？

style="text-align:

justify">另外，对于如今的大模型，分数本身并不是终点，「收据」才是关键。

style="text-align:

justify">这个83.7%的分数是怎么跑出来的？是否做了pass@k报告？软件工程实验台的工具栈如何配置？使用了什么版本的harness？是否基于最新数据集版本评估？有没有做污染检查？失败案例如何分解？

style="text-align:

justify">如果没有这些细节，所谓的第一名，也只是一个数字而已。

style="text-align:

justify">另外，就算泄露的分数很惊人，但真正有说服力的，是可复现的运行细节。

style="text-align:

justify">比如，精确的评测线束、配线组、不稳定测试如何处理、SWE实验台上工具调用失败如何重试？基础模型本身的能力贡献有多少？代理框架又放大了多少性能？

style="text-align:

justify">否则，这种所谓的刷新排行榜，就只是更像一次市场营销行为。

style="text-align:

justify">还有人提出，技术基准测试得分提高，也不意味着能驾驭现实中混乱的代码库。

很多所谓更聪明的模型，在上下文窗口被塞满后，就迅速崩溃了。

style="text-align:

justify">有趣的是，即便是假的，这也说明DeepSeek的确「深得人心」，网上的夸大其词的「泄露」就是DeepSeek成功最大的标志。

style="text-align:

center">100万长上下文来了，

style="text-align:

center">其他还会远吗？

style="text-align:

justify">最近，已经沉寂已久的DeepSeek，忽然在官网和移动应用上推出了新模型的灰度测试。

style="text-align:

justify">根据流传的信息，该默写的参数可能仅为200B，且未采用DeepSeek与北大联合开发的Engram条件记忆机制。

style="text-align:

justify">但只要通过简单的测试就会发现，这个新版本有一个大突破——超长的上下文窗口，包含100万个token，可以一次性处理《三体》三部曲体量的长文本。

style="text-align:

justify">奇怪的是，API文档并没有更新，上下文长度依然为128K。

style="text-align:

Face、GitHub上，DeepSeek完全没有更新任何消息。

style="text-align:

justify">业内普遍猜测，DeepSeek很可能在测试V4-lite版。

style="text-align:

V3的基础上，国产模型已经刷新了开源最好成绩。

style="text-align:

justify">深入研究代码后，Meta科学家Zhuokai

Zhao得出观察结论：

LLM架构的前沿探索已基本收敛。

……

MLA

+

=稀疏专家（MoE）+

共享专家

MTP正成为前沿稀疏专家模型的标准配方。

……

设计空间已被充分探索。

style="text-align:

justify">而DeepSeek不仅更新了上下文，在V3.2版本之后，在模型架构、记忆和视觉推理上，持续输出，不断创新：

style="text-align:

justify">100万上下文长度，很可能就是DeepSeek的另一个绝招。

style="text-align:

justify">这次的低调测试，或许就是DeepSeek大更新的「试点」，是招「妙手」。

style="text-align:

justify">100万token上下文都来了，其他还会远吗？

style="text-align:

center">全新编程之王！

style="text-align:

justify">另外，在一个overchat.ai的网站上，我们也发现了不少关于DeepSeek

style="text-align:

justify">根据这个网站的信息，DeepSeek

V4预计将在2026年2月17日发布，配合春节发布。

（什么逆天操作）

style="text-align:

justify">DeepSeek员工的内部测试显示，V4

OpenAI的GPT系列。

关键的基准是SWE-bench，Claude

Opus

justify">DeepSeek预计将以开放权重模型形式发布V4，延续一贯的开源传统。

style="text-align:

V4提供仓库层级推理——能够理解一个文件中的变化如何影响项目中其他文件，这对处理大型代码库或复杂分布式系统的开发者尤其有价值。

style="text-align:

V4还引入了新的Engram条件存储系统，实现近乎无限的上下文检索，使其能够处理极长的编码提示，并在大型代码库中保持上下文。

style="text-align:

justify">DeepSeek之前的模型，尤其是V3和R1，证明了开源AI模型可以以极低成本与专有模型竞争。

V4预计将在这一成功基础上，拥有更令人印象深刻的编码能力。

style="text-align:

center">四大核心突破，成为游戏规则巅峰者

style="text-align:

justify">除了上下文更新外，DeepSeek手里还有这些牌——Engram、mHC、DAS

2.0……

justify">上个月初，Information爆料称，DeepSeek计划在2月中旬，也正是春节前后，正式发布下一代V4模型。

style="text-align:

justify">V4的最大提升，就是在编程能力上。

它的编码实力，据说可以赶超Claude、ChatGPT等顶尖闭源模型。

style="text-align:

justify">而以下四个方向，就是它实现的核心突破，堪称game

style="text-align:

justify">编程能力：剑指Claude王座

style="text-align:

justify">2025开年，Claude一夜之间成为公认的编程之王。

无论是代码生成、调试还是重构，几乎没有对手。

但现在，这个格局可能要变了。

style="text-align:

justify">知情人士透露，DeepSeek内部的初步基准测试显示，V4在编程任务上的表现已经超越了目前的主流模型，包括Claude系列、GPT系列。

style="text-align:

justify">如果消息属实，DeepSeek将从追赶者一步跃升为领跑者——至少在编程这个AI应用最核心的赛道上。

style="text-align:

justify">超长上下文代码处理

style="text-align:

justify">V4的另一个技术突破在于，处理和解析极长代码提示词的能力。

style="text-align:

justify">对于日常写几十行代码的用户来说，这可能感知不强。

但对于真正在大型项目中工作的软件工程师来说，这是一个革命性的能力。

style="text-align:

justify">想象一下：你有一个几万行代码的项目，你需要AI理解整个代码库的上下文，然后在正确的位置插入新功能、修复bug或者进行重构。

以前的模型往往会忘记之前的代码，或者在长上下文中迷失方向。

style="text-align:

justify">V4在这个维度上取得了技术突破，能够一次性理解更庞大的代码库上下文。

style="text-align:

justify">这对于企业级开发来说，是真正的生产力革命。

style="text-align:

justify">算法提升，不易出现衰减

style="text-align:

justify">据透露，V4在训练过程的各个阶段，对数据模式的理解能力也得到了提升，并且不容易出现衰减。

style="text-align:

justify">AI训练需要模型从海量数据集中反复学习，但学到的模式/特征可能会在多轮训练中逐渐衰减。

style="text-align:

justify">通常来说，拥有大量AI芯片储备的开发者可以通过增加训练轮次来缓解这一问题。

style="text-align:

justify">推理能力提升：更严密、更可靠

style="text-align:

justify">知情人士还透露了一个关键细节：用户会发现V4的输出在逻辑上更加严密和清晰。

style="text-align:

justify">这不是一个小改进。

这意味着模型在整个训练流程中对数据模式的理解能力有了质的提升，而且更重要的是——性能没有出现退化。

style="text-align:

justify">在AI模型的世界里，没有退化是一个非常高的评价。

很多模型在提升某些能力时，会不可避免地牺牲其他维度的表现。

V4似乎找到了一个更优的平衡点。

style="text-align:

left">https://x.com/BourseetTrading/status/2023159718701933007

style="text-align:

left">https://x.com/bridgemindai/status/2023113913856901263

style="text-align:

left">https://x.com/irule***worldmo/status/2022987884114948210

style="text-align:

left">https://x.com/Jsevillamol/status/2023139200569065953

style="text-align:

left">https://x.com/teortaxesTex/status/2022732089301619018

style="text-align:

left">https://www.reddit.com/r/LocalLLaMA/comments/1r1tfbm/deepseek_just_updated_to_a_1m_context_window/

style="text-align:

right">本文系学术转载，如有侵权，请联系CVer小助手删文

style="text-align:

justify">何恺明在MIT授课的课件PPT下载

/>

在CVer公众号后台回复：何恺明，即可下载本课程的所有566页课件PPT！赶紧学起来！

style="text-align:

center">CV垂直方向和论文投稿交流群成立

扫描下方二维码，或者添加微信号：CVer2233，即可添加CVer小助手微信，便可申请加入CVer-垂直方向和论文投稿微信交流群。
另外其他垂直方向已涵盖：目标检测、图像分割、目标跟踪、人脸检测&识别、OCR、姿态估计、超分辨率、SLAM、医疗影像、Re-ID、GAN、NAS、深度估计、自动驾驶、强化学习、车道线检测、模型剪枝&压缩、去噪、去雾、去雨、风格迁移、遥感图像、行为识别、视频理解、图像融合、图像检索、论文投稿&交流、PyTorch、TensorFlow和Transformer、NeRF、3DGS、Mamba等。
一定要备注：研究方向+地点+学校/公司+昵称（如Mamba、多模态学习或者论文投稿+上海+上交+卡卡），根据格式备注，可更快被通过且邀请进群

▲扫码或加微信号:
CVer2233，进交流群
CVer计算机视觉（知识星球）人数破万！如果你想要了解最新最快最好的CV/DL/AI论文、实战项目、行业前沿、从入门到精通学习教程等资料，一定要扫描下方二维码，加入CVer知识星球！最强助力你的科研和工作！
▲扫码加入星球学习

▲点击上方卡片，关注CVer公众号
整理不易，请点赞和在看