TGViewer
橘橘橘子汁 & 🍊 橘橘橘子汁 & 🍊 @microblock_pub · 15.4K subscribers
Post #2862 11.5K
橘橘橘子汁 & 🍊 https://huggingface.co/deepseek-ai/DeepSeek-V4-Pro-0813 彻底区了,悲( 还是看看 DeepSeek Harness 和 Grok 吧
??有人测出来 V4 Pro 在 Minimal 工具下启动行为和其它工具下表现完全不一样,Minimal 工具下和之前灰度时候的 “I need” CoT 一模一样,复现了一下是真的

真绷不住了,我说他们怎么做到官方跑 Terminal Bench 跑 87.9,结果 AA 跑的只有 79 的,感情搁这疯狂过拟合 Minimal Harness,还有安全词的说是

又要变祖了吗...

DeepSeek V4 Pro 不是能力不行,而是对首次请求的工具结构极其敏感。官方 Standard/PTC 只有 91/92 分,Minimal 是 99/96,但只有两个工具。我们做了一个两阶段插件:首轮只给 shell + read 锚定 Minimal 推理轨迹,第一次工具调用后立刻恢复 Standard 全部 25 项工具。Windows 连跑两次 98/99,均值 98.5,第二轮全程 let me=0,证明不是抽卡,也不需要牺牲完整工具能力。
插件已开源:https://github.com/xiaobright/dsh-anchored-standard
完整评测、原理分析和统计证据:https://github.com/xiaobright/modeltest


如果真的是这样的话那也太弱智了,dpsk 这模型发的真是创记录了
· 全球首个发了权重以后发现发成 V4Flash 权重了,然后紧急撤回权重的模型
· 全球首个在短短一天内发布和不发布来回抽搐 N 次的模型
· 全球首个不在指定环境运行就能掉完性能的模型(原来对标 Codex 是这么个对标法吗),而且还不告诉用户要在这个环境运行
搁这当 ARG 玩呢

甚至 deepseek-harness 还专门有一个 Commit 将 Minimal 的提示词对齐到 RL 环境
  • 🤯 101
  • 👍 3
More from @microblock_pub
  1. Sep 30, 2026混元:🤾🐒🤺
  2. Sep 30, 2026调用学生 Agent 为自己推荐一个笔记本电脑
  3. Sep 30, 2026OpenAI已经实现了recursive self deterioration,每一代的模型变蠢一点,然后这个更蠢的模型去开发下一代模型,然后模型就更蠢,预计很快就回归GPT3.5…
  4. Sep 29, 2026大家好, 明天我们将重新向新订阅者开放 Pro $200 订阅,但与此同时,我们也将改变其使用量的计算方式。实际上,如果你算一下,与旧的 Pro $200 计划相比,API 支出折…
  5. Sep 29, 2026https://www.luogu.com/article/8osh9bsa
  6. Sep 28, 2026photo post
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →