TGViewer
开发者工具箱|编程·开发工具·资源 开发者工具箱|编程·开发工具·资源 @devtoolboxhub · 434 subscribers
Post #805 2
LLM结构化输出基准:三家API差距显著

一项针对 OpenAI、Anthropic、Gemini 六款模型的基准测试发现,“结构化输出”功能在实际生产中远非可靠契约。测试涉及 8 个异构 JSON Schema 和两种独立验证器(ajv、hyperjump)。

- Anthropic 接受所有 Schema,但对 7 层嵌套对象(S3)会静默返回错误形状:对象字段被序列化为字符串,HTTP 200 且无错误提示。
- OpenAI 的 strict: true 模式拒绝大部分标准 Schema(8 个中仅通过 2 个),但通过后严格遵循。
- Gemini 处于中间:拒绝 oneOf、type-arrays 等特性,但接受的 Schema 能严格遵循,且成功处理了 Anthropic 失败的 7 层嵌套。

建议在管道中加入独立校验,对 Anthropic 扁平化 Schema,OpenAI 使用 additionalProperties: false,Gemini 避免 oneOf。

原文链接

#开发者 #工具

📢 频道:@DevToolboxHub
More from @devtoolboxhub
  1. Oct 8, 2026BackstageCon 2026:一日全程聚焦 AI 与平台实践 BackstageCon 将于 2026 年 11 月 9 日在盐湖城举行,作为 KubeCon + Cloud…
  2. Oct 8, 2026Gemini CLI 安全连接服务器:使用 Termalin 的 MCP 方案 Gemini CLI 通过 MCP 协议与 Termalin 的内置 MCP 服务器通信,完成服务器…
  3. Oct 8, 2026OpenAI Codex Desktop:AI 原生开发界面 Codex Desktop 以“agent‑native”界面取代传统 IDE 或聊天机器人。它把 Git 操作、终端…
  4. Oct 7, 2026把所有 Hook 换成 Mod,效果如何? 在 Claude Code 中,Hook 是在每个生命周期事件时调用的 shell 脚本,Mod 则是一次性加载、保持状态、可在进程内处…
  5. Oct 7, 2026Python CLI 任务清单:文件持久化示例 这是一款简易命令行待办列表,支持添加、列出、完成、删除任务,并将所有数据保存在 todos.json 文件中。程序启动时自动读取文件…
  6. Oct 7, 2026Googlebook:Gemini‑驱动的 Android 集成笔记本 Google 近日正式发布 Googlebook 系列,定位为围绕 Gemini Intelligence…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →