TGViewer
Laisky's Notes Laisky's Notes @laiskynotes · 3.34K subscribers
Post #254 1.04K
论文: https://arxiv.org/abs/2401.17555
论文作者的视频讲解: https://youtu.be/_AdCIphFZzk?si=U0ETt9-zRddZyGOE

学习了一下号称可以链上证明 AI 推理的 opML。

首先介绍一下使用场景,比如说有一个 AI 聚合平台,服务商可以在上面发布自己的 AI 推理接口,用户可以付费使用这些接口服务。那么就会出现两个问题:

1. 我怎么知道服务商真的运行了推理,而不是随便给我编了个结果?
2. 我怎么知道服务商真的是用它声称的模型执行的推理,而不是用廉价模型,或者用别家的强力模型来刷分?

这两个问题可以概括为,真实算力问题,和模型的一致性问题。

对于真实算力问题,以前介绍过的 BitTensor 也曾试图解决这个问题,但是解决办法比较粗糙,它让一大群矿工同时运行推理,然后从推理结果中择优选取。这样确实可以大幅提高推理结果的真实性,但是会导致非常严重的计算资源浪费,而且也无法对模型和数据提供任何隐私保护。

opML 将推理的计算步骤,转换为虚拟机(FPVM)的状态变化,那么就可以形成一个状态链,这个状态链的每一个节点都是当前推理步骤时,整个虚拟机数据的 merkel-tree root。然后将最终状态的 merkle root 上链持久化存储,作为本次推理的 Proof。

乐观(Optimism)的意思就是,所有的结果直接上链,默认正确,但是服务商需要在一个挑战期内质押一定量的 token。在这个挑战期内,任何人都可以扮演 challenger 发起挑战,链上也会有固定的挑战者发起随机挑战。挑战者可以提供自己的状态链,证明服务商上链的状态链是错误的,通过二分查找,可以找到双方链上的一个分歧点。然后根据分歧点的前一个状态,重算分歧点的状态,就可以知道哪个链是正确的。如果服务商的链是正确的,那么挑战者会被罚款,如果服务商的链是错误的,那么服务商会被罚款。这样可以实现相对低成本线上证明和验证。

但是我没理解的一点是,挑战者该如何知道正确的状态链是什么呢,除非他自己本地重算一遍推理?而且随机挑战实际上也不一定能发现伪造吧,恶意供应商完全可以伪造一个虚假但是可验证的状态链,你的任何抽检都不会发现问题。

最后,看上去 opML 这篇论文是为了推 HyperOracle 他们家的 LLM Oracle 产品,所以他们需要试图证明他们的 Oracle 提供的 off-chain 推理结果是真实可信的。 #blockchain
  • 🤣 2
  • 🤔 1
  • 🍌 1
More from @laiskynotes
  1. Oct 6, 2026https://x.com/LaiskyCai/status/2107307813727060123?s=20 codex 最近有三个完全免费的工具,结合之后可以发挥非常强大能力:…
  2. Sep 15, 2026学习了一下 OpenAI 推出的 Agents API https://openai.com/index/introducing-the-agents-api/ 众所周知 Agen…
  3. Aug 28, 2026前阵子读了本很有趣的书,侯杨方的《这才是丝绸之路》。作者抛开抽象的文本溯源,而是采用实地考察的方式,重走了真实的丝绸之路。此书给我最大的感触就是:真实而且符合常理。 在我以前的想象…
  4. Jun 5, 2026读完 Mario Puzo 的《教父 The Godfather》三部曲小说,才意识到自己当年年轻时根本完全就没看懂电影《教父》。然后又去把电影重温了一遍,才发现原来电影里有很多细…
  5. May 22, 2026记录一下最近遇到的一个糟心事儿。 最近两个月开始又开始找工作机会,总的来说很不顺利,托朋友联系了两个内推也是石沉大海。(各位要是有远程工作的机会也请联系 job@laisky.co…
  6. May 14, 2026作为一个从业十多年的程序员,我已经半年没手写过一行代码了。上个月大概提交了 20 万行,这个月大概 4 万行。 昨天认真考虑了一下这个现象,我个人认为,虽然 AI 仍然存在显然的不…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →