TGViewer
Golang Golang @golang_google · 40.5K subscribers
Post #3628 6.59K
🔥 Yzma - прямое подключение `llama.cpp` к Go-приложениям для локального inference

Проект позволяет запускать локальные LLM из Go без отдельного inference-сервера.

Что интересно:

- прямой доступ к llama.cpp
- hardware acceleration
- Linux, macOS и Windows
- поддержка WebAssembly
- локальный inference внутри Go-приложения
- удобно для desktop, edge и offline-сценариев

То есть вместо схемы:

Go app → HTTP → отдельный LLM server

можно строить:

Go app → llama.cpp → локальная модель

Полезно для CLI, desktop-приложений, локальных агентов и embedded AI, где важны приватность и отсутствие внешнего API.

GitHub:
https://github.com/hybridgroup/yzma
  • 🔥 14
  • 👍 8
  • ❤ 3
More from @golang_google
  1. Sep 18, 2026🔥 Rune - быстрый IDE и terminal multiplexer с GPU-рендерингом, который теперь открыт на G…
  2. Sep 16, 2026🔥 Большой гайд по миграции с Go на Rust Для разработчиков переход обычно упирается не в с…
  3. Sep 15, 2026🔥 Yoke - управление пакетами Kubernetes без гор YAML Вместо сложных Helm-шаблонов Yoke по…
  4. Sep 12, 2026🐳 Как правильно использовать Docker для Go-приложения - пошаговый гайд Хороший разбор от…
  5. Sep 12, 2026AvitoTech всегда славился своими проектами на День разработчика, но в этот раз ребята прев…
  6. Sep 11, 2026✔️ Голосовая модель GPT-Live-1 стала доступна по API OpenAI открыла API полнодуплексной го…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →