اپدیت جدید Ollama یه سری بهبود فنی مهم هم داشته. این حرکت Ollama رو از یه ابزار صرفا برای گیکها، به چیزی تبدیل میکنه که افراد بیشتری میتونن ازش استفاده کنن. مهم تریناش اینان:
پشتیبانی از Multimodality: قابلیت drag-and-drop کردن فایل، خصوصا عکس، یه قدم مهمه. حالا میتونید با مدلهایی مثل Gemma 3 به صورت بصری تعامل کنید. این قابلیت برای پردازش فایلهای متنی، PDF و حتی کد هم فعاله که برای کارهایی مثل خلاصهسازی یا تولید داکیومنتیشن از روی کد خیلی کاربردیه.
بهبود پرفورمنس: این بخش برای من مهمتره. تو این نسخه، پرفورمنس مدلهای سری gemma3n حدود ۲ تا ۳ برابر سریعتر شده. همچنین، برای سیستمهایی که چندتا GPU دارن، عملکرد موازیسازی ۱۰ تا ۳۰ درصد بهتر شده. این یعنی inference سریعتر و استفاده بهینهتر از سختافزار.
بهبود API: اندپوینت سازگار با OpenAI حالا از فرمت عکس WebP هم پشتیبانی میکنه. علاوه بر این، با دستور ollama ps میتونید ببینید هر مدل با چه context lengthای لود شده که برای دیباگ کردن مصرف مموری مفیده.
📃 بلاگپست معرفی اپ جدید
🔗 صفحه دانلود
🛠 Join @LLMEngineers Community
Post #92
862
AI Engineers بالاخره Ollama از فاز ترمینال و کامندلاین خالص خارج شد و یه اپ دسکتاپ برای macOS و ویندوز منتشر کرد. تا پیش از این، Ollama ابزار خیلی خوبی برای دانلود و مدیریت مدلهای زبان به صورت لوکال بود، ولی رابط گرافیکی نداشت و همین باعث میشد خیلیا سمتش نرن. این آپدیت…Ollama Download Ollama on macOS Download Ollama for macOS
- 🔥 5
- ❤ 1