یه مدل جدید ۴ میلیاردی به اسم Jan-v1 معرفی شده که کار اصلیش سرچ وب و ریسرچ عمیقه. تیم سازندهش اون رو به عنوان یه جایگزین open-source برای Perplexity Pro معرفی کرده که به صورت کاملاً local هم اجرا میشه.
این مدل روی نسخهی جدید Qwen یعنی Qwen3-4B-Thinking ساخته شده که تا ۲۵۶ هزار توکن context length داره. به طور مشخص برای reasoning و استفاده از ابزارها (tool use) فاینتیون شده که این یعنی برای کارهای agentic و حل مسائل پیچیده بهینه شده.
توی ارزیابی SimpleQA، به دقت ۹۱.۱٪ رسیده که طبق بنچمارکهای منتشر شده، عملکردش یه مقدار از Perplexity Pro بهتره. این نشون میده که مدلهای با این سایز هم میتونن توی تسکهای واقعی مثل پرسش و پاسخ مبتنی بر فکت، عملکرد خیلی خوبی داشته باشن.
برای استفاده، میشه اون رو توی Jan App، یا با فریمورکهای llama.cpp و vLLM اجرا کرد. اگه از Jan App استفاده میکنید، برای فعال کردن قابلیت سرچ باید از تنظیمات، Experimental Features رو روشن کنید و بعدش یه سرور MCP مثل Serper رو فعال کنید تا به اینترنت دسترسی داشته باشه.
به نظر من، حرکت به سمت مدلهای کوچیکتر و تخصصی که به صورت local هم اجرا میشن، خیلی مهمه. این مدلها کنترل بیشتری به دولوپر میدن و وابستگی به API های پولی رو کم میکنن. اینکه یه مدل 4B داره با سرویسی مثل Perplexity رقابت میکنه، نشون میده که آینده فقط دست مدلهای غولپیکر نیست و مدلهای بهینه شده برای تسکهای خاص، جایگاه خودشون رو دارن.
فایلهای مدل رو میتونید از لینکهای زیر بگیرید:
📃 مدل اصلی Jan-v1-4B
📃 نسخه GGUF برای llama.cpp
🛠 Join @LLMEngineers Community
Post #159
1.32K
- 👍 9
- ❤ 1