علیبابا یه مدل جدید از سری Qwen3 داده بیرون که تخصصش reasoning هست: Qwen3-235B-A22B-Thinking-2507. کاربرد اصلی این مدل حل مسائل پیچیدهست که نیاز به استدلال مرحله به مرحله داره، مثل مسائل ریاضی، کدنویسیهای رقابتی و تحلیلهای علمی.
این مدل یه معماری Mixture-of-Experts داره با ۲۳۵ میلیارد پارامتر که ۲۲ میلیاردش در هر توکن فعال میشه. مهمترین ویژگی این مدل، native بودن حالت "thinking" هست. یعنی دیگه لازم نیست دستی فعالش کنید، خود مدل برای حل مسائل پیچیده از زنجیرههای استدلال طولانی استفاده میکنه تا به جواب دقیقتری برسه. در واقع عملکرد مدل توی بنچمارکهای منطق، ریاضی، کدنویسی و علوم به شکل قابل توجهی بهبود پیدا کرده و با مدلهای قدرتمند سورس-بسته رقابت میکنه.
با اینکه پنجره زمینه یا context window مدل به صورت native تا ۲۵۶ هزار توکن پشتیبانی میشه، اما توی API و بعضی پلتفرمها مثل OpenRouter فعلاً تا ۱۳۱ هزار توکن قابل استفادهست. خود تیم Qwen هم توصیه کرده که برای تسکهای پیچیده که نیاز به reasoning عمیق داره، حتماً context length رو بالای ۱۳۱ هزار توکن تنظیم کنید تا مدل فضای کافی برای "فکر کردن" داشته باشه.
برای اجرا، میشه از فریمورکهایی مثل vLLM یا sglang استفاده کرد. Unsloth هم GGUF داینامیک براش منتشر کرده که این امکان رو میده تا نسخه ۲-بیتی مدل رو روی سیستمی با ۸۸ گیگابایت رم یکپارچه (unified memory) یا رم معمولی با سرعت بالای ۶ توکن بر ثانیه اجرا کرد. این برای کسایی که دسترسی به کلاسترهای بزرگ ندارن، خوبه.
به نظر من، تیم Qwen داره با سرعت خیلی بالایی مدلهای SOTA اپنسورس رو ریلیز میکنه و رقابت رو برای بقیه سخت کرده. اسم مدلهاشون (مثلاً همین Qwen3-235B-A22B-Thinking-2507) یکم طولانی و عجیبه، ولی عملکرد، مخصوصاً توی حوزه reasoning، واقعاً قویه و این مدل یه رقیب جدی برای بقیه مدلهای اپنسورس حساب میشه. این پیشرفت سریع نشوندهنده قدرت آزمایشگاههای چینی توی مسابقه هوش مصنوعیه.
📃 مدل اصلی در هاگینگفیس:
https://huggingface.co/Qwen/Qwen3-235B-A22B-Thinking-2507
📃 نسخه FP8 برای مصرف رم کمتر:
https://huggingface.co/Qwen/Qwen3-235B-A22B-Thinking-2507-FP8
📃 گزارش فنی (Technical Report):
https://arxiv.org/abs/2505.09388
🛠 Join @LLMEngineers Community
Post #68
845