🤖 مدل متن باز جدیدی با نام Kimi K2 معرفی شد.
🔍 این مدل معماری MoE دارد و در مجموع دارای 1 تریلیون پارامتر است که 32 میلیارد آن فعال بوده. مدلهای Mixture of Experts هنگام پاسخگویی بهجای فعالسازی تمامی پارامترها، فقط پارامتر مورد نیاز ورودی را فعال میکند (اکسپرتهای مورد نیاز همان ورودی). به عنوان مثال اگر هر هوش مصنوعی تیمی از وکیلها، دکترها و مهندسها باشد و شما یک سوال پزشکی بپرسید، فقط پزشکها (پارامترهای مورد نیاز) وارد عمل خواهند شد و بقیه کاری نمیکنند. دیپ سیک هم در زمان معرفی از این معماری استفاده کرده بود و هزینهها را بسیار کاهش داد.
🔍 این مدل بهترین عملکرد را در SWE Bench Verified، Tau2 و AceBench بین مدلهای متن باز بدست آورده و در برنامهنویسی و وظایف عامل محور (Agentic) بسیار قوی عمل میکند ولی فعلا از مالتی مُدال (کار با چندرسانه) و حالت Thinking پشتیبانی نمیکند.
انجمن علمی مهندسی کامپیوتر دانشگاه مازندران
🆔 @Umz_Computer
Post #430
932

- ❤ 14
- 🫡 1