مدل‌های زبان کوچک SLM/small language model (SLM)


مدل‌های زبان کوچک (SLM)، نسخه‌های جیبی مدل‌های زبان بزرگ (LLM) هستند. هر دو از تکنیک‌های یادگیری ماشین برای کمک به تشخیص الگوها و روابط استفاده می‌کنند تا بتوانند پاسخ‌های طبیعی و واقعی به زبان تولید کنند. اما در حالی که LLMها بسیار بزرگ هستند و به یک دوز سنگین قدرت محاسباتی و حافظه نیاز دارند، SLMها مانند Phi-3 بر روی مجموعه داده‌های کوچک‌تر و دسته‌بندی شده آموزش داده می‌شوند و پارامترهای کمتری دارند، بنابراین فشرده‌تر هستند و حتی می‌توانند بدون اتصال به اینترنت، به صورت آفلاین استفاده شوند. این آنها را برای برنامه‌های کاربردی روی دستگاه‌هایی مانند لپ‌تاپ یا تلفن مناسب می‌کند، جایی که ممکن است بخواهید سوالات اساسی در مورد مراقبت از حیوانات خانگی بپرسید اما نیازی به بررسی عمیق استدلال چند مرحله‌ای در مورد نحوه آموزش سگ‌های راهنمای نابینایان ندارید.

@faraapply