🧠 مدل زبانی چطور متن تولید می‌کنه؟
مدل‌های زبانی در اصل متن رو به Tokenهای کوچیک‌تر تقسیم می‌کنن.
مثلاً جمله‌ی:
«هوش مصنوعی آینده‌ی برنامه‌نویسیه»
به مجموعه‌ای از توکن‌ها تبدیل می‌شه و مدل با توجه به توکن‌های قبلی، احتمال توکن بعدی رو پیش‌بینی می‌کنه.
یعنی مدل دائماً داره می‌گه:
🔹 با توجه به چیزی که تا الان دیدم، محتمل‌ترین ادامه چیه؟
اما این فقط بخش ساده‌ی ماجراست؛ اینکه مدل چطور ارتباط بین توکن‌ها رو پیدا می‌کنه و از Context برای پیش‌بینی استفاده می‌کنه، داستان اصلی مدل‌های زبانیه.
📌مرجع تخصصی هوش مصنوعی و علم داده
❇️ سایت | بله | تلگرام | اینستاگرام
Post #1275
834
- ❤ 1