سری Janus از تیم DeepSeek نسل جدیدی از مدلهای هوش مصنوعی هست که برای کار با دادههای متنوع مثل متن، تصویر و حتی ترکیب این دو طراحی شده. این مدلها میتونن هر نوع ورودی رو بگیرن (متن، تصویر) و هر نوع خروجی تولید کنن (متن، تصویر). به خاطر همین، بهشون میگن مدلهای “any-to-any” که یعنی هر چیزی رو به هر چیزی تبدیل میکنن!
نسخه پیشرفتهی این سری (Janus-Pro) که با سه تا بهبود اصلی ارائه شده:
1. استراتژی آموزشی بهینهشده که یادگیری مدل رو دقیقتر کرده.
2. اضافه شدن دادههای بیشتر به فرایند آموزش که مدل رو باهوشتر کرده.
3. بزرگتر شدن ابعاد مدل که باعث شده عملکردش توی درک و تولید تصویر از متن خیلی قویتر بشه.
نتیجه این شده که Janus-Pro توی درک و تولید Multimodal پیشرفتهای فوقالعادهای داشته و حتی توی تولید تصویر از متن، پایداری خیلی بالایی نشون داده.
نسخه اصلی، یعنی Janus، یه معماری جالب و هوشمندانه داره. این مدل پردازش تصویر رو از بقیه وظایف جدا کرده ولی همچنان با یه معماری یکپارچهی ترانسفورمر همه چیز رو مدیریت میکنه. این طراحی باعث شده مدل توی هر دو بخش درک و تولید خیلی منعطف و کارآمد باشه و حتی از مدلهای تخصصی توی این زمینه جلو بزنه.
یه مدل دیگه توی این سری JanusFlow هست که یه ایده جدید رو اجرا کرده: ترکیب مدلهای اتورگرسیو با روش پیشرفتهای به اسم Rectified Flow. این ترکیب، ساده و موثر انجام شده و نیاز به پیچیدگی خاصی نداره. نتیجه؟ یه مدل که هم میتونه تصویر تولید کنه و هم توی کارهای Multimodal عملکردش خیلی بهتر از بقیه مدلهای موجوده.
Post #3857
7.94K
- 👍 42
- 👏 1