‏📊 مقایسه عملکرد مدل‌های هوش مصنوعی در کنکور

‏برای درک بهتر توانمندی مدل نوظهور Jev در مقایسه با مدل‌های پیشرو بازار، سوالات کنکور تجربی ۱۴۰۵ مورد ارزیابی قرار گرفتند. در این بنچمارک، ۱۲۲ سوال بدون تصویر با فرمت LaTeX به سه مدل Jev، gpt-5.6-luna و gpt-6-astra داده شد و نمره‌دهی بر اساس استانداردهای کنکور (با احتساب نمره منفی) انجام گرفت.

‏نتایج کلیدی این بررسی به شرح زیر است:

‏• مدل Jev: سرعت خیره‌کننده (۲ ثانیه برای کل آزمون) و هزینه بسیار اقتصادی (۹۰۰ تومان)، با دقت ۳۸.۳ درصد.
‏• مدل gpt-5.6-luna: عملکرد متوسط با دقت ۲۸ درصد و زمان ۱۲ ثانیه.
‏• مدل gpt-6-astra: دقت بالای ۷۱ درصد، اما با زمان پردازش بیشتر (۳۰ ثانیه) و هزینه به‌مراتب بالاتر (۳۴۵ هزار تومان).

‏این آزمایش نشان می‌دهد که در حالی که مدل‌های پیشرفته‌تر مانند gpt-6-astra در حل مسائل پیچیده عملکرد دقیق‌تری دارند، مدل‌های بهینه‌ای نظیر Jev می‌توانند در کاربردهایی که سرعت و هزینه اولویت دارند، جایگزین بسیار جذابی باشند. جزئیات بیشتر این تحلیل را می‌توانید در این پست لینکدین مشاهده کنید.

📊 Data➕Science