TGViewer
Silicon Brain | جامعه هوش مصنوعی Silicon Brain | جامعه هوش مصنوعی @silicon_brain · 7.73K subscribers
Post #2162 1.58K
برای ارزیابی عملکرد Jev یک سناریو ساده ساختم و این درخواست رو بهش دادم:
 Json
{
"state": "سلام، من هفته گذشته یک لپ‌تاپ از سایت شما خریدم اما هنوز سفارش به دستم نرسیده. در صفحه پیگیری هم از سه روز پیش هیچ تغییری ایجاد نشده. برای کارم به این لپ‌تاپ نیاز فوری دارم و واقعاً نگرانم که سفارشم گم شده باشد. لطفاً هرچه سریع‌تر وضعیت سفارش را بررسی کنید.",
"model": "jev-latest",
"questions": {
"department": {
"type": "choice",
"instructions": "این درخواست باید توسط کدام تیم بررسی شود؟",
"criteria": {
"shipping": "پیگیری ارسال، تأخیر، مفقودی یا وضعیت تحویل سفارش",
"support": "مشکلات عمومی مشتری و درخواست‌های پشتیبانی",
"billing": "پرداخت، فاکتور، بازگشت وجه یا مشکلات مالی"
}
},
"frustration": {
"type": "score",
"instructions": "میزان نارضایتی یا عصبانیت مشتری را بر اساس متن چقدر ارزیابی می‌کنید؟",
"criteria": [
"آرام و صرفاً در حال بیان مشکل",
"ناراضی اما محترمانه",
"بسیار عصبانی یا دارای لحن شدید"
]
},
"is_urgent": {
"type": "noul",
"instructions": "آیا پیام مشتری نشان‌دهنده فوریت یا نیاز به رسیدگی سریع است؟"
}
}
}


و نتیجه رو فقط تو 786 میلی ثانیه جواب داد:
json 
{
"model": "jev-1.13.0",
"answers": {
"department": {
"type": "choice",
"choice": "shipping",
"confidence": 1.0,
"probabilities": {
"billing": 0.0,
"support": 0.0,
"shipping": 1.0
}
},
"frustration": {
"type": "score",
"score": 0.94,
"confidence": 0.9,
"legend": {
"0": "آرام و صرفاً در حال بیان مشکل",
"1": "ناراضی اما محترمانه",
"2": "بسیار عصبانی یا دارای لحن شدید"
},
"probabilities": {
"0": 0.06,
"1": 0.94,
"2": 0.0
}
},
"is_urgent": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 705,
"output_tokens": 73
}
}

اصلا نمیشه LLM ها رو با پرفورمنس این مقایسه کرد

@silicon_brain | از هوش مصنوعی عقب نمانید
  • 👍 10
  • ❤ 4
More from @silicon_brain
  1. Oct 11, 2026تو جهان آینده اعتبار مهم‌ترین فاکتور موفقیت هر انسان یا کسب‌و‌کار خواهد بود. با پدیدار شدن…
  2. Oct 11, 2026پایتون 3.15 با تغییرات مهم! نسخه Python 3.15.0 در ۹ اکتبر ۲۰۲۶ منتشر شده و چند قابلیت مهم…
  3. Oct 11, 2026💻🚀آموزش آنلاین صفر تا صد طراحی سایت! در دوره جامع فرانت اند خواهید آموخت: HTML | CSS | B…
  4. Oct 10, 2026مستندات فارسی پروژه Routapse اضافه شد و میتونین بخونید: مستندات فارسی پروژه | گیتهاب | پست…
  5. Oct 10, 2026به‌صورت کلی، ۳ جا بهتره از AI استفاده نکنید وقتی هنوز مسئله رو درست نفهمیدید چون ممکنه AI…
  6. Oct 6, 2026به متن‌های ChatGPT یک Watermark اضافه شده! شرکت OpenAI قابلیتی به اسم textGrain معرفی کرده…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →