TGViewer
آکادمی ریسرچ هرم ‌| Pyramid آکادمی ریسرچ هرم ‌| Pyramid @pyramid_research · 2.91K subscribers
Post #308 186
📕 مدل Pangram 4 چقدر در تشخیص محتوای AI Generated قابل اعتماد است؟

🚨 زمان مطالعه: ۲ دقیقه

🔗 #هوش‌مصنوعی

نسخه Pangram 4 در ژوئیه ۲۰۲۶ معرفی شد و از نظر خود Pangram جهش اصلی سیستم است: حدود ۶ برابر بزرگ‌تر از Pangram 3.3، با backbone از نوع sparse Mixture-of-Experts و چند خروجی جدا برای حالت‌های مختلف نویسندگی.

💻 چه چیزی را خروجی می‌دهد؟
مدل فقط نمی‌گوید Human یا AI. طبق model card، خروجی‌ها شامل score چندسطحی برای AI involvement، برچسب token-level برای Human، AI-Assisted و AI-Generated، تشخیص mixed authorship و تشخیص Humanized-AI است.

متن‌های بلند هم در پنجره‌های overlapping 512-token پردازش می‌شوند. بعد predictionها aggregate و smooth می‌شوند تا مرز بخش انسانی و AI در متن کمتر حالت پرش‌دار داشته باشد.

✅ عددهای اصلی چه هستند؟
در benchmark داخلی Pangram، false positive rate برابر ۰.۰۰۴۱ درصد گزارش شده، یعنی حدود یک false positive در هر ۲۴ هزار document. false negative rate روی مجموعه AI آن‌ها ۰.۳۳۹۶ درصد است. روی ۱۳ ابزار commercial humanizer هم می‌گویند AI involvement را در ۹۸.۸۳ درصد موارد تشخیص داده‌اند.

مشکل اصلی اعتماد اینجاست: بیشتر این عددها از benchmarkهای خود Pangram می‌آیند. عددها مهم‌اند، ولی مستقل محسوب نمی‌شوند و non-zero false positive همچنان وجود دارد.


✍️ محدودیت‌ها را جدی بگیریم
خود model card می‌گوید Pangram 4 برای natural-language prose با حداقل ۵۰ کلمه طراحی شده. code، reference section، table، technical manual، متن‌های خیلی mathematical و فایل‌هایی که از PDF بد parse شده‌اند خارج از scope اصلی‌اند یا خطاپذیرترند. برای همین raw text یا docx را بهتر از PDF می‌داند.

🗯 یک استفاده واقعی جالب
در یک مقاله ACL 2026، پژوهشگرها با Pangram بیش از ۱۸۶ هزار مقاله خبری از حدود ۱۵۰۰ روزنامه آمریکایی را بررسی کردند و حدود ۹ درصد مقاله‌های جدید نمونه را partially یا fully AI-generated تخمین زدند. ۴۵ هزار opinion piece هم جدا بررسی شد.

جمع‌بندی من: AI detector می‌تواند signal بدهد، اما provenance و اثبات تقلب نیست. score باید شروع بررسی باشد، نه حکم نهایی.

💳 https://www.pangram.com/research/model-card/pangram-4

✍️✍️✍️ ✍️✍️✍️ ✍️✍️✍️ ✍️✍️✍️
😊 ما رو به دوستانتون معرفی کنین 😉

🔅 «Instagram 💎 @Pyramid_Research»
  • ❤ 5
  • 👍 2
  • 👏 1
  • 👌 1
More from @pyramid_research
  1. Oct 7, 2026🔻 جایزه نوبل فیزیک سال ۲۰۲۶ 🚨 زمان مطالعه: ۱ دقیقه 🔗 #فیزیک 🔺 جایزه نوبل فیزیک سال ۲۰۲…
  2. Oct 6, 2026🔻 جایزه نوبل پزشکی-فیزیولوژی سال ۲۰۲۶ 🚨 زمان مطالعه: ۱ دقیقه 🔗 #پزشکی 🔺 جایزه نوبل فیز…
  3. Oct 2, 2026📕 مدل Pangram داخل متن چه چیزی می‌بیند؟ 🚨 زمان مطالعه: ۲ دقیقه 🔗 #هوش‌مصنوعی پروژه Seei…
  4. Sep 30, 2026📕 متن AI-assisted را چطور باید قضاوت کنیم؟ 🚨 زمان مطالعه: ۲ دقیقه 🔗 #هوش‌مصنوعی مقاله E…
  5. Sep 28, 2026📕 آیا humanizer واقعا AI detector را گول می‌زند؟ 🚨 زمان مطالعه: ۲ دقیقه 🔗 #هوش‌مصنوعی �…
  6. Sep 26, 2026📕 قوی‌ترین AI Detector حال حاضر دنیا | مدل Pangram چطور متن AI را تشخیص می‌دهد؟ 🚨 زمان م…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →