TGViewer
آکادمی ریسرچ هرم ‌| Pyramid آکادمی ریسرچ هرم ‌| Pyramid @pyramid_research · 2.91K subscribers
Post #306 251
📕 متن AI-assisted را چطور باید قضاوت کنیم؟

🚨 زمان مطالعه: ۲ دقیقه

🔗 #هوش‌مصنوعی

مقاله EditLens در ICLR 2026 یک سوال مهم‌تر از «Human یا AI؟» می‌پرسد: اگر انسان پیش‌نویس را نوشته باشد، بعد Claude یا Grammarly grammar، tone، clarity یا fluency را تغییر داده باشند، این متن دقیقا کجای طیف قرار می‌گیرد؟

طبقه‌بندی قدیمی معمولا دوگانه بود: Human یا AI. اما دنیای واقعی تمیز نیست. یک نفر متن را خودش می‌نویسد، بعد مدل چند جمله را بازنویسی می‌کند، بعد انسان دوباره ویرایش می‌کند. این متن نه کاملا انسانی است، نه کاملا تولید مستقیم AI.

💻 ایده EditLens چیست؟
سوال را عوض می‌کند. به جای اینکه فقط بپرسد متن AI هست یا نه، می‌پرسد میزان دخالت AI چقدر بوده.

برای ساخت dataset، متن انسانی اصلی را نگه داشته‌اند، بعد با مدل‌هایی مثل GPT، Claude و Gemini انواع edit با شدت‌های مختلف ساخته‌اند: grammar، fluency، paraphrasing، tone، clarity و چند کار دیگر. چون original را دارند، می‌توانند edited text را با آن مقایسه کنند و با metricهای similarity یا distance شدت تغییر را تخمین بزنند.

مشکل اصلی اینجاست که در زمان استفاده واقعی، original دست ما نیست. EditLens بعد از training فقط final text را می‌گیرد و از روی همان، extent of AI editing را تخمین می‌زند.


✅ نتیجه عددی مقاله
مدل روی binary classification به F1 برابر ۹۴.۷ درصد رسید و روی ternary classification به F1 برابر ۹۰.۴ درصد. case study مربوط به Grammarly هم نشان داد همه editها یکسان نیستند: اصلاح اشتباه‌ها سبک‌تر است، اما summarization یا detailed rewrite دخالت عمیق‌تری حساب می‌شود.

🔺 نکته مهم برای استفاده
نمره مدل درصد واقعی کلماتی نیست که AI نوشته. یک estimate یادگرفته‌شده از میزان intervention است. همین ایده بعدا پایه Pangram 3 شد و Pangram بخشی از مدل‌ها، dataset و code مربوط به Open Pangram را هم برای پژوهشگرها منتشر کرد.

💳 https://www.pangram.com/blog/pangram-3-0-technical

✍️✍️✍️ ✍️✍️✍️ ✍️✍️✍️ ✍️✍️✍️
😊 ما رو به دوستانتون معرفی کنین 😉

🔅 «Instagram 💎 @Pyramid_Research»
  • ❤ 4
  • 👍 3
  • 👏 1
  • 👌 1
More from @pyramid_research
  1. Oct 7, 2026🔻 جایزه نوبل فیزیک سال ۲۰۲۶ 🚨 زمان مطالعه: ۱ دقیقه 🔗 #فیزیک 🔺 جایزه نوبل فیزیک سال ۲۰۲…
  2. Oct 6, 2026🔻 جایزه نوبل پزشکی-فیزیولوژی سال ۲۰۲۶ 🚨 زمان مطالعه: ۱ دقیقه 🔗 #پزشکی 🔺 جایزه نوبل فیز…
  3. Oct 4, 2026📕 مدل Pangram 4 چقدر در تشخیص محتوای AI Generated قابل اعتماد است؟ 🚨 زمان مطالعه: ۲ دقیق…
  4. Oct 2, 2026📕 مدل Pangram داخل متن چه چیزی می‌بیند؟ 🚨 زمان مطالعه: ۲ دقیقه 🔗 #هوش‌مصنوعی پروژه Seei…
  5. Sep 28, 2026📕 آیا humanizer واقعا AI detector را گول می‌زند؟ 🚨 زمان مطالعه: ۲ دقیقه 🔗 #هوش‌مصنوعی �…
  6. Sep 26, 2026📕 قوی‌ترین AI Detector حال حاضر دنیا | مدل Pangram چطور متن AI را تشخیص می‌دهد؟ 🚨 زمان م…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →