چین یه OCR اوپن سورس منتشر کرده که میتونه دهها صفحه PDF رو یکجا بخونه!
اسمش Unlimited-OCRـه و توسط Baidu توسعه داده شده.
تا الان خیلی از ابزارهای OCR برای خوندن یه PDF طولانی، صفحات رو جداجدا پردازش میکردن. اما Unlimited-OCR اومده این محدودیت رو تا حد زیادی برطرف کنه.
یعنی چی؟
فرض کن یه PDF طولانی داری که پر از متن، جدول و اطلاعات مختلفه. این مدل میتونه چندین صفحه رو توی یه فرآیند پیوسته بخونه و استخراج کنه، بدون اینکه مجبور باشه هر صفحه رو کاملاً مستقل پردازش کنه.
حالا چرا جذابه؟
فقط ۳ میلیارد پارامتر داره (3B)
میتونه اسناد چنددهصفحهای رو در یک مرحله پردازش کنه
از زبانهای مختلف پشتیبانی میکنه
پنجره خروجی تا 32K توکن داره
کاملاً اوپن سورس و میتونی روی سیستم خودت اجراش کنی
با ابزارهایی مثل Transformers، vLLM، SGLang و Docker قابل استفادهست
قسمت جذابتر ماجرا؟
دیگه برای هر بار OCR گرفتن از اسنادت لزوماً نیازی به سرویسهای پولی ابری نداری. مدل رو روی سختافزار خودت اجرا میکنی و اسنادت هم روی همون سیستم باقی میمونن.
البته اجرای لوکال به سختافزار مناسب نیاز داره و تعداد صفحاتی که واقعاً یکجا پردازش میشن به پیچیدگی سند بستگی داره.
شرکت Baidu این مدل رو با الهام از DeepSeek-OCR توسعه داده تا پردازش اسناد طولانی رو یه مرحله جلوتر ببره.
به نظرم جذابترین بخش این پروژه فقط رایگان بودنش نیست؛ اینه که OCR داره از خوندن صفحهبهصفحه به سمت پردازش پیوسته اسناد طولانی حرکت میکنه.
GitHub:
https://github.com/baidu/Unlimited-OCR
Hugging Face:
https://huggingface.co/baidu/Unlimited-OCR
@DevTwitter | <Mohsen Rad/>
Post #13544
2.71K
- ❤ 19
- 🔥 3
- 👍 1