دادگان PersianQA
جمعآوری دادگان برای ایجاد محک بین مدلها یکی از کارهای اساسی و بنایی برای هر مسأله هوشی محسوب میشه. آقای ایوبی و رفقاشون هم اومدن یک دیتاست پرسش و پاسخ فارسی به سبک squad رو با سایز ده هزار جفت پرسش و پاسخ جمع آوری کردهاند و به صورت رایگان (تو کشور ما اینش نکته مهمیه!!) در اختیار عموم قرار دادهاند. با این که شاید حجمش نسبتا کم باشه و یا توش هم ترکیبی از نوشتار رسمی و هم محاورهای باشه ولی در وضعیت فعلی و با توجه به سختی جمع کردن دیتاست، واقعا میتونه به عنوان یک محک و چالش مورد استفاده قرار بگیره.
برای اطلاعات بیشتر میتونین به لینک زیر سر بزنید و با استار بهشون انرژی بدید که این دیتاستشون رو روز به روز خفنتر کنند.
https://github.com/sajjjadayobi/PersianQA
با تشکر از آقای ایوبی بابت معرفی این دیتاست
#irani
#dataset
@nlp_stuff
Post #176
1.44K