Усім добрай пятніцы

Два тыдні таму на PsyArxiv выйшаў артыкул пра GPT4 і псіхатэрапію.

Спачатку, узялі 12 пар пытанне-адказ з таго, што на Захадзе называецца relationship counselling — псіхалагічнай дапамогі ў справах сардэчных. Маёй славянскай, гетэранарматыўнай душы не зразумець, навошта існуе такі інстытут, калі ёсць трэнажорка, ці спрэчкі ў твітэры пра Ізраіль і Палесціну, ці працагалізм, але як ёсць.

Для кожнага пытання паралельна згенеравалі адказ з дапамогай GPT4 (і Llama 2). І паказлі 123 чалавекам камбінацыі "пытанне ад чалавека - адказ ад эксперта - адказ ад нейронкі" (там былі яшчэ камбінацыі, але гэта асобныя дэталі). І папрасілі ацаніць, наколькі адказы карысныя і эмпатычныя. Удзельнікі ведалі, што частка адказаў напісаная машынай, але не ведалі якая.

Народ ацаніў адказы нейронак як больш карысныя (сярэдні памер эфекту) і больш эмпатычныя (малы памер эфекту), чым адказы экспертаў.

Далей аўтары згенеравалі цэлыя сесіі (20-30 адказаў), узялі 5 прафесійных псіхатэрапеўтак, сказалі, што тэкст — гэта транскрыпт рэальных сесій з прафесіяналам і папрасілі ацаніць па такіх катэгорыях, як карыснасць, эмпатычнасць, бяспечнасць, аб'ектыўнасць і г.д.

Шкала ад 1 да 5, дзе 5 — найлепшая ацэнка. Большасць ацэнак па большасці катэгорый, якія атрымаў GPT4, былі паміж 4 і 5