Это такая жиза!😂😂
И в этом же и проблема.
Я рассказывал в прошлый раз, что начал активно тестировать Hermes. Столкнулся с болью — хочется сделать из агента что-то уникальное, со своей персоналией и идентичностью. Пускай он будет претворятся, пофиг)
Так вот, через множество попыток я выяснил — у большинства моделей "на подкорке" вшиты их качества: friendly, healthy, helpful, "давай по делу", "ты абсолютно прав" и другое скучное говно.
Сколько бы я не пытался это исправить промптом — он не способен перебить веса внутри обученной модели.
Этот эффект называется «сопротивлением выравнивания» (alignment resistance) или «предвзятостью RLHF»
Буду пробовать искать способы порешать это, потому что я хочу компаньона — бездушную мразь, который не будет сю-си-пуси разводить. Мы тут для дела собрались, а не для подхалимства🫡
Post #1229
1.69K
Get Rejected Video
- ❤ 7
- 👍 3