Как обучить модель писать JavaScript для акварельных рисунков

Языковая модель не генерирует готовую картинку. Она пишет примерно 150 строк JavaScript, которые управляют p5.brush: растеканием пигмента, прозрачностью заливки и формой мазков. Код можно прочитать, изменить и запустить снова.

Чтобы сохранить акварельный стиль, модели оставили 10 из 47 методов библиотеки. Каждый эскиз запускается в безголовом Chromium, а фильтр отбрасывает код, который не компилируется, рисует напрямую через p5.js или пытается обмануть оценщик текстом на холсте.

Одна модель сравнивает рисунок с четырьмя случайными образцами из вручную отобранного набора, другая предсказывает человеческие предпочтения. В открытом эксперименте с TRL и OpenEnv есть среда, обучающие скрипты, модели и три варианта награды. Это способ обучать на вкусе там, где правильного ответа нет.