Почти идеальные руки с ControlNet на любой кастомной 1.5 модели

ControlNet это новая технология позволяющая использовать, наброски, очертания, карту глубины или нормалей для того чтобы гайдить нейронки на основе SD 1.5.

Я использовал расширение A1111 с ControlNet, в частности, использовал Depth модуль.

Затем я сделал несколько селфи с руками крупным планом и поместил их в ControlNet ui во вкладке txt2img. Запилил простой промпт в dreamshaper, что-то вроде "fantasy artwork, viking man showing hands closeup", а затем немного поиграл с силой ControlNet.

ControlNet сам преобразовывает картинку что ему дают в глубину, нормали или скетч, чтобы потом использовать это как гайданс. Но офк, можно напрямую подгружать и свою карту глубины или скетчи.

Я думаю, что это даже возможно использовать для инпейнтинга рук, пока ещё не пробовал.

Kей, наш AI Overlord, выпустил отличный тутор по ControlNet, советую глянуть.

ʟᴀᴛᴇɴᴛ ꜱᴘᴀᴄᴇ