Разработчик создал нейросеть, которая обрабатывает фото в стилистике мультсериала «Аркейн»
Нейросеть ArcaneGAN создал разработчик Александр Спирин. Она обрабатывает любые снимки в стилистике мультсериала Netflix «Аркейн», автоматически подбирая персонажа шоу, подходящего к фото.
Автор успел выпустить две версии нейросети, значительно улучшив качество обработки во второй. ArcaneGAN постепенно набирает популярность, поэтому на генерацию изображения уходит более 10 минут.
Еще на тему
Ну конкретно тут был взят какой-нибудь из репозиториев с готовой имплементацией stylegan2 (вероятно стандартную от Nvidia) и уже готовые стандартные веса для генерации человеческих лиц, дотренировали это на рожах из сериала и сфьюзили обе модели. Шо бы генерить из фоток, то можно взять уже какую-нибудь готовую имплементации прожектора фоток в латентные вектора стайлгана. Правда это не всегда хорошо работает, поэтому тут автор похоже просто взял нагенерил из кучи рандомных векторов пары фотка/рожа из аркейна и на уже этих данных обучил другую сетку чисто на стилизацию фоток лиц под арт.