Специалистам Китайского университета Гонконга удалось получить алгоритм, способный преобразовывать нарисованные картинки в пиксельную графику и восстанавливать изображение.
Алгоритм на основе сверточных нейросетей, способный создавать качественную пиксельную графику из нарисованных изображений, разработали китайские ученые.
Разработчиками воспользовались методами обучения без учителя, благодаря чему они создали для обучения пары обычных и пиксельных изображений без рук.
Как отмечает один из ученых Тянь-Цзинь Вона из Китайского университета Гонконга, алгоритм способен создать качественную пиксельную графику, напоминающую работу настоящих художников. Алгоритм состоит из трех сверточных нейросетей. На входе он получает исходное изображение в высоком разрешении с большим количеством деталей.
После чего изображение подается на нейросеть GridNet, которая создает на его основе предварительный набор из трех изображений с несколькими уровнями пикселизации. После чего работы этой сети передают на сеть PixelNet, которая превращает изображения в три картинки, выполненные в стиле пиксельной графики.
Посвященная данному алгоритму статья опубликована на страницах ACM Transactions on Graphics.
