Фото: UC Berkeley

Prisma наоборот, или сделать из картины фотографию

#Photoshop #искусственный интеллект #искусство #нейросети
Чтение на 1 мин

Для многих хитом прошлого года стало приложение Prisma, превращающее фотографии в своеобразные картины разной стилистики. Учёные из Калифорнийского университета в Беркли решили пойти в обратном направлении, научив нейросети “фотошопу” и переводу картин в фотографии.

Нейросети творят невероятные вещи, к примеру точный перевод фраз и добавление пикселей в низкокачественные фото. Теперь же искусственный интеллект способен обрабатывать и изменять фотографии, опираясь на их ключевые характеристики.

Калифорнийский университет в Беркли опубликовал научную работу четырёх учёных Лаборатории исследований искусственного интеллекта. Нейросеть “кормили” различными изображениями и задавали им конкретные характеристики – картина, фотография, пейзаж, натюрморт, изображение животного. После этого система анализировала сходства между изображениями одной группы и их отличия от фото других категорий.

Цель работы – создать алгоритм, позволяющий “переводить” фотографии, используя разные их атрибуты, наподобие машинного перевода Google Translate. Своеобразный робот-“фотошоп”.

И это принесло некоторые положительные результаты! Нейросеть научилась переводить картины в стиле Моне, Ван Гога в фотографии, и наоборот – фото в произведения искусства конкретного стиля:

Слева - оригинальные картины Моне, справа - созданные нейросетью "фото"-версии картин. Фото: UC Berkeley
Слева – оригинальные картины Моне, справа – созданные нейросетью “фото”-версии картин. Фото: UC Berkeley

Кроме того, искусственный интеллект научился делать из яблок апельсины, из зебр лошадей, а из фотографий зимы лето. Полученные результаты поражают:

Нейросети меняют текстуры изображений. Фото: UC Berkeley
Нейросети меняют текстуры изображений. Фото: UC Berkeley

Как это обычно и случается с незаконченными программами, нейросети выдают качественный результат максимум через раз. В научной работе указано, что до 100-процентного успеха нейросети в обработке фотографий ещё далеко. И если изменения текстуры и цветов изображения (как на иллюстрациях выше) зачастую удачны, геометрические параметры система редактирует так себе. К примеру, нейросеть очень плохо справляется с “трансформацией” собаки в кошку и наоборот:

Не самые успешные работы нейросети. Фото: UC Berkeley
Не самые успешные работы нейросети. Фото: UC Berkeley

Работа над алгоритмом продолжается – проект находится в стадии прототипа. С каждым днём искусственный интеллект привлекает всё больше энтузиастов. Да и чего скрывать – людям, не особо разбирающимся в Adobe Photoshop, такой инструмент бы пригодился!