Использование предобученной нейросети (VGG16) для решения задачи переноса стиля изображения

Аннотация

Задача переноса стиля изображения состоит в создании нового, ранее не существующего изображения путем комбинирования двух данных изображений – оригинального и стилевого. Оригинальное изображение формирует структуру, основные геометрические линии и формы результирующего изображения, в то время как стилевое изображение задает цвет и текстуру результата. Суть данного подхода заключается в том, что некая картинка преобразуется в новую с другим стилем, который был задан. Для решения таких задач обычно используют сверточные нейронные сети. На входе нейронной сети подаются две картинки: контент и стиль. Например, фотографию, а стилевое – картину знаменитого художника. Результирующим изображением в таком случае будет сцена, изображенная на исходной фотографии, выполненная в стилистике данной картины. Современные алгоритмы переноса стиля позволяют добиться хороших результатов, но результат работы таких алгоритмов оказывается либо неприемлемым ввиду чрезмерного искажения черт лица, либо слабо выраженным, не носящим характерные черты стилевого изображения.
В этой работе мы рассмотрим, как адаптировать предобученную модель в решение задачи классификации и переноса изображения, так как чтобы в результате было получено изображение, которое разукрасился в соответствии с исходным изображением и с высоким выраженным. Наш основной вклад – это предложение нового метода обработки и переноса стиля изображений основан на предобученной модель VGG16.

Сведения об авторе

Moutouama N’dah Bienvenu Mouale, Российский университет дружбы народов

аспирант кафедры прикладной информатики и теории вероятностей, факультет физико-математических и естественных наук

Опубликована
2022-07-20
Как цитировать
MOUALE, Moutouama N’dah Bienvenu. Использование предобученной нейросети (VGG16) для решения задачи переноса стиля изображения. Современные информационные технологии и ИТ-образование, [S.l.], v. 18, n. 2, july 2022. ISSN 2411-1473. Доступно на: <http://sitito.cs.msu.ru/index.php/SITITO/article/view/854>. Дата доступа: 29 sep. 2022
Раздел
Теоретические вопросы информатики, прикладной математики, компьютерных наук