ОписаниеЯ родился на рубеже XXI века уже в постсоветской России, но детство и юность нашего поколения преимущественно прошли в кварталах ещё советской городской застройки.
С помощью портретов моих знакомых, сгенерированных состязательной нейросетью, обученной на датасете изображений советской городской среды и архитектуры, я хочу отразить влияние советской городской среды на личный и коллективный портрет моего поколения, показать неразрывную связь человека и города.
ТехнологииВ работе использована состязательная нейросеть StyleGAN2 для изображений 256x256 пикселей. Повышение разрешения сгенерированных изображений до 2048x2048 пикселей произведено с помощью состязательной нейросети
Real-ESRGAN.
ДатасетДатасет составлен на основе изображений советской городской среды Куйбышевской (ныне Самарской) области. Использованы фотографии и открытки, собранные энтузиастами на общественном ресурсе
PastVu. Над исходными изображениями осуществлялись кадрирование до квадрата, сжатие до 256x256 пикселей, перевод в оттенки серого, повышение плотности и микроконтрастности.
ОбучениеИсходная модель дообучена на трёх датасетах:
Датасет #1 состоит из 100 чёрно-белых изображений. На данном этапе модель натренировалась воспроизводить общие очертания зданий.
Датасет #2 представлен 200 чёрно-белыми изображениями с высоким микроконстрастом, с преобладанием текстур и ритма окон многоквартирных домов.
Датасет #3 состоит из 150 цветных изображений. В результате данного этапа модель восстановила способность воспроизводить цвета, которая была утрачена в ходе двух предыдущих этапов.
В проекте представлены изображения, сгенерированные моделью после второго и третьего этапов дообучения.
Референсные изображенияПортреты, выступавшие референсными изображениями для нейросети, взяты из социальных сетей героев проекта.