ИИ научился воссоздавать человеческий портрет из набора пикселей - «Технологии»

Легендарный инструмент киношных спецслужб, который позволяет из размытой картинки получить детальное фото, только что стал невероятно близок к реальности. Исследователи из Университета Дьюка (США) разработали алгоритм PULSE, который из сильно пикселизированнной картинки создает фотореалистичный портрет. Занимается этим специальный искусственный интеллект.

Данный ИИ представляет собой разновидность состязательных генеративных нейросетей, обученную работе именно с фотопортретами людей. Одна нейросеть использует пиксельную картинку как набор стартовых условий и генерирует псевдофото, вторая оценивает результат и выдает правки.

Алгоритм впечатляет своими возможностями – его авторы обещают 64-кратное увеличение детализации изображения. Картинка в разрешении 16х16 пикселей, из которой только и ясно, что это подобие лица, превращается в изображение с разрешением 1024х1024 пикселей. Его легко спутать с реальной фотографией, причем нейросеть заботится даже о таких мелочах, как узор на воротнике, если он уместен.

Из-за того, что программа не воссоздает исходное изображение, а лишь генерирует подходящие копии, ее будет трудно применять для серьезных задач. С другой стороны, алгоритм можно оптимизировать для воссоздания облика далеких экзопланет, не с научной, а с художественной целью. Или для визуализации микромира, чтобы показать бактерии и вирусы в таком виде, чтобы они стали понятны и интересны не только специалистам, но и школьникам.