Наконец-то, мы увидим видео со снежным человеком в высоком качестве. Команда инженеров по видео и искусственному интеллекту из Adobe Research разработала ИИ-приложение VideoGigaGAN, которое способно улучшать и делать четкими низкокачественные ролики.
Команда использовала генеративную состязательную сеть для обучения системы тому, как выглядит четкое и ясное видео (например, отдельные волоски в бровях, а не размытая масса), а затем добавила «модуль распространения, управляемый потоком», чтобы сохранить последовательность между кадрами.
Они также использовали методы сглаживания, чтобы предотвратить то, что они описывают как «странности ИИ», и высокочастотное переключение функций.
В результате, как утверждает команда, система способна повысить качество видеоизображения в восемь раз без появления странной раскраски, неровных линий и других известных проблем с изображениями и видео, создаваемыми ИИ.
Они признают, что некоторые результаты полностью искусственно сгенерированы на основе оценок, сделанных системой, когда она пытается заполнить недостающие изображения. Например, поры на коже, линии вокруг глаз или даже ресницы добавляются, чтобы придать полученному видео четкость и ясность.
Команда отмечает, что на данный момент анонс системы – это демонстрация, а не готовящийся релиз; таким образом, неясно, будет ли Adobe выпускать ее для общего использования.
