Новая нейросеть делает старые видео высококачественными и чёткими

Компания Topaz Labs, которая производит мощное программное обеспечение для улучшения фотографий и видео, показала новую модель ИИ, которая автоматически улучшает старые видео. В серии примеров восстановленные кадры кажутся значительно улучшенными, с повышенной детализацией и уменьшенным шумом.

Это первая в истории модель, созданная для этой цели, и она не требует ручного ввода для исправления видео. Программа Project Starlight была создана с нуля с использованием новой архитектуры с более чем 6 миллиардов параметров. Для сравнения, большая языковая модель GPT-4o от OpenAI, которая умеет принимать текст, аудио, видео и изображения, использует 8 миллиардов параметров.

Topaz Labs обещает, что её модель «точно восстановит детали» и улучшит кадры для получения высококачественных видеороликов путём восстановления материала без артефактов. Project Starlight также автоматически удаляет шумы и размытость, масштабирует и сглаживает кадры по запросу, а это означает, что даже непрофессионал сможет пользоваться этой нейросетью.

В приведённых выше примерах вы можете видеть, что модель по большей части хорошо справляется со своей задачей. Клип с астронавтом получился особенно хорошо, однако в некоторых случаях точность оставляет желать лучшего, а некоторые кадры выглядят как размазанные картины. Так что этой модели ещё есть, чему учиться.