Как использовать Topaz Video Enhancer ai

Обновлено: 04.07.2024

Video Enhance AI использует информацию из нескольких кадров для достижения первоклассных результатов при масштабировании видео, шумоподавлении, деинтерлейсинге и восстановлении.

Улучшить качество видео намного сложнее, чем фотографий, из-за проблем, связанных с движением, таких как мерцание, блочность и волнообразные артефакты. Чтобы решить эту проблему, Video Enhance AI просматривает окружающие кадры, чтобы улучшить разрешение и уменьшить артефакты движения для получения естественных результатов.


"Действительно полезно для преобразования DVD в качество Blu-ray для просмотра на большом экране 4K-телевизора. Нужен мощный графический процессор. Но конечный результат того стоит."





Масштабирование

Высококачественное разрешение видео с деталями, полученными из нескольких кадров. Наш видеоапскейлер может преобразовывать SD в HD и HD в 4k или 8k, добавляя четкие и естественные детали видео.

Шумоподавление

Удалите шум и зернистость, восстановив детализацию видео. Сведите к минимуму мерцание и другие временные артефакты, вызванные покадровым шумоподавлением.

Деинтерлейсинг

Используйте глубокое обучение для преобразования чересстрочного видео в прогрессивное с сохранением четкости изображения. Значительно уменьшает визуальные артефакты по сравнению с традиционным деинтерлейсингом.

Восстановление

Естественно восстанавливайте старые видео без добавления визуальных артефактов. Восстановите реалистичные детали и удалите артефакты сжатия из старых или испорченных источников.


«Удивительно — правда. Как будто эту штуку сделали жрецы вуду или что-то в этом роде».

Конвертация частоты кадров на 2021 год

Модель ИИ Chronos, представленная в версии 2.3, использует глубокое обучение для увеличения частоты кадров видео без артефактов. Существующие методы, такие как смешивание кадров и оптический поток, устарели уже несколько десятилетий и дают противоречивые и неестественные результаты. Video Enhance AI создает новые кадры, которые часто неотличимы от кадров, снятых камерой, улучшая видео с более естественными результатами.

Увеличить частоту кадров видео (от 24 до 60 кадров в секунду, от 30 до 60 кадров в секунду)

Чтобы увеличить частоту кадров вашего видео, вам нужно создать новые кадры между существующими кадрами вашего видео. Существующие способы сделать это (смешивание кадров, оптический поток) часто выглядят неестественно и дергано, особенно с движущимся фоном. Video Enhance AI использует новый подход, основанный на машинном обучении, чтобы «предсказать» лучший промежуточный кадр между существующими, что дает вам гораздо лучшие результаты с более широким разнообразием материала.

Исходное видео: 24 кадра в секунду
Улучшение видео с искусственным интеллектом: 60 кадров в секунду

Создайте плавный эффект замедленной съемки

При создании эффекта замедленного воспроизведения еще важнее создавать новые кадры без рывков или артефактов движения. Video Enhance AI создает гораздо более естественные результаты замедленного движения по сравнению с традиционной временной интерполяцией.

Исходное видео: 24–60 кадров в секунду
Улучшение видео AI: эффект замедленной съемки

Две разные высококлассные модели искусственного интеллекта от Topaz Video Улучшить ИИ. Слева Гайя, справа Артемида». /><br /></p>
<p>Насколько хорошо можно восстановить старые видеоматериалы? Вот что происходит, когда вы применяете Topaz Video Enhance AI к высококачественным кадрам SD XDCAM.</p>
<p>Некоторое время назад я рассмотрел Topaz Video Enhance AI и был глубоко впечатлен тем, как он может восстанавливать сильно сжатые и действительно сильно искаженные кадры. Впечатляло то, что мне еще предстояло попробовать это на некоторых высококачественных мастер-материалах. Я давно отказался от своих DV-проигрывателей, и большинство видеоматериалов, доступных в Интернете в разрешении SD, сильно сжаты из-за плохих настроек, которые YouTube использует для 360p и 480p.</p>
<p>Недавно я откопал несколько своих дисков XDCAM примерно 2005 года, и с чрезвычайно любезной помощью людей из Sony Professional Systems Europe им удалось откопать привод оптических дисков PDW-U2 XDCAM, чтобы я мог использовать его для передачи некоторых моих старых материалов на мою текущую монтажную машину.</p>
<p>Я давно хотел сделать это, чтобы увидеть, что Topaz Video Enhance AI может сделать с кадрами, которые в то время считались очень качественными в стандартном разрешении. Конечно, мой PDW-510 не давал результатов 50 Мбит/с 4:2:2 более дорогого PDW-530, но даже они обычно считались вершиной технологии стандартной четкости за пределами Digibeta. Чрезвычайно чистые изображения и возможности прогрессивной развертки PsF означают, что камеры получили высокую оценку за качество изображения.</p>
<p>Я обнаружил на дисках несколько разных проектов, некоторые из которых лучше бы забыть! Но я нашел все: кадры из моего документального фильма о Мэтте Коултере, сорвиголова-каскадер на мотоциклах, известный как Малыш-кенгуру, семинары по боевым искусствам и комичный эпизод боя из неудачного независимого фильма, над которым я работал. Подробнее об этом вы узнаете из другой статьи.</p>
<p>А пока позвольте мне сосредоточиться на том, каких результатов вы можете ожидать. Перенос отснятого материала с накопителя U2 оказался не таким простым, как я ожидал. Ни одно из текущих программ нелинейного монтажа не смогло бы прочитать файлы MXF камеры, если бы я скопировал их непосредственно на свой жесткий диск, несмотря на заявления об обратном. Я могу только предположить, что SD-версия XDCAM была забыта с течением времени, и что текущее программное обеспечение будет считывать только более современные воплощения твердотельной записи, такие как EX1/EX3 и более поздние камеры на базе SxS и SD. Я не был готов возиться с программным обеспечением командной строки, таким как ffmpeg, поэтому я искал более удобные альтернативы, которые могли бы правильно читать файлы MXF.</p>
<p>Я пытался использовать собственное программное обеспечение Sony Catalyst Browse, но по какой-то причине кнопка экспорта оставалась серой после выбора отснятого материала, поэтому работа по переносу и перекодирование отснятого материала в ProRes.</p>
<p>Это потребовало некоторых экспериментов, потому что я обычно снимал кадры в формате 25p, в котором на PDW-510 использовалась система Sony PsF (Progressive Segmented Frame). Это был способ хранения отснятого материала с прогрессивной разверткой в ​​чересстрочном потоке, и хотя он работал и <em>должен</em> обрабатываться программным обеспечением как настоящий проскан, иногда это не так</p>.
<p>В случае с Kyno это не так. Я обнаружил, что когда я экспортировал отснятый материал, сказав программному обеспечению, что это proscan, оно, казалось, удваивает изображение, вызывая наложение и, конечно же, снижение эффективного разрешения. Если бы я сказал Kyno, что это был чересстрочный кадр, я бы получил полное разрешение, хотя программное обеспечение считает, что результирующий кадр составляет 50 кадров в секунду. Однако он воспроизводится с правильной скоростью, потому что каждый кадр показывается дважды, поэтому он по-прежнему отлично работает на временной шкале 25p. Однако с кадрами PsF следует помнить об этом.</p>
<h6>Внизу: 200% обрезка видео с семинара. Верхнее изображение — это кадры PsF, обработанные Kyno как прогрессивная развертка, нижнее изображение — с чересстрочной разверткой. Обратите внимание на значок на футболке.</h6>
<p><img class=


Преобразование стандартного разрешения в 4K

Теперь самое интересное. Topaz Video Enhance AI претерпел несколько серьезных обновлений с тех пор, как я впервые рассмотрел его. Одним из них является возможность выполнять AI-интерполяцию кадров для изменения частоты кадров при воспроизведении, а другой — гораздо более точно настраиваемый вариант повышения масштаба. Какой из них лучше всего подходит для ваших собственных кадров, потребует некоторых экспериментов. Я обнаружил, что, хотя некоторые снимки, которые я пробовал, давали смешанные результаты, в некоторых случаях результаты были замечательными.

Еще одна вещь, которая стала очевидной во время проведения этих экспериментов, заключается в том, что камеры, которые мы когда-то считали невероятно бесшумными и тихими, по сегодняшним стандартам совсем не такие! Смотреть на некоторые из этих материалов, даже с моего материала XDCAM высокой четкости с PDW-320, очень интересно, чтобы понять, насколько далеко продвинулись камеры на сегодняшний день. Но давайте рассмотрим пару примеров. Я обрезал изображения, чтобы вы могли увидеть различия крупным планом.



Кадр из фильма "В Вудс", SD-версия.


Преобразованный кадр 4K (масштабированный для сети).


Сторона Наглядное сравнение SD и 4K апскейла (нажмите, чтобы просмотреть в новой вкладке).


Глушитель, оригинал SD.< /h6>

Преобразование в 4K.


Рядом. В веб-размере, несмотря на обрезку, это может выглядеть как некоторое шумоподавление, но реальность такова, что новое изображение значительно более детализировано, например, текстура ткани в пальто, чем оригинал SD. Усиление было увеличено во время съемки, насколько я помню (нажмите для просмотра в новой вкладке).


Чемпион по кузовным гонкам, Мэтт Нил дает интервью для документального фильма «Кенгуру Кид». Настройка высокого качества Gaia действительно подчеркивает детализацию кожи и волос (нажмите, чтобы просмотреть в новой вкладке).

Лучшие настройки для апскейла

Нет ничего идеального, в таком масштабе всегда будет несовершенство, особенно когда ИИ пытается правильно распознать объект или текстуру. Помните, что мы переходим от стандартного разрешения к 4K. Приступая к этому, нам нужно хотя бы немного умерить наши ожидания. Наши кадры SD никогда не будут выглядеть так, как будто они были сняты на родную камеру 4K, по крайней мере, пока. Но отснятый материал можно сделать намного лучше, чем он был изначально, и дать ему новую жизнь. Возможно, вы выпустили видео или DVD в прошлом, которые до сих пор содержат актуальную информацию, или короткометражный фильм, снятый на старые SD-камеры, который по-прежнему будет хорошо смотреться, если его отшлифовать и отполировать.

Наилучшие настройки для использования в Video Enhance AI зависят от вашей конечной цели. Я еще не нашел свои идеальные настройки. Я разрываюсь между использованием таких настроек, как параметр настройки Proteus 6 или высокое качество Artemis и высокое качество Gaia.

Преимущество использования Artemis или Proteus заключается в том, что они снижают уровень шума. Однако, с другой стороны, хотя использование Gaia, как правило, дает более детальное и четкое изображение, оно также больше «сохраняет» шум. Это не обязательно плохо, потому что может придать больше текстуры и резкости, делая лица людей немного менее пластичными. Gaia особенно хорошо справляется с такими деталями лица, как волосы, щетина и брови, особенно в сценах с низким уровнем шума и хорошим освещением. Насколько я могу, мне нравится говорить каждой модели ИИ, чтобы она сохраняла как можно больше деталей, а не говорила ей сосредоточиться на проблемах шума или сжатия, если я действительно не чувствую, что мне это нужно.

Кадры, с которыми следует быть осторожными

Сложнее всего обрабатывать кадры, содержащие текст, будь то номер автомобиля/номерной знак или вывеска. Если это на расстоянии, то вы в основном увидите искаженный беспорядок. К сожалению, нет никакого способа обойти это, потому что стандартное разрешение часто просто не дает достаточной информации в таких мелких деталях, как это, так что это просто то, с чем нам придется жить как с ограничением. Вы увидите пример этого на снимке винтажного автомобиля Daraq и на бейсболке Мэтта Коултера в видео, которое я предоставил в конце этой статьи.

В некоторых примерах, которые я привел выше, может быть трудно увидеть истинную степень того, насколько хороша повышающая конверсия из-за масштабирования, необходимого для Интернета, чтобы поддерживать управляемые размеры изображений. Ниже я предоставил несколько клипов с использованием моделей искусственного интеллекта Gaia и Artemis для сравнения, чтобы вы могли просматривать их на мониторе 4K, хотя и с оговоркой о веб-сжатии. Ни одна модель ИИ не подходит для всех отснятых материалов, и иногда вам может понадобиться использовать несколько моделей ИИ в одном редактировании, чтобы найти ту, которая лучше всего подходит для каждого отдельного кадра. Таким образом, использование Topaz Video Enhance AI может быть медленным процессом, но он может быть очень полезным, если вы нажмете правильные настройки.

В целом я обнаружил, что Gaia дает одни из лучших результатов, даже несмотря на то, что результирующий файл обычно содержит больше шума. Gaia особенно хорошо работает с лицами, но она также гораздо лучше обрабатывает объекты естественной среды, такие как деревья и трава, чем модели Artemis или Proteus. В любом случае шумоподавление всегда можно решить на этапе грейдинга. Иногда выбранная вами модель будет зависеть от того, с какими артефактами вы готовы жить больше всего. Например, в то время как Gaia лучше обрабатывает деревья и траву, вы также можете получить больше эффектов сглаживания. Мне было бы интересно услышать ваше мнение в комментариях.

ОБЗОР: Topaz Labs Video Enhance AI 9

Масштабирование на основе искусственного интеллекта, шумоподавление, деинтерлейсинг, преобразование частоты кадров и сверхзамедленная съемка в одном приложении.

Недавно я провел серию непосредственных испытаний некоторых из новых апскейлеров на основе искусственного интеллекта и старых гвардейцев, таких как Davinci Resolve и After Effects.Как более подробно рассматривается в другой статье, когда Topaz Labs и другие говорят об искусственном интеллекте, его лучше рассматривать как машинное обучение или распознавание образов — обучающее программное обеспечение, предоставляя ему тысячи и тысячи пар изображений с низким и высоким разрешением до и после. или видео. Таким образом, алгоритм получает реальное обучение тому, как восстанавливать клипы. Разрешение до 8K в меню — отличная идея, и, скорее всего, она будет становиться лучше с каждым годом.

Один из ведущих специалистов по искусственному интеллекту варианты — Video Enhance AI от Topaz Labs, у которой есть ряд продуктов, предназначенных для улучшения ваших фотографий и видео, когда они тихие или шумные. Video Enhance AI — это их видеоапскейлер, к которому недавно были добавлены дополнительные функции. Как они выразились: "Масштабирование, шумоподавление, деинтерлейсинг и преобразование частоты кадров мирового уровня на вашем рабочем столе".

Я решил провести более тщательное тестирование ИИ для улучшения видео, а также рассказать о его реальном использовании и о том, почему он может вам понадобиться.

Во-первых, если вам это интересно, воспользуйтесь 30-дневной пробной версией. Именно в использовании вы видите, может ли ваш компьютер справиться с этим и можете ли вы получить от него достаточно, чтобы искушать свой кошелек.

На момент написания статьи Video Enhance AI стоит 299,99 долларов США. Погуглив, вы легко найдете скидку 15 %, найдя код купона одного из их партнеров (совет: погуглите "купон на улучшение видео с топазом"). различные моменты в течение года. Topaz Labs дает понять, что при этом вы получаете только один год обновлений (за исключением обновлений обслуживания) и предлагает вам дополнительный год за 99 долларов, которые я не брал. На странице с ценами предлагается приобрести его позже, скажем, через два года или всякий раз, когда они выпустят версию 3, чтобы обновить ее тогда. На данный момент в этом году Topaz Labs выпустила ряд различных обновлений с некоторыми серьезными изменениями и новыми моделями, поэтому очевидно, что обновления — это то, за что вы, возможно, захотите заплатить на каком-то этапе.

Системные требования

Во-первых, это отдельное приложение, а не плагин Premiere или OFX, а также доступное в облаке, хотя я полагаю, что в какой-то момент это может измениться. Он может работать на Windows и Mac, а также поддерживает чипы M1. Официальные системные требования указаны как довольно низкие — 2 ГБ видеопамяти, 8 ГБ ОЗУ, процессор Intel 2015 года и т. д. В реальных условиях я вообще не смог заставить его работать на моем ноутбуке, который намного выше этих характеристик. /p>

Без сомнения, это одна из самых ресурсоемких и медленных программ, которые вы можете найти, и она лучше всего работает на настольном компьютере с хорошей картой GFX. Опять же, не забудьте использовать пробную версию перед покупкой.

Быстрый старт

ОБЗОР: Topaz Labs Video Enhance AI 10

Открывая отдельное приложение, вы видите довольно простой графический интерфейс, который, по крайней мере, не внушал мне доверия. Три учебника предлагаются внизу, и они стоят вашего времени.

После того как вы добавили один или несколько клипов, вы можете установить точки входа и выхода, если это необходимо, а затем двигаться вниз по правому столбцу, выбирая модель, выбирая выходной размер, дополнительные настройки зернистости (зернистость может сделать выглядеть немного более естественно) и формат вывода видео. Я использую ProRes 422 HQ, но у работы с последовательностями изображений есть свои преимущества, например возможность частичного рендеринга клипа и продолжения с того места, на котором вы остановились.

Существуют различные представления для просмотра вашего клипа: одиночное представление, разделенное представление, представление рядом и представление сравнения, но важно отметить, что нет предварительного просмотра в реальном времени, как при применении фильтра в Photoshop — во всех режимах просмотра вы не видите результат модели, пока не нажмете синюю кнопку «Предварительный просмотр».

ОБЗОР: Topaz Labs Video Enhance AI 11

Модели

Сложнее всего здесь выбрать модель. Я упомянул, что программное обеспечение обучено точно масштабировать и восстанавливать отснятый материал — ну, Topaz Labs разработала несколько моделей (или алгоритмов) для работы с различными типами исходного отснятого материала, что, я уверен, приводит к лучшим результатам, даже если оно несет в себе более крутая кривая обучения. Требуется немного времени, чтобы поэкспериментировать с ними и привыкнуть к тому, что лучше всего подходит для вас. Хотя с тех пор, как он вышел в версии 2.3, я все больше и больше стал использовать модель Proteus.

Что полезно, так это то, что когда вы привыкнете к точной настройке параметров и выбору моделей, которые вам нравятся, Video Enhance AI имеет хорошо продуманный менеджер предустановок, который поможет вам сохранить ваши настройки.

Если вы нажмете на вкладку «Предлагаемые» в окне «Выбор модели AI», он порекомендует вам подходящий вариант, выбрав качество видео, будь то клип с прогрессивной или чересстрочной разверткой или с компьютерной графикой, а также тип артефакта, если любой находится преимущественно в клипе. Он также предлагает кнопку «Сравнить», чтобы прослушать три лучших.

Предварительный просмотр

Какой бы вид вы ни предпочли, только нажав кнопку «Предварительный просмотр», вы загрузите модель, чтобы она выполнила свою задачу (требуется некоторое время, особенно при первом использовании модели), а затем визуализирует по умолчанию 1 секунду (также занимает некоторое время), чтобы увидеть, что будет на выходе. Представление сравнения имеет то преимущество, что позволяет напрямую сравнивать три модели с оригиналом, что превосходно и стоит того, чтобы использовать его, когда вы начинаете привыкать к программному обеспечению. Недостатком является то, что даже с довольно приличным графическим процессором может пройти несколько минут, прежде чем вы отрендерите все три.

После выхода из режима предварительного просмотра вы можете нажать на предпочитаемую модель, и она будет выделена, и вы сможете нажать синюю кнопку «Начать обработку» после изменения выходной папки, если это необходимо.

Новая модель Proteus

Новым в версии 2.3, выпущенной в июне этого года, является модель Proteus с тонкой настройкой.

Как показано в руководстве, в нем гораздо больше возможностей для точной настройки таких параметров, как резкость, которую вы хотите получить на выходе. кнопка. Я обнаружил, что одна из самых больших проблем заключается в том, что модель пытается сделать слишком много и создает фальшивые мультяшные результаты, поэтому эта модель действительно полезна в этом отношении.

ОБЗОР: Topaz Labs Video Enhance AI 12

Новая модель Chronos для изменения времени

Также новой является модель Chronos, которая берет Twixtor, Optical Flow и Alchemist одним махом, поскольку она может изменять частоту кадров (скажем, от 30 кадров в секунду до 24 кадров в секунду), а также выполнять плавную сверхмедленную съемку.

Это впечатляет и, безусловно, повышает ценность программного обеспечения.

Тест 1. Восстановление архива

Я решил провести серию тестов в реальных условиях, чтобы проверить, насколько хорошо программа справляется с масштабированием различных клипов.

Эту серию тестов можно просматривать в разрешении до 4K — щелкните значок шестеренки, чтобы изменить разрешение.

⬆️ Я нашел старый фрагмент архива, доступный только в 240p, и переделал его в UHD 4K. Это действительно впечатляет — посмотрите, как исчезают артефакты сжатия и неровности по диагоналям. При этом используется модель Proteus, которая демонстрирует ее универсальность.

⬆️ Это какой-то старый общедоступный фильм НАСА, доступный в разрешении 480p и переведенный в формат UHD 4K. Если вы сделаете паузу в конце, вы увидите, что артефакты сжатия исчезли, а недостатком является то, что местами они выглядят немного фальшиво.

Модель Artemis Strong Dehalo v1

⬆️ В этом третьем тесте используются кадры из парка в разрешении 720p в формате UHD4K. Повышенная резкость, уменьшенный шум.

Модель Dione Interlaced TV v3

⬆️ Комментарий к моей предыдущей статье просил протестировать старые кадры DV, поэтому я нашел очень случайный клип с разрешением 480i в UHD 4K. Video Enhance боролся здесь не столько с деинтерлейсингом, сколько с попыткой получить слишком большое разрешение из клипа за счет подделки.

Тест 2 — Шумоподавление

Video Enhance AI можно использовать как автономный механизм шумоподавления, и в этом он очень хорош. Недостатком является то, что это не плагин, и он медленный. В финальном тесте этого раздела затраченное время было следующим: Davinci Resolve: 5 сек., Neat Video: 30 сек., Video Enhance AI: 85 сек.

⬆️ В этом тесте показан клип, снятый при слабом освещении на Arri Alexa Classic с большим количеством шума. Он очень хорошо удаляет его.

⬆️ Я подумал, что стоит протестировать его против Davinci Resolve и Neat Video.Конечно, шумоподавление само по себе является искусством, поэтому это не является окончательным, но для меня оно было на одном уровне с Neat Video и лучше, чем Resolve, хотя и намного медленнее и не так легко вписывается в повседневный рабочий процесс.

Тест 3. Преобразование частоты кадров

Преобразование частоты кадров требуется довольно часто, поскольку у кинофестивалей или трансляций есть свои особые характеристики, которые могут отличаться от готового файла. Это, вероятно, лучше всего сделать на почте, которая знает, что делает, и имеет что-то вроде Alchemist, Teranex или Tachyon. Но при меньшем бюджете хорошо иметь другие варианты. Разумеется, Optical Flow в Premiere и Davinci Resolve также конкурируют здесь.

⬆️ Здесь от 25 кадров в секунду до 24 кадров в секунду — вы можете видеть, что в оригинале самолет скачет вперед каждую секунду, но при преобразовании он плавный.

⬆️ Здесь от 30 кадров в секунду до 24 кадров в секунду, и снова вы можете увидеть заметную плавность преобразования.

Тест 4 — Сверхзамедленная съемка

⬆️ Простое замедление в 2 раза — возможно, не такое уж сложное, но хорошо сделанное и полезное, если Optical Flow не работает для вас.

⬆️ Здесь более высокий рейтинг сложности с 8-кратным замедлением. И довольно впечатляющий результат, который немного портится с руками позже в клипе, но часть клипа, безусловно, можно использовать.

Тест 5 — Преобразование 4K UHD из HD

⬆️ Это плохо видно, поэтому я обрезал до 1080p. Он отлично справился с масштабированием, а также с шумоподавлением (которое при необходимости можно отключить в Proteus). Это особенно полезно, если вы хотите 4K для YouTube или Vimeo.

Скорость рендеринга

Вот несколько примеров того, сколько времени потребовалось Video Enhance AI для масштабирования примера клипа продолжительностью 1 секунда на 200 % (без учета времени первоначальной однократной загрузки модели). Мои характеристики: 24-ядерный Threadripper 3960X 3,8 ГГц, 128 ГБ ОЗУ, Nvidia RTX 2060 Super (8 ГБ видеопамяти).

ОБЗОР: Topaz Labs Video Enhance AI 13

Обзор

Topaz Labs Video Enhance AI — довольно впечатляющее программное обеспечение, которое уже значительно улучшилось по сравнению с прошлым годом. Он может брать старые кадры практически любого качества и восстанавливать их до уровня, намного превышающего оригинал. Это еще лучше при апскейлинге хорошего качества HD до 4K. В этом году добавлена ​​возможность изменять скорость и частоту кадров с очень высоким качеством.

Тем не менее, даже на высокопроизводительном компьютере требуется много времени, чтобы сделать что-либо, и результаты иногда могут выглядеть довольно фальшивыми, когда от него требуется сделать слишком много — это похоже на новую технологию. Но если вы можете включить это в свой рабочий процесс и, возможно, использовать его, чтобы произвести впечатление на своих клиентов, это может стать ценным инструментом в арсенале постпродакшна.

Покупайте с


< /p>

Инструменты для фильмов

Кинематографисты отправляются за оборудованием для подготовки к съемкам, производства и постпродакшна!


Примечание. Это не полноценный формальный обзор и сравнение Topaz Video Enhance AI с другими существующими на рынке приложениями, а обсуждение сильных и слабых сторон одного конкретного приложения. Качество и возможности модели по-прежнему значительно меняются от версии к версии.

За последние 10 месяцев, работая над масштабированием Star Trek: Deep Space Nine и Voyager, я полагался прежде всего на одну часть программного обеспечения. другие для выполнения работы: Topaz Video Enhance AI (199,99 долл. США, для Windows и Mac). Я рекомендовал этот продукт как косвенно, так и напрямую, и я собираюсь продолжать это делать. Но мне нужно убедиться, что всем понятно, во что вы ввязываетесь.

Вплоть до сентября я практически полностью сосредоточился на повышении качества предварительной обработки видео. После публикации «Чего не видел ни один фанат» я решил обратить внимание на более масштабную сторону уравнения.

Хорошая новость: Topaz Video Enhance AI, безусловно, лучший инструмент для увеличения видео на основе ИИ, который я когда-либо тестировал. Некоторые из его моделей настраиваются, и они могут улучшить широкий спектр видео. Я видел, как он вдохнул новую жизнь в шоу Grateful Dead, старые видеокассеты, Звездный путь, Звездные врата: SG-1 и ряд других типов контента. р>

Я не могу сказать, что все сообщество удовлетворено темпами разработки, но, учитывая сложность программного обеспечения для редактирования видео и необходимость постоянного улучшения лежащего в его основе искусственного интеллекта, я чувствую, что все продвигается с разумной скоростью. . Обработка видео с помощью ИИ — это невероятно новый рынок, и Topaz намного опережает любой из протестированных мной видеоредакторов (хотя я всегда рад услышать предложения по тестированию других программ). Насколько мне известно, TVEAI — единственное приложение, которое делает то, что делает, так же хорошо, как и оно.

В данный момент у меня не так много новых материалов для показа — я работаю над Вояджером, но пока не готов показывать работу. У меня есть версия титров DS9, которую я создал сразу после выхода «Чего ни один фанат не видел раньше». Этот материал был создан с использованием AviSynth+ для начального масштабирования и TVEAI для обработки. Для тех из вас, кому интересно, где находится обещанное мной руководство: я все еще работаю над созданием рабочего процесса, который будет охватывать весь спектр шоу и улучшать первые сезоны больше, чем текущий метод.

Но пользователи должны знать, что у Topaz Video Enhance AI есть некоторые неудобства. Во-первых, это плохо сказывается на стабильности системы. Она всегда запускается должным образом, когда машина только что перезагрузилась, но если вы использовали свой графический процессор для других приложений, программе может потребоваться перезагрузка для правильной работы. Остановка и повторный запуск практически всегда срабатывает с первого раза. Это вероятно сработает во второй раз. У вас даже есть хороший шанс в три раза. Просить рендерить более трех видео подряд? Это подталкивает вашу удачу. В конце концов, либо механизм искусственного интеллекта не сможет инициализироваться, либо произойдет сбой приложения, и потребуется перезагрузка.

Topaz Video Enhance AI становится нестабильным быстрее, если другие приложения, такие как StaxRip, одновременно запускают многопоточное кодирование AviSynth+. Он не слишком любит совместное использование графического процессора, хотя в последние месяцы это поведение улучшилось. Я бы рекомендовал перезагружаться каждые 1-2 дня, чтобы свести к минимуму вероятность сбоя, особенно если вы запускаете несколько видео в это время. Загрузка видео увеличивает вероятность того, что следующее видео вызовет сбой, хотя программное обеспечение также может дать сбой при очень длительном кодировании. Однако предварительная обработка часто требуется для максимальной эффективности масштабирования. Лично я просто стискиваю зубы и много перезагружаюсь.

Один из способов, которым Topaz решил эту проблему нестабильности, — создание режима автосохранения, который перезагружает ваше предыдущее видео и запоминает (в основном), в каком кадре вы были. Это избавляет от необходимости перезагрузки четыре раза в день при увеличении большого количества коротких клипов.

Качество модели по-прежнему остается движущейся целью

Качество каждой модели ИИ зависит от версии выпуска. Одно из предложений, которое я сделал компании, которое, как она сказала, будет реализовано, заключается в том, чтобы упростить поиск старых версий программного обеспечения. Это может быть необходимо при тестировании, чтобы увидеть, работает ли данная модель лучше в старой или новой версии.

Причина того, что качество моделей может быть разным, заключается в том, что компания продолжает совершенствовать и обучать свои модели. В уравнении много движущихся частей, и Topaz пытается улучшить их применение одновременно на нескольких фронтах, а это означает, что некоторые модели стали хуже, а затем со временем были свернуты или отремонтированы. Некоторые споты, которые Топазу было сложно поднять в феврале, по-прежнему трудно прокачать в октябре.

Если вы заинтересованы в этом программном обеспечении, воспользуйтесь бесплатной пробной версией, чтобы убедиться, что его модели могут работать с вашим контентом, прежде чем нажимать на него.

Имейте в виду, что Topaz Video Enhance AI не является панацеей. Вот две очень разные версии Бенджамина Сиско:


< /p>

Сезон 2. Масштаб увеличен. Это старый кадр, и я улучшил его, но принципиально не трансформировал его.

Это из 2-го сезона, который, похоже, был перенесен на DVD таким образом, чтобы сохранить каждый бит впечатления от просмотра «Супердолгого воспроизведения» VHS. Вот Бенджамин Сиско из 4-го сезона:


Сезон 4 Капитан Сиско. Это просто разница в том, как шоу было записано на DVD, я ничего не делал.

Я все еще пытаюсь выяснить, можно ли исправить верхнюю рамку, но в том, что изображение выглядит не очень хорошо, виновата не компания TVEAI. Есть предел тому, что приложение может обработать, и даже некоторые коммерческие видео сейчас не очень хороши.

Модель собственности Topaz

Topaz имеет интересную модель программного обеспечения. Когда вы покупаете Video Enhance AI, вы получаете доступ к приложению в том виде, в котором оно существует сегодня, и ко всем будущим обновлениям, крупным и второстепенным — в течение одного года. Если вам нужны обновления после этого, еще один год стоит 49,99 долларов. Неясно, разрешено ли вам пропускать годы, сохраняя цену в 49,99 долл. США, или вы должны продолжать оформлять повторную подписку каждый год или снова покупать всю программу.

Если вы прекратите платить ежегодную плату за обновление, вы сохраните полный доступ к программе в том виде, в каком она существовала на день покупки. Вопрос о том, насколько выгодна эта сделка, на самом деле сводится к тому, насколько быстро Topaz улучшает приложение. Пока что в этом году он действительно сильно улучшился, но ему еще предстоит пройти долгий путь.

Любой, кто рассматривает возможность использования этого приложения, должен сначала загрузить бесплатную пробную версию и проверить, как оно работает с вашим контентом. Имейте в виду, что вы можете залезть под капот с гаечным ключом, чтобы ударить по видео, прежде чем запускать его через программу. Например, если вам нужно деинтерлейсировать кадры, это должно происходить вне масштабирования.

Topaz Video Enhance AI — это программное обеспечение с ранним доступом — по сути, если не по названию. Я не думаю, что в модели раннего доступа есть что-то плохое, особенно когда весь рынок настолько новый, что у нас еще нет имеет эффективную конкуренцию. Но я также не хочу включать это приложение как удивительно эффективное для моих целей, не отмечая также, что эта программа, строго говоря, не так уж удобна для новичков. Вариант кодирования MP4, как правило, пропускает звук, а это означает, что лучше всего научиться использовать FFMPEG для повторной сборки видео из составляющих кадров. Используйте Topaz Video Enhance AI для рендеринга в PNG или JPG, и проблем не возникнет (этот метод также легче восстанавливается, поскольку прерванное кодирование MP4 невозможно возобновить).

Topaz Video Enhance AI – это уникальное интересное приложение, и мне не терпится увидеть, что из этого получится, но я не хочу рисовать картину более радужной, чем она должна быть. Программа не столько требует обучения, сколько обучения другим вещам, которые вам нужно сделать, чтобы использовать Topaz Video Enhance AI с максимальной производительностью. В любом случае, знайте, что он существует. Если ваш контент хорошо соответствует его возможностям, результаты могут быть невероятными. Если этого не произойдет, возможно, в него не стоит вкладывать средства, пока приложение не получит дополнительное время на разработку. Воспользуйтесь бесплатной пробной версией и подумайте, что вы можете быть удивлены. Кроме того, учтите, что вы надеетесь удивить вас примерно через два года, когда все проблемы будут устранены.

Читайте также: