Star Trek Deep Space Дев'ять та Voyager Upscale Developer Щоденник: Покращення результатів з TOPAZ Video Enhance AI

Цей шматок є супутником до "я можу висококваліфікована зоряна гра глибокого простору дев'ять і Voyager до HD, так чому ж не може бути першорядним?" Обидва цієї історії, і що містять свої унікальні відеоролики та зображення відновленого зірки, але ця стаття спрямована більше у людей, які зацікавлені в технічних аспектах високопоставленого та те, що може бути досягнуто з Vicaz Video Heenhance AI. Інша історія зосереджується як на самому зір зіркового походу.

Дев'ять дев'ять та Voyager, висококласний проект покладається на Avisynth, Vapoursynth, Davinci Resolve 17, а також TOPAZ відео посилення AI. Всі ці програми доступні безкоштовно, за винятком TVEAI.

Минулий тиждень бив абсолютний лайно з мене. Невдача мого проекту SSD сталася в найгіршій можливій час, наскільки ловити мене між резервними копіями. Я не мав наміру відтворити багато цієї кадри, особливо не в такому поспіху. Ця стаття буде показано більше роботи, яка кваліфікується як прогрес роботи (WIP) та деякі зразки, щоб показати різні ідеї в дії, замість якоїсь готової роботи я спочатку мав намір показати.

Є кілька готових глибоких простір дев'ять кліпів, вбудованих у цю історію, які не відображаються в іншій історії, а також кілька зразків Voyager. Якщо ви хочете бачити всі мої поточні до та після пострілів, порівнюючи оригінальні DVD-диски до нової реставрації, єдиний зв'язок IMGSLI з випадаючим меню, щоб вибрати свої цілі порівняння.

Зміни робочого процесу

Моя мета, коли я почав глибокий простір дев'ять висококласний проект, полягав у тому, щоб створити метод поліпшення глибокого простору дев'ять, що хтось міг би піти. Я все ще планую опублікувати оновлений підручник на основі цих методів для DS9 (з відео цього часу), і буде публікувати підручник Voyager, а також у найближчі тижні. Однак я буду обговорюватися сьогодні, це кілька кроків, що перевищують одне вхід через TOPAZ відео, підвищуючи AI.

Я розробив три різні методи для покращення абсолютної якості AI високопоставлених. Першим є введення додаткового зерна та шум у відео. Це можна зробити з Avisynth або Vapoursynth через QTGMC. Це теоретично можна зробити з іншими програмами та фільтрами, але у мене була найкраща і найпопулярніша удача з зернопорожнем та NoiserStore в QTGMC. Я знаходжу ніяких цінностей та значення зерна між 1,0 до 1,75 працюють в залежності від вмісту. Деякі експерименти зазвичай корисні. Не чекайте чудес. Очікуйте покращення.

Другий - це змішування кадрів з декількох моделей. Я використовував DAVINCI вирішити для цього, хоча я розглядаю вивчення інших рішень. Мій загальний досвід з вирішенням був проблематичний, найменший. Вирішайте, іронічно, не дуже добре під час композитування відео. Він зруйнував кілька кодів шляхом введення помилок руху під час складу. Він іноді відмовляється декодувати файли належним чином, якщо вони надаються у форматі MP4 або MKV (вирішення підтримує MKV на версію 17). Я мав деяку удачу, що рухався до MOV, але ще не вирішив проблему.

Давінкін вирішив критично до моїх якісних покращень, а також гігантського, болю для саботування в моїй дупі. Мені довелося розібратися і перемістити кілька кліпів вручну, щоб виправити помилки руху. Мені довелося покладатися на інші інструменти, щоб сплесуватися в аудіо, тому що Давінкін не завжди розуміє, що робити з аудіофайлами, прикріпленими до відеофайлів. Без davinci вирішити, я не міг зробити деякі з покращень, які я зробив. З кращою версією Давінкінської рішучості, я міг би отримати додаткові 12 годин сну минулого тижня. У мене є змішані почуття щодо цієї програми.

Потім знову у мене також є змішані почуття щодо Videa Topaz AI. Один з чудових очевидних прасень редагування відео є те, що для найкращих результатів, взагалі не редагує відео. Ви редагуєте послідовності кадрів зображень, які вже були скинуті до диска. Topaz Video Enhance Ai та Davinci вирішують як боротьбу з підтримкою аудіо належним чином через відеокодування. Давінчі іноді бореться з підтримкою правильного руху кадрів при складі відео.

В даний час у мене є більше співвідношення любові / ненависті з Давінкі, ніж я з топазьким відео посилення АІ, тому що я маю краще відчуття речей TVEAI поганий. Давінчі мовчки змінить час у своєму відео, і ніколи не турбуйтеся сказати вам, що це це зробило, або чому це це зробило, або чи можна це виправити, використовуючи файл .mov замість .mp4 або .mkv. Це викидає випадкові помилки "Media Offline" у файлах MKV без причини і відмовляться читати певні послідовності кадрів, які витягують ідеально та скануйте, як звичайні файли до кожної програми файлу. Ручна заміна кадрів у відео іноді виправляє ці проблеми. Давати Давінкі ті ж кадри в іншому обгортці також іноді виправляє ці проблеми. Adobe Premiere може працювати так само, як і Davinci вирішити для моїх цілей, але у мене ще не встиг перевірити його.

По-третє, я рекомендую переміщати заточення від Avisynth / Vapoursynth і виконувати його в токазі VEAI, або Davinci вирішується. Це все ще може бути варто поводження з ін'єкцією шуму / зерна в цих утилітах, але заточення TVEAI працює краще, якщо це не в парі з загостренням Avisynth / Vapoursynth. AVISYYNTH та VAPURSYNTH викликають серйозні галовіння порівняно з іншими підходами, доступними в інших програмах. Якщо ви боретеся не переосмиснути вміст, коли ви намагаєтеся його покращити, залиште різко знищення та спробуйте параметри Proteus, як 40-40-0-0-0-35 x2. Це консервативні налаштування для більшості вмісту. Майте на увазі, що інструмент Dehaloing Proteus може спричинити галовання, а інструмент видалення шуму може заважати ін'єкційний шум.

2x моделі TVEAI продовжують, як правило, краще, ніж 4x моделі, а 1280 × 960 залишається кращою роздільною здатністю, ніж 2560 × 1920, принаймні до останнього кроку. DAVINCI може змінити розмір 1280 × 960 на 2560 × 1920 (або 1310 × 960 у 2624 × 1920, якщо ви віддаєте перевагу). 2560 × 1920 є кращим для будь-якого завантаження YouTube, якщо ви не хочете з'їсти потворний якісний удар.

Вивчення впливу шуму та ін'єкцій зерна

Наступні порівняння також показують вплив ін'єкційного зерна, шуму та додаткового загострення в кінцевий вихід у різних точках, на відміну від цього.

Мені б хотілося, щоб я мав більше кадрів з роком пекла частини 1 і 2, щоб показати, але це один з епізодів, я загубив, коли мій SSD помер раніше на цьому тижні, і я не зміг повністю відтворити свій власний процес у часі для цієї статті.

Правильне лікування може призвести до драматичних відмінностей у кінцевій якості зображення. Обидва кадри нижче були висококваліфікованими, використовуючи ті ж параметри Proteus у TVEAI. Єдина відмінність полягає в тому, як я попередньо звернувся до кадрів. Я налаштував клас кольору на зображенні нижче, щоб зробити різницю більш помітну з зображення попереднього перегляду.

Можна перевернути позначку, а потім використовувати TVEAI, щоб виправити проблему. Ось навмисне розбите відео приклад з кінця. Це надмірно і надширені, і в результаті є видима картина.

Як ми це виправити?

Очевидно, що один шлях - відтворити відео, але з менш попередньо введеним зерном та шумом. Але це не єдиний шлях. Деякі моделі Topaz досить гарні при видаленні небажаного шуму та зерна. Експеримент з високою якістю ARTEMIS та низькою якістю (LQ сильніше), якщо вам потрібен якийсь шум та видалення зерна, середньою якістю, якщо вам також потрібна певна згладжування, а Artemis Dehalo та Strong Dehalo варіанти, якщо вам потрібна особливо важка рука, що застосовується до більш ніж -Sharpened або іншим чином пошкоджений біт вмісту. Haia HQ, як правило, використовується для додавання шуму та зерна, а Proteus та AHQ не видаляють його так само, як ALQ або AMQ.

Я не припускаю, що нижче кліп представляє ідеалізований випуск, але це робить чудову роботу з ілюстрування того, як топаз може працювати як обробний інструмент для очищення вмісту, який ви вже надавали. Я, мабуть, віддаю перевагу 50/50 суміші цього випуску та оригінальної версії з високим рівнем шуму.

Ви можете або не любити мої конкретні варіанти Blend, але це менш важливо, ніж розуміння того, як застосувати принцип. Змішування зерна та шуму в матеріал, який ви маєте намір, щоб висококваліфіковано, не може бути способом обробки нормального відео, але це слід розуміти як одну з основ хорошого рівня AI з топазом відеозапису AI.

Переваги компонування

Постійний / композиційний кадр - це ще один спосіб покращити свій виводок з відеозйомки TOPAZ AI. Ось приклад з трьох кадрів від "далеко за зірками". Вони витягуються з одного базового файлу, але були поставлені через різні моделі.

Знову ж таки, ви можете не сподобатися моїм конкретним вибором змісток, але я буквально вибрав цей кадр у випадковому. Це протилежність вишневого прикладу.

Blending працює найкраще, коли у вас є конкретні аспекти різних зображень, які ви хочете використовувати, без будь-яких проблемних артефактів, які пройдуть. Епізод випробувань та трансмісійних зв'язків я побудував використовувані частини 18 різних кодів та способів обробки файлів. Це не суворо потрібно відновити епізод, але я хотів побачити, як далеко я міг покращити шоу.

Відео та зображення, представлені в цій статті, є композитами. Вони складаються з декількох файлів Avisynth, які були попередньо оброблені кількома способами. Потім ці файли проходили через декілька моделей TOPAZ, щоб створювати виходи, які самі поєднуються разом. У деяких випадках 1280 × 960 виходи були об'єднані та шалені в DAVINCI Resolve Studio 17, а потім знову годували TOPAZ, як окремі входи, створюючи випуск 2560 × 1920. Цей вихідний сигнал 2560 × 1920 потім змішаний з зміною виведення 1280 × 960, щоб створити кінцевий продукт.

Ось ще один приклад того, як простий композитування може покращити кінцевий результат. Зліва є REG Barclay, що використовується за допомогою версії показу, який був визначений, але не оброблений за допомогою будь-якого іншого фільтра. Зображення зліва була створена за допомогою Proteus при 2x висококласному. Праворуч зображення - 50/50 суміш. 50 відсотків - це зображення зліва. Інші 50 відсотків є високою шумною версією того ж епізоду, який був високоякісний, використовуючи модель високої якості Gaia на 2x.

Скільки коштує ці зміни?

Я збираюся показати деякі приклади того, як моя власна робота покращилася протягом останніх двох років, щоб не звертати увагу на свій власний ріг, але щоб проілюструвати, що я витратив багато часу, експериментуючи з цими програмами. Давайте зробимо кілька яблук до-яблук порівняння. Це порівняння дефіктивного під вогонь у дорозі воїна показує, як далеко я прийшов з вересня 2020 року:

Відновлений Defiant станом на 20 вересня. Я працював важко для цього підняття якості в той час.

Додавання зерна та шуму, перемикання на PROTEUS, а також збільшення продукції разом звичайно надавали значне чистого поліпшення якості та вище, що було раніше досяжним. Ось іігслів порівняння тих самих кадрів.

Ось порівняння Сиско з дефіктивної битви в "Шлях воїна". Я насправді обробив обидва з них з Youtube, щоб зробити певні люди бачать те, що вони бачать, а не те, що я бачу з нескомпресованими образами. Якщо ви переглянули мою роботу на YT, це детально вдосконалення до завантажених кадрів. Це порівняння показує втрату якості між YT та завантаженим відео. Тут це не так. Деякі епізоди беруть важче хіт, ніж інші (дим і хмари, як правило, отримують угліфіковані в YT's Decoder).

Ось ще одне порівняння від жертви ангелів. Старший образ у цьому випадку становить від 60 FPS коду епізоду, виконаний у Gaia-CG. Це не виглядає погано будь-якими засобами, але підняття між ними і два роки тому є суттєвим.

Порівняння кредитів Voyager

Я створив дві повні версії кредитів Voyager у 23.976 FPS та 30 FPS та частково 60 FPS версії. Я конвертую до 30 кадрів, використовуючи функцію "Chronos" TOPAZ, щоб побачити, як програма буде мати справу з деяким рухом Jerky. Я відчував, що загальні результати були змішані. Переміщення кредитів до 30 кадрів, безумовно, допомагає рух у початковій мультиметрії, але це не робить нічого для камери камери, що стоїть на Flyby кілька хвилин. Він також вводить деякий ринковий рух на планетарній кільцях пізніше кредитів.

По-перше, ось кредити у відновленні 23.976.

Далі, ось топова відео, що підвищує AI-перетворену версію на 30 FPS. Я тестував це в Давінді, а також випуск не був настільки ж хорошим, як топаз відео посилення AI. Якщо ви хочете, щоб вирушити з змінами швидкості кадрів, я рекомендую тестування TVEAI першим.

Особисто, я думаю, що це трохи мити. Перетворення 30 FPS виглядає краще в деяких конкретних місцях, а 23.976 рідше виглядає краще в інших.

Проблеми та виклики

Судові справи та трибільні зв'язки відновлюються красиво, але було кілька больових точок. Один виклик у цьому епізоді мав справу з тим, як TVEAI обробляються актори переднього плану проти прогнозованих фонів. Це також проблема з емісами, але нижчий рівень деталізації у фоновому режимі зеленого скринінгу робить його ще важче упоратися.

Sisko з'являється трохи поза кадром тут. Ефект може бути зменшений зворотним змішуванням у менш гострому матеріалі, але було важко повністю викорінити. Краще класифікація кольорів також була корисно корисною точкою обличчя - вони, як правило, блищать, - але пошук одного підходу, який працював як для TOS-ERA, так і для кадрів DS9-era, вже був складним.

Крім того, YouTube любить заїкатися на моєму кінці в хвості цього кліпу. Це не відбувається при перегляді оригінальних кадрів з файлу. Я не впевнений, що це викликає.

Цей кліп з року пекла ілюструє, наскільки важко отримати Voyager і глибокий простір дев'ять, щоб мати деталі, коли винос. Цей кліп не поганий, але він не відповідає моїм власним критеріям для "HD", оскільки він не зберігав достатньо деталей у висококласних. Це було кодуванням роботи, що я став все ще після того, як моя невдача SSD минулого тижня.

Окрім цих речей, найбільший виклик, який я в даний час стикається, - це неперевірена, що дає Давінкі такий набір волосків та знаходження більш надійного способу створити такий якісний підйом. Я впевнений, що я буду. Якби я не витрачав минулого тижня, намагаючись відтворити свою попередню роботу без користі будь-якого з моїх записів проекту, я, можливо, вже знайшов рішення.

І просто для задоволення

Я обіцяв кілька кліпів, які не були представлені в іншій історії, і я не просто означав останніх або проміжних файлів. По-перше, ось перші два автопарки з глибокого простору дев'ять жертв ангелів.

Я також завантажив остаточну битву від "Шлях воїна", і відновив це знову для цієї ітерації проекту, зокрема.

"Це не ілюзія". Ні, це нерозумно ні. Причина того, що деякі кольорові оцінки відрізняються за допомогою кліпу, а з зображенням до зображення - це тому, що я все ще вивчаю, як колір класу та я експериментую ярмарку. Що добре виглядає в одній сцені, може не виглядати добре в наступному. Коли я роблю багатосезонні кліпи, я, як правило, набагато більш консервативний з кольором, а не ризиком, що руйнує щось.

Я не маю великого або конкретного способу припинити цю історію, за винятком того, що я сподіваюсь, що це обговорення того, як досягти найвищих результатів у TVEA, корисною для деяких з вас, і що ви взагалі насолоджуєтеся кадром та зразками. Я скоро буду оновлювати підручники, і сподіваюсь, що спосіб вилучення високоякісної консистенції з Давінкі, який я відчуваю, що я можу поділитися, не руйнуючи чийсь день, якщо вони намагаються дублювати свою роботу. Закріплення дивних помилок руху, який він представляє, має відбутися спочатку.