Штучний інтелект від Adobe Research підвищує якість відео – Інженери в Adobe Research представили передову програму штучного інтелекту під назвою VideoGigaGAN. Це інструмент призначений для перетворення розмитих відео відрізків у помітно чіткіші версії, пропонуючи значно покращену ясність після обробки.
Команда використала генеративну ворожу мережу (GAN) з конкретною метою навчити систему розпізнавати чіткість та ясність відеовмісту високої якості – вони зосередились на дрібних деталях, таких як окремі волоски брів, а не просто на розмазаній масі.
Забезпечуючи стабільність кадру відео за допомогою передового штучного інтелекту – Для збереження однакової якості на кожному кадрі відео, дослідники з Adobe інтегрували “модуль поширення за потоком” для цілісності візуальної навігації відео.
Порівняння між методом Adobe, позначеним як “Наш”, та іншими техніками показує унікальний підхід вчених. Їх публікація доступна на платформі arXiv.
Як Генеративні Ворожі Мережі поліпшують якість відео – Генеративні ворожі мережі складаються з двох нейромереж – генератора та дискримінатора – які змагаються в навчанні. Роль генератора полягає в “обману” дискримінатора, спонукуючи його помилити синтетичні дані з реальними, тоді як дискримінатор має покращувати свою можливість розрізняти між ними.
Для пом’якшення яких-небудь помилок штучного інтелекту та вирішення різкого падіння якості відео, дослідники також використовували техніки згладжування та “перенаправлення деталей високої частоти”.
За даними дослідників, система має потенціал покращити якість відео від восьми разів. Важливо зазначити, що це покращення досягається без появи загальних проблем, таких як неприродні кольори або пилки, які зазвичай асоціюються з обробкою відео на основі штучного інтелекту.
Переосмислення реалістичних текстур відео за допомогою штучного інтелекту – Розробники визнають, що частина вихідного відео повністю синтезується VideoGigaGAN на основі оцінок системи. Штучний інтелект може “відмалювати” необхідні елементи, такі як пори на шкірі, зморшки навколо очей або навіть вії, для досягнення високої чіткості.
Досі залишається невідомо, чи випустить Adobe цю програму для загального використання.
Раніше Adobe представила нейронну мережу для створення музики під назвою Project Music GenAI Control, яка дозволяє генерувати звук на основі текстових описів.