Upscale видео с использованием AI (обсуждение, предложения, обмен опытом)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..Обработка видео с использованием ПО на базе искусственного интеллекта (AI)

---

 
Щебечем здесь на тему увеличения разрешения (обработки) видео с использованием программного обеспечения на базе искусственного интеллекта (AI)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..

giryaby
обучающего видео - нет, не хочется делать. заинтересованные всегда могут самостоятельно (это просто) сделать подборку "скриншоты исходника - настройки моделей AI - скриншоты результата" (из моих релизов) - будет вполне наглядно и информативно.

Календарь писал(а):

то, что предлагаете Вы - логично, но требует х10 времени на релиз, его нет от слова совсем....

Нет, я предлагаю делать это не для каждого релиза, а ОДИН раз.
Чтобы потом можно было легче ориетироваться.
Будет что-то в духе атласа.

пник1
по любому нужны десятки примеров -
за полгода "варки в теме" я понял, что исходники все разные, даже если очень похожа зашумленность или расфокусировуа картинки. Скорее всего это связано даже с типом кинопленки, на которую снимали.
Например - советская пленка Свема, узнаваема своей "акварельностью" - цвета не имеют четких контуров, как-бы пропитывают друг друга, подобно диффузии пятен на мокрой промокательной бумаге - получить четкое изображение (при имеющихся сейчас общедоступных инструментах) попросту невозможно. Если фильм снят на Кодак - результат апскейла выше по четкости.
==============

да! кстати вот еще важно - работа с анаморфом при апскейле - тоже могут быть заморочки* с искажениями кадра (просто перепечатаю своё же сообщение из другой темы)

соотношение сторон пикселя (PAR - pixel aspect ratio) - пиксели все разные (как и фломастеры на вкус и цвет)

исходник интерлейсный ДВД-анаморф 768@720x576 - перевести в прогрессив с квадратным прикселем, и искажений картинки при апскейле не будет.

1536x1080 - норм. размер кадра





на втором скриншоте - снять галочку в пункте аспект = убрать анаморф (перевести в квадратный в пиксел)
после этого - обрезайте черные бордюры, формируйте разрешение "под себя" - выдерживая кратность 4 для 4:3 или кратность 16 (допустимо и 8) для 16:9
---------------

анаморфное видео 768x576@720x576i (построено пикселями с неравными сторонами по ширине и высоте)

768x540p -> 1536x1080 - это и есть верный размер для анаморфа 4:3, переведенного в изображение с КВАДРАТНЫМ пикселем

720x540p -> 1440Х1080 и это тоже верный размер для анаморфа 4:3, но с родным, АНАМОРФНЫМ пикселем
-----------
всё хорошо для 1440Х1080, если анаморф, но если выходной результат кодирован с квадратным пикселем и с оставленной шириной кадра для анаморфного пикселя --> искажение пропорций.

Господа релизеры доброго времени суток ! Если у кого есть возможность сделайте пожалуйста трилогию ( или первые 2 части) фильма The Cube (Куб) в 4k с проходом Топаза! Один из интереснейших фильмов который задал жанр закрытого пространства, с него пошли Пилы и прочее))

Начал финальную обработку Западня (1999)
Не слишком переборщил* с чёткостью? глаз не режет?? (без сарказма)

->>Дюжина 30-сек превью, слитых в один файл (~430 mb, звука нет, только видео)<<-

Календарь Куда столько скринов? Достаточно 5, ну 7 максимум, чтобы понять! Мне понравилось , мне нравится картинка чистая, без шумов и оочень четкая! Глаза мои привыкли к четкой картинке, не хватает четкости плюс шумы и глаза мои бунтуют.

LORDKILL
Картинки под хайдом - хлеба не просят))
Спасибо за оценку!

Подскажите. Что-то запутался.
1. Есть допустим файл MPEG2 с чёрными полосками
2. В нейропрогу допустим Topaz , его загружать уже обрезаный от полос или с полосами?
3. Можно ли сначала обрезать все полосы и сразу удвоить размер (допустим после обрезки 720х480 и сохранить в разрешении 1440х960) , а потом с разрешением 1440 загрузить в Topaz и уже там обработать?
4. Просто не пойму , на каком этапе делать обрезку.

4 если видео прогрессивное (576p)- всё равно на каком этапе, если интерлейсное, т.е. видеоряд состоит не из целых кадров, а "полукадров" (576i) - то перед обрезкой необходимо сделать деинтерлейсинг (перевод в прогрессив)
3 "сразу удвоить размер" - испортите качество (если Вы не гуру риппинга, работающий с ависинхом), топаз будет обрабатывать с примерно равной скоростью 720x480 -> 1440х960 или 1440х960 -> 1440х960. Я увеличиваю-уменьшаю размер кадра после обрезки, но только до ближайших кратных величин стандарта кадра - например 716x542 -> 720x540, тогда дефекты апскейла практически незаметны. (на этом же этапе удобно перевести анаморфный пиксель в квадратный: сняв флаг "анаморф" - xvid4psp 8 или указав пропорцию пикселя 1:1 - в HandBrake)
2 можете обрезать и в топазе, но там опция кропппинга менее удобна и менее наглядна
1 "MPEG2 с чёрными полосками" - самое важное его развертка - прогрессив или интерлейс

Решил попробовал сделать даунскейл до 1080p h264 c Мосфильмовского ремастера 4К VP9 "Руслан и Людмила"

Поднял на 4% контраст, больше ничего не трогал

Ваше мнение? "улучшать" ремастер (минус шумы плюс искусственные детали) от профессионалов или оставить нативное изображение и ждать обычных рипов? Два семпла https://wdho.ru/fnZs https://wdho.ru/fnZr

Календарь
Конечно улучшай, а мы потом рип сделаем из улучшенного апскейла.

LORDKILL писал(а):

Календарь Конечно улучшай, а мы потом рип сделаем из улучшенного апскейла.

Нет, апскейлить некуда, уже 4к исходник, наоборот, рип в топазе с понижением до 1080p, когда умельцы могут пройтись шумодавами и без AI программ.

Календарь
можно и так!!

OK! я всё-таки взялся за руслана и людмилу - вроде получается улучшить даже после МОСФИЛЬМовской реставрации (на любителя, конечно). это реально долго (2 фпс скорость)



получается пока вот так, будет 1080p h264 - https://wdho.ru/bc8d (4 минуты - начало первой серии со звуком)

Обработал топазом "Два дня чудес".
Указал там свои настройки.
Понимаю, что они не оптимальные, но добиться лучшего не смог.
Слишком зашумлённая картинка у исходника.
Перекручивашь ручку в топаз - лезут сильные искажения.
Чуть недокручиваешь - очень низкая резкость.
Сильно недокручиваешь - всё в шумах исходника.
Тем не менее, пока это - лучшее, что получается.

Кстати, мозг привыкает к шуму в изображении и достраивает картинку сам.
По крайней мере, мы понимаем, что происходит на экране.
Поэтому смотреть исходник - это не самая плохая идея.

Смотреть же на мыло, по-моему, совсем грустно.

Так получилось, что на авто-настройках Iris-MQ всё получило вмеру резкое и почти без артефактов.
Правда, есть ряд панорамных сцен, где шум настолько сильный, что даже в исходнике почти ничего не разобрать.
Естественно, что и Topaz выдал там бяку.

Если будут предложения как добиться лучшего результата, то пишите конкретные настройки программ и сделайте сравнение скриншотов своего и моего результата.

А пока так.

Когда лицо в исходнике 10x10 пикселей и сильный шум, то вас ничто не спасёт.
Это я о проблемных местах.

Два дня чудес (1970) DVDRip [AV1/1080p] [hand made Upscale AI]