Upscale видео с использованием AI (обсуждение, предложения, обмен опытом)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..Обработка видео с использованием ПО на базе искусственного интеллекта (AI)

---

 
Щебечем здесь на тему увеличения разрешения (обработки) видео с использованием программного обеспечения на базе искусственного интеллекта (AI)

Современный зритель избалован визуальным контентом в высоком разрешении. Да и верхний предел качества картинки не установлен. Не беда, если видеоролик не отвечает стандартам, улучшить его качество помогут нейросети. Помогут ли?..

пник1
НЕ слишком большой битрейт для AV1? И фильтр motion deblur лучше не использовать, скачаю исходник и попробую сделать небольшой фрагмент.

я пробовал без motion deblur.
получается хуже

пник1 писал(а):

Если будут предложения как добиться лучшего результата, то пишите конкретные настройки программ и сделайте сравнение скриншотов своего и моего результата. А пока так. Когда лицо в исходнике 10x10 пикселей и сильный шум, то вас ничто не спасёт. Это я о проблемных местах. Два дня чудес (1970) DVDRip [AV1/1080p] [hand made Upscale AI]

и, всё-таки, комбо артемис(алиас/муар)+ирис_1 смотрятся приятнее, без искажений лиц и предметов

1_) https://wdho.ru/bc9C
2_) https://wdho.ru/700w

Календарь
Вот сейчас накидал скринштов вашего и моего "шедевров".
У обоих есть недостатки.
Но, вцелом, вы правы. Можно было картинку сделать чуточку помягче.

пник1
Обезображивающие артефакты неприемлимы при апскейле фильма, весь смысл восстановления теряется.

Согласен.
И что делать?
Большая-то часть фильма смотрится нормально.
Но есть "мелкий" план - короткие малозначащие сцены.
Ради них мылить весь фильм?
Я уже высказывал мысль, что нужно резать на кусочки и апскелить каждый из них самостоятельно.
Но ещё не решился это попробовать.
А сошьётся ли оно потом?
А будет ли такой же длины как звук?
Ох...

Кодировать разными моделями разные эпизоды фильма - худшее что можно придумать, это не баланс белого в сценах править. У каждой модели свой почерк, в итоге будет еще хуже. Попробуйте - убедитесь сами. По поводу "большая часть смотрится нормально" - нет, не нормально - мпег-ореолы и двойной контур вылезли на первый план, очень много искажений в отрисовке растительности, , излишне подчеркнутая контурность фигур и лиц. Смотреть такое видео - зрение потерять. между прочим Вы делаете фильм в детский раздел).
Более у меня мыслей по фильму нет, пошаговый пример (от и до) как можно было сделать у Вас должен был остаться, но он Вас не устроил.

Попробуйте, порежьте, обработайте, склейте. Заодно расскажете всем совпали ли аудио и видео дороги после склейки, нормально ли сшился воедино фильм, насколько гармонично смотрятся в целом материале эпизоды обработанные разными алгоритмами.

я пробовал порезать на куски, потом после обработки топаза, склеивал, рассинхрон получается! Топаз косячит с кадрами, но это было наверное на версии 3 в начале. Может в 4 серии это удастся.

пник1
сравнение с исходником - https://imgsli.com/MjIwOTk2
сравнение с вашим рипом - https://imgsli.com/MjIwOTk3
Если смотреть Ваш рип через madshi , то смотрится лучше, чем через рендер по умолчанию.
У вас четче, детали прорисованы лучше, за счет motion deblur. Но в тоже время искажения, местами хорошо, а местами казябра. Плюс у вас не кропанный сверху и снизу. Сравнения возможно приведены в тех местах, где у Вас получилось хорошо. Кодировал отрезок небольшой набум. Короче - Ваш рип смотрится четче, но в тоже время искажения. При просмотре противоречивые чувства - хорошо и плохо, постоянно между собой воюют.

пник1
LORDKILL
и многие релизеры handmade video
коллеги! давайте адекватно смотреть на свой труд и результаты его.
Апскейл НЕ ПРЕДНАЗНАЧЕН для накачки четкости, это масштабирование картинки с увеличением количества пикселей, повышение резкости есть непервостепенная задача при этом. Возможно это непривычно для вас и принять это сложно.
Если этот процесс (искусственное раздувание чёткости при отсутствии детализации) вызывает артефакты (любые - контурность, изменение геометрии лиц, фигур.., появление паразитарных изображений - мозаичность, сеточка, бугристость) - то это уже не восстановление фильма, а мартышкин труд (бесполезный).
К моему сожалению, качество апскейлов большинством пользователей (киноманов) оценивается в позиций резкости картинки, и им глубоко разноцветно на эпизодическое (или в тяжелых случаях - постоянное) присутствие деформирующих артефактов. Искренняя печаль от такого восприятия.
Посмотрите на студийно восстановленные фильмы (двд или блюрики) - хоть единожды! вы видели там искажение контуров предметов? пусть недостаточно чётко, но без коверкания лиц, травы, текстовых изображений.
Откуда у апскейльщиков-любителей взялся этот нелепый стандарт - "чёткость резкости не помеха - дайте две!" ?

Календарь писал(а):

"чёткость резкости не помеха - дайте две!" ?

чОткость + Мыло = На бАльшой панели луДче смотрится. Это мне уже заявляли ранее, в одной из тем...

cigorv писал(а):

На большом экране мыльная картинка смотрится лучше. Окончательная оценка только после просмотра видео.

Lisa_Alisa
не сыпь зерно на пиксель:
кошерный алгоритм -
лишь тот, в котором ч0ткость
на фоне глянца лиц.
@aka_Вячеслав_Добрынин
---------
Правильная работа реставратора:

Портрет Екатерины II, Федор Степанович Рокотов, (ок. 1780 г.) - исходник


Портрет Екатерины II, Федор Степанович Рокотов, (ок. 1780 г.) - восстановление деталей и резкости, чистка от шумов.

пник1 писал(а):

Вот сейчас накидал скринштов вашего и моего "шедевров".

сравнение по двум (мой - просто вырезала на глаз полосы):




Но это долго, в 2 прохода, за один выйдет так, тоже в принципе прилично и лучше чем у вас:


Шерлок Холмс (наш). В принципе можно сделать лучше чем выложено мной тут, но там на копейки качества добавилось.



или так: https://imgsli.com/MjIxMDEy

Добавлено спустя 6 минут 24 секунды:

Календарь писал(а):

Правильная работа реставратора:

издевательство а не работа. Все в мыло смазали.

Храбрый Пак (1953) - два варианте - с колоризацией и без. Лучше не сделать.



Ореховый Прутик (Бетакам + моя колоризация) в 4К:



Великан-эгоист (1982)
сравнение с исходником (цвет): https://imgsli.com/MjE5Nzc1

Lisa_Alisa писал(а):

Календарь писал(а): Правильная работа реставратора: издевательство а не работа. Все в мыло смазали.

это был пример-сарказм, для наглядности что порою получается из фильма, 2 минуты работы с изображением в редакторе PhotoScape

Про реставрацию Мосфильма. Походу там все пьяные в зюзю, раз такие варианты выкладывают на офф. канале. Золотой теленок в 4К - серьезно? Там нет 4К и близко, мыло, темное, с кучей мусора. Мой вариант 1080р на голову выше в качестве. Короче халтура.

То-же самое и Начало, так-же темное, мыльное, с кучей песка. Зачем потом сюда такое лить? Зачем засыпать трекер ненужным мусором?