FPV. AI upscaling analog FPV cam video (video2x + realesrgan)
Апскейлинг видео с аналоговой FPV камеры дрона ⇶ из 1200TVL в 4K. Используем самый простой и доступный бесплатный опенсорс проект Video2X (https://github.com/k4yt3x/video2x) со встроенными ИИ моделями. Предварительно я протестировал все доступные модели, с различными параметрами - в итоге самой лучшей оказалась realesrgan-plus (её и использовал при создании видео). Однако остальные, не сказать чтобы имеют большие отличия... явно заметно что качество апскейла ниже остальных только у libplacebo. Но, например модели REALCUGAN от REALESRGAN отличить достаточно сложно - разницу в деталях можно увидеть только при внимательном сравнении стоп-кадров между собой (проигрывает модель Real-CUGAN models-se). Остальные модели дают практически идентичные кадры, отличаясь в очень редких сценах, а при просмотре видео отличия найти вообще не реально. Поэтому, для себя решил что оптимально использовать realesrgan-plus-amine, эта модель обрабатывает видео в несколько раз быстрее чем старшая realesrgan-plus и если разницу не видно - то зачем ждать? (на моем ноуте со встроенной видеокартой Intel Iris Xe модель realesrgan-plus апскейлит 1 минуту видео в течение 6 часов!) Ну и в целом, наглядно видно, что применим такой апскейл разве что для видео в помещениях - изображение становится приятное, гладкое и ровное. Для видео на улице большой пользы от апскейла нет. P.S. Кроме прочего - обрабатывал с помощью video2X свои старые фото и видео из 2000-х, снятые на телефоны тех времен с камерами 0.3 мегапиксела и подобные: там результат оказался заметно лучше! Возможно из-за особенностей съемки FPV камеры (помехи, мыльное изображение многократно поврежденной линзы) алгоритмы ИИ не могут корректно понять как это-вот всё апскейлить. ----- 00:00 Установка ПО 00:50 Сравнение видео (соревнования) 02:00 Сравнение видео (природа) 03:00 Сравнение видео (деревня) 03:37 Покадровое сравнение
Апскейлинг видео с аналоговой FPV камеры дрона ⇶ из 1200TVL в 4K. Используем самый простой и доступный бесплатный опенсорс проект Video2X (https://github.com/k4yt3x/video2x) со встроенными ИИ моделями. Предварительно я протестировал все доступные модели, с различными параметрами - в итоге самой лучшей оказалась realesrgan-plus (её и использовал при создании видео). Однако остальные, не сказать чтобы имеют большие отличия... явно заметно что качество апскейла ниже остальных только у libplacebo. Но, например модели REALCUGAN от REALESRGAN отличить достаточно сложно - разницу в деталях можно увидеть только при внимательном сравнении стоп-кадров между собой (проигрывает модель Real-CUGAN models-se). Остальные модели дают практически идентичные кадры, отличаясь в очень редких сценах, а при просмотре видео отличия найти вообще не реально. Поэтому, для себя решил что оптимально использовать realesrgan-plus-amine, эта модель обрабатывает видео в несколько раз быстрее чем старшая realesrgan-plus и если разницу не видно - то зачем ждать? (на моем ноуте со встроенной видеокартой Intel Iris Xe модель realesrgan-plus апскейлит 1 минуту видео в течение 6 часов!) Ну и в целом, наглядно видно, что применим такой апскейл разве что для видео в помещениях - изображение становится приятное, гладкое и ровное. Для видео на улице большой пользы от апскейла нет. P.S. Кроме прочего - обрабатывал с помощью video2X свои старые фото и видео из 2000-х, снятые на телефоны тех времен с камерами 0.3 мегапиксела и подобные: там результат оказался заметно лучше! Возможно из-за особенностей съемки FPV камеры (помехи, мыльное изображение многократно поврежденной линзы) алгоритмы ИИ не могут корректно понять как это-вот всё апскейлить. ----- 00:00 Установка ПО 00:50 Сравнение видео (соревнования) 02:00 Сравнение видео (природа) 03:00 Сравнение видео (деревня) 03:37 Покадровое сравнение