Kdenlive научится удалять фон с видео с помощью ИИ

Свободный видеоредактор Kdenlive готовит ещё одну функцию на основе искусственного интеллекта — на этот раз это инструмент автоматического удаления фона из видеоклипов. Разработчики показали его в конце 2024 года как превью того, что попадёт в релиз 25.04, запланированный на 2025 год.

Kdenlive — один из самых заметных кроссплатформенных open-source видеоредакторов, рассчитанный как на любителей, так и на профессионалов. Команда проекта постепенно встраивает в него ИИ-возможности: ещё в релизе 24.05 появился локальный перевод субтитров с использованием нейросетей. Новый инструмент удаления фона продолжает эту линию.

Как это работает

В основе функции лежит модель Segment Anything Model 2 (SAM 2) от Meta. Она автоматически распознаёт и сегментирует объекты в кадре, а затем строит маски объектов, определяющие их границы в сцене. Эти маски накладываются на клип и позволяют пользователю выделить объект переднего плана и удалить всё остальное.

Работа с инструментом в Kdenlive выглядит так: после настройки функции нужно создать новую маску, кликнуть на объект, который должен остаться на переднем плане, а затем нажать кнопку «Generate Mask» — программа запустит процесс удаления фона.

По умолчанию Kdenlive загружает самую компактную из доступных моделей — судя по всему, это sam2.1-hiera-tiny: разработчики подтверждают, что редактор по умолчанию скачивает наименьшую по размеру модель.

Проблемы с установкой

Автор материала It's FOSS попробовал протестировать функцию на Fedora 41, следуя официальной инструкции Kdenlive. По ходу настройки пришлось вручную доустанавливать множество недостающих зависимостей, но процесс раз за разом останавливался на этапе установки модуля opencv-python. Ситуацию не исправила даже ручная установка этого пакета через pip — довести настройку до конца и посмотреть на предлагаемые модели так и не удалось.

Разработчики в курсе этой проблемы и обещают доработать процесс установки инструмента удаления фона в следующих итерациях.

Как попробовать уже сейчас

Функция ещё не входит в стабильный релиз, поэтому тем, кто не готов возиться с альфа-версией, стоит просто подождать. Для желающих протестировать её уже сейчас команда Kdenlive выложила AppImage для Linux и .exe-сборку для Windows. Разработчики прямо предупреждают: это версия в разработке, и использовать её для важных, «боевых» проектов монтажа не стоит — только для ознакомления и тестов.

Источник: It's FOSS.