Варианты использования API Reframe

API Reframe меняет пропорции видео, интеллектуально отслеживая наиболее важную часть каждого кадра и перекомпоновывая кадр вокруг нее. Весь контент в перекадрированном выводе получен исключительно из исходного видео, и API никогда не генерирует новые пиксели для заполнения пространства.

Оптимальные сценарии использования

API Reframe надежно работает в следующих сценариях:

• Видео, требующие стандартных пропорций социальных сетей: преобразование видео с пропорциями 16:9 в выходные форматы 9:16, 1:1, 4:3 и 4:5 для различных каналов является основным вариантом использования. Вы также можете указать точное выходное разрешение (например, 1920×1080) для попиксельно точной передачи. 
• Съемки реальных событий: интервью, съемка продуктов, лайфстайл-видео, репортажи с мероприятий и другие видеоматериалы, снятые на камеру, без проблем перекадрируются под новый формат. Естественное движение камеры автоматически сглаживается без видимых артефактов. 
• Кадры с одним доминирующим предметом: доминирующий предмет, например человек, продукт или точка фокусировки, остается в кадре на протяжении всей перекомпоновки. Используя «Семантическую блокировку предмета», можно назвать целевой предмет, используя ключевое слово или запрос (например, мужчина в желтой куртке или фрисби), и API Reframe будет отслеживать его во всех кадрах. 
• Многокадровые видео с четкими переходами: если активировано обнаружение смены сцен, API анализирует каждый переход и поддерживает стабильную композицию в каждом кадре для всех выходных пропорций. 
• Видео, требующие согласованных наложений: предварительно созданные наложения (PNG или GIF) можно применять с контролем синхронизации, позиции, масштаба и зацикливания, и они остаются выровненными по всем создаваемым пропорциям.

Неподходящие варианты использования

Поскольку API Reframe только изменяет позицию и обрезает существующие пиксели, он никогда не генерирует новый контент для заполнения пространства. Следующие типы контента будут ухудшены или не будут работать при перекадрировании:

• Полноэкранный текст и нижние трети: заголовки, подписи, титры и графика, встроенные в исходное видео, занимают всю ширину оригинальных пропорций. Когда кадр обрезается до более узких пропорций, например с 16:9 до 9:16, API Reframe обрезает текст по краям, поскольку не может перекомпоновать встроенный контент — он может только перемещать окно обрезки. Для видео с текстом и графикой сначала перекадрируйте чистые видео, а затем используйте DGR (с MOGRT разных размеров) для наложения текста на них.
• Многопредметные сцены с одновременным действием: «Семантическая блокировка предмета» может отслеживать только один предмет на протяжении всей перекомпоновки. Когда два или более предмета одинаково важны и пространственно разделены, например интервью с двумя людьми в широком кадре, панельная дискуссия или спортивная игра с мячом и удаленным игроком, обрезка может удержать только один объект. Остальные выходят за пределы кадра.
• Быстрые или неоднозначные смены сцены: обнаружение смены сцены поддерживает композиционную целостность во время переходов, но очень быстрые переходы, резкие вспышки или переходы с совпадением могут привести к тому, что трекер объекта зафиксируется на неправильном элементе, что вызовет скачки в пути кадрирования. 
• Графический контент с фиксированной композицией: записи экрана, слайды, информационные панели и материалы с обширной моушн-графикой не имеют отслеживаемого предмета и безопасного кадрирования. API Reframe считает каждый пиксель в таком контенте важным, поэтому такой контент не следует отправлять в API.
• Анимация и моушн-графика: анимированный контент, такой как создание логотипов, кинетическая типографика, заставки и анимация брендов, не перекадрируются надежно. Такой контент часто содержит четкие графические края и быстро движущиеся элементы, требующие точного покадрового кадрирования, и часто сочетает несколько элементов, движущихся в разных направлениях одновременно. API Reframe настроен для реальных съемок и не может отслеживать анимированные элементы достаточно точно, поэтому результат может выглядеть немного неправильно или отставать от движения. Для анимации выполняйте рендеринг каждого соотношения сторон из исходного источника анимации или его MOGRT через DGR, а не перекадрируйте готовый экспорт. 
• Неподдерживаемые выходные форматы: API Reframe всегда создает непрозрачный вывод H.264 или HEVC. Любой прозрачный фон (альфа-канал) сглаживается, поскольку альфа не сохраняется. ProRes принимается как входной формат для декодирования, но не создается как выходной.