Anwendungsfälle für die Reframe API

Die Reframe API ändert das Seitenverhältnis eines Videos, indem sie intelligent den wichtigsten Teil jeder Aufnahme verfolgt und den Frame entsprechend um die Aufnahme herum neu zusammenstellt. Alle Inhalte in der neu gerahmten Ausgabe stammen ausschließlich aus dem Quellvideo, und die API generiert niemals neue Pixel, um Leerräume zu füllen.

Beste Anwendungsfälle

Die Reframe API funktioniert zuverlässig in folgenden Fällen:

• Videos, die standardmäßige Social-Media-Seitenverhältnisse benötigen: Die Konvertierung von Videos mit einem 16:9-Seitenverhältnis zu Ausgaben von 9:16, 1:1, 4:3 und 4:5 für verschiedene Kanäle ist der häufigste Anwendungsfall. Du kannst auch eine exakte Output-Auflösung angeben (zum Beispiel 1920×1080) für pixelgenaue Bereitstellung. 
• Live-Action- und reales Filmmaterial: Bei Interviews, Produktaufnahmen, Lifestyle- und Event-Filmmaterial und anderen mit der Kamera aufgenommene Videos ist ein sauberes Reframing möglich. Natürliche Kamerabewegungen werden automatisch geglättet, ohne sichtbare Artefakte. 
• Aufnahmen mit einem dominanten Motiv: Das dominante Motiv, z. B. eine Person, ein Produkt oder ein Fokuspunkt, bleibt während der gesamten Neukomposition im Frame. Mit Semantic Subject Lock kannst du das Zielmotiv mit einem Keyword oder Prompt benennen (zum Beispiel Mann in gelber Jacke oder Frisbee), und die Reframe API wird es durch jede Aufnahme verfolgen. 
• Multi-Shot-Videos mit sauberen Schnitten: Wenn die Erkennung von Szenenbearbeitung aktiviert ist, ermöglicht sie der API, jeden Übergang zu analysieren und eine stabile Komposition innerhalb jeder Aufnahme über alle Ausgabe-Seitenverhältnisse hinweg aufrechtzuerhalten. 
• Videos, die konsistente Overlays benötigen: Vorgenerierte Overlays (PNG oder GIF) können mit der Kontrolle über Timing, Position, Skalierung und Schleifen angewendet werden und bleiben über alle von dir generierten Seitenverhältnisse hinweg ausgerichtet.

Wenig geeignete Anwendungsfälle

Da die Reframe API nur innerhalb vorhandener Pixel neu positioniert und zuschneidet, generiert sie niemals neue Inhalte, um Leerräume zu füllen. Die folgenden Content-Typen werden beim Reframing beeinträchtigt oder funktionieren nicht:

• Vollbild-Einblendungen und Bauchbinden: Titel, Beschriftungen, Abspann und in das Quellvideo eingebrannte Grafiken nehmen die gesamte Breite des ursprünglichen Seitenverhältnisses ein.Wenn der Frame auf ein schmaleres Verhältnis zugeschnitten wird, beispielsweise von 16:9 auf 9:16, schneidet die Reframe API den Text an den Rändern ab, da sie eingebrannte Inhalte nicht neu anordnen kann – sie kann nur das Zuschneidefenster verschieben. Für Videos mit Text und Grafiken solltest du zuerst das Reframing am bereinigten Video durchführen und dann DGR (mit MOGRTs in verschiedenen Größen) verwenden, um Textüberlagerungen zu erstellen.
• Szenen mit mehreren Motiven und gleichzeitigen Aktionen: Semantic Subject Lock kann während der Neukomposition nur ein Motiv verfolgen. Wenn zwei oder mehr Motive gleich wichtig und räumlich getrennt sind, wie bei einem Zweipersonen-Interview in einer Totale, einem Panel oder einem Sportspiel mit Ball und entferntem Spieler, kann der Zuschnitt nur ein Motiv halten.Die anderen landen außerhalb des Frames.
• Schnelle oder mehrdeutige Szenenschnitte: Die Erkennung von Szenenbearbeitung erhält die Komposition bei Übergängen aufrecht. Allerdings können sehr schnelle Schnitte, harte Flash-Übergänge oder Match-Schnitte dazu führen, dass die Motivverfolgung das falsche Element fixiert und Sprünge im Zuschnittverlauf entstehen. 
• Grafikinhalte mit fester Komposition: Bildschirmaufzeichnungen, Folienpräsentationen, Dashboards und Filmmaterial mit stark bewegten Bildern haben kein verfolgbares Motiv und keinen sicheren Zuschnitt. Die Reframe API behandelt jeden Pixel in solchen Inhalten als wichtig, weshalb solche Inhalte nicht an die API gesendet werden sollten.
• Animation und bewegte Bilder: Bei animierten Inhalten wie Logo-Animationen, kinetischer Typografie, Titelsequenzen und Markenanimationen ist kein zuverlässiges Reframing möglich. Solche Inhalte weisen oft scharfe grafische Kanten und sich schnell bewegende Elemente auf, die eine präzise Einzelbild-für-Einzelbild-Rahmung erfordern, und sie kombinieren häufig mehrere Elemente, die sich gleichzeitig in verschiedene Richtungen bewegen.Die Reframe API ist auf reale Aufnahmen abgestimmt und kann animierte Elemente nicht präzise genug verfolgen, sodass die Ausgabe etwas ungenau aussehen oder der Bewegung hinterherhinken kann. Rendere für Animationen jedes Seitenverhältnis aus der ursprünglichen Animationsquelle oder ihrer MOGRT mit DGR, statt das Reframing an einem fertigen Export durchzuführen. 
• Nicht unterstützte Ausgaben: Die Reframe API produziert immer deckende H.264- oder HEVC-Ausgaben. Jeder transparente Hintergrund (ein Alphakanal) wird abgeflacht, da Alpha nicht erhalten bleibt. ProRes wird als Eingabe zum Dekodieren akzeptiert, aber nicht als Ausgabe produziert.