SteadyView: Fragen und Antworten mit Marius Simonsen

Die softwarebasierte Bildstabilisierungstechnologie funktioniert, indem sie stationäre Objekte im Hintergrund der Aufnahmen erkennt und das Bild anpasst, um diese Referenzpunkte während des gesamten Videos stabil zu halten. Durch das gleichzeitige Tracking der Merkmale und die parallele Verarbeitung der Berechnungen liefert SteadyView scharfe, stabile Aufnahmen, die das Seherlebnis verbessern und die Analyse erleichtern.

SteadyView ist jetzt für alle neuen Aufnahmen auf allen bestehenden Veo-Kameras aktiviert – ohne erforderliche Hardware-Updates. Das bedeutet, dass jeder Veo-Nutzer automatisch von dieser Technologie profitiert, die sich durch Software-Updates kontinuierlich verbessert.

Um mehr über die neue Funktion zu erfahren, haben wir uns mit Marius Simonsen, Algorithmus-Entwickler bei Veo, zusammengesetzt und ihn nach dem Entwicklungsprozess und der Auswirkung dieser Funktion gefragt.

Was hat die Entwicklung der Bildstabilisierungsfunktion für windige Bedingungen inspiriert, und welche Herausforderungen wollten Sie lösen?Wir suchen ständig nach Wegen, das Seherlebnis zu verbessern. Wir haben beobachtet, dass Umweltfaktoren wie Wind oder Vibrationen auf bestimmten Oberflächen Aufnahmen beeinflussen könnten, wobei die Aufmerksamkeit eher auf die Kamerabewegung als auf den Sport selbst gelenkt wird.

Unser Ziel war es immer, den Menschen zu ermöglichen, sich vollständig auf die Aktion zu konzentrieren. Bei der Sportaufzeichnung müssen Trainer und Analysten jedes Detail des Spiels erfassen, und wir wollten sicherstellen, dass nichts von diesem Erlebnis ablenkt.

Diese Verbesserung kommt Aufnahmen unter verschiedenen Bedingungen zugute, wie Außenspiele an windigen Tagen und Hallenspiele auf reagierenden Böden wie Basketballplätze. Durch die Entwicklung von SteadyView stellen wir sicher, dass Zuschauer vollständig in das Spiel eintauchen können, ohne visuelle Ablenkungen.

Kurz gesagt, wir sahen eine Gelegenheit, unseren Aufnahmen eine weitere Qualitätsschicht hinzuzufügen und das Kern-Seherlebnis zu stärken.

Wie funktioniert die Bildstabilisierungstechnologie, und was unterscheidet sie von anderen Lösungen auf dem Markt?Der Algorithmus funktioniert, indem er stationäre Objekte im Hintergrund des Videos erkennt – Dinge, die sich während der Aufnahme nicht bewegen. Es kann ein Haus, ein Baum, ein Straßenschild oder ein geparktes Auto sein. Dann findet er die gleichen Objekte in allen Frames während des Videos und passt jeden Frame ein wenig an, sodass diese Objekte während des gesamten Videos in der gleichen Position bleiben.

Wir verwenden Erkennungssoftware, um mehrere Merkmale in jedem Frame zu finden. Für jedes Merkmal erstellen wir einen Deskriptor, damit sie erkennbar sind, und dann verwenden wir Matching-Algorithmen, um die gleichen Merkmale zwischen Frames zu finden. Basierend auf diesen abgeglichenen Paaren können wir geometrische Transformationen anwenden, um sicherzustellen, dass der Hintergrund stabil bleibt.

Der größte Vorteil der Bildstabilisierung mit Software ist, dass alle unsere bestehenden Kunden von SteadyView profitieren können. Sie müssen keine neue Kamera kaufen – jede Verbesserung, die wir vornehmen, wird automatisch auf alle angewendet. Und wann immer wir den Algorithmus verbessern, erhalten alle Kunden höhere Qualität.

Welche Art von Auswirkung hat die Funktion bisher gezeigt, und wie denken Sie, verbessert sie das Gesamtseherlebnis für Veo-Nutzer?Es ist eine lustige Sache. Das Ziel ist, dass der Betrachter SteadyView überhaupt nicht bemerkt. Das Video sollte vollständig stabil sein, und der Kunde sollte vergessen, dass es mit einer physischen Kamera aufgenommen wurde. Je besser es funktioniert, desto weniger Leute werden es bemerken.

Typischerweise, wenn Trainer und Analysten ein Video ansehen, passieren viele Dinge gleichzeitig. Sie wollen einen guten Überblick haben und alles sehen, was passiert. Wenn sich die Kamera auf und ab bewegt, bewegt sich das Video auf und ab, was leicht ablenken kann, und es könnte einige Details geben, die man nicht sieht.

Wenn du eine Aufnahme von dir selbst hast, die jetzt stabilisiert ist, anstatt zu wackeln, wird jeder, der sie anschaut, sich mehr darauf konzentrieren, was du auf dem Feld tust, als darauf, was die Kamera macht. SteadyView wird auf alle Videos angewendet und beeinflusst die Kernqualität. Ob du ein Trainer, ein Elternteil oder ein Spieler bist, jeder, der unser Video in irgendeiner Weise nutzt, wird davon profitieren.

Warum ist es für Veo wichtig, ständig unter-der-Haube-Funktionen wie diese zu verbessern, und was wird die Zukunft auf dem Feld bringen?Die Entwicklung eines Algorithmus wie SteadyView ist ein bisschen wie das Lösen eines Zauberwürfels. Wenn man eine Seite dreht, um ein Problem zu beheben, könnte es eine andere Seite beschädigen, die vorher perfekt war. Man muss alles ständig anpassen und ausbalancieren, bis alles zusammenpasst.

Wir zielen darauf ab, die Sportaufnahme so einfach wie möglich zu machen, ohne Kompromisse bei der Videoqualität einzugehen. SteadyView verbessert die Kernqualität unserer Videos. Ob du es für die Analyse verwendest, es in deinen sozialen Medien hochlädst oder es mit deiner Familie teilst, egal wofür du es verwendest, die Qualität wird besser sein.

Wir planen, es noch besser zu machen als es ist – es für noch fortgeschrittenere Fälle mit noch wackeligeren Aufnahmen funktionieren zu lassen. Im Moment gibt es eine Grenze; wenn die Kamera wirklich stark wackelt, wird sie mit SteadyView nicht stabilisiert. Wir hoffen, in Zukunft noch mehr Fälle stabilisieren zu können.

Ein stabiles Bild ist eine Grundlage für alle zukünftigen Analysearbeiten, die wir durchführen. Bei Veo entwickeln wir derzeit viele neue Analysetools, die davon abhängen, zu wissen, wo alles auf dem Feld ist, zu wissen, wo die Kamera relativ zum Feld ist, und zu wissen, wo die Spieler auf dem Feld sind. Eine Grundlage dafür ist zu wissen, in welche Richtung die Kamera schaut.

SteadyView bedeutet, dass alle Aufnahmen, selbst unter windigen Bedingungen oder unter anderen wackeligen Umständen, eine erhöhte Qualität haben werden – ob du ein Trainer, ein Spieler oder einfach jemand bist, der das Spiel genießt, du wirst ein besseres Erlebnis bekommen.