Sony erweitert sein Portfolio im Bereich der virtuellen Produktion und Augmented Reality um das neue Kamera-Tracking-System OCELLUS (ASR-CT1).
Das System wurde speziell für Film- und Live-Produktionen entwickelt und nutzt die SLAM-Technologie (Simultaneous Localization and Mapping). Dadurch arbeitet OCELLUS ohne Marker und führt über mehrere Sensoren hinweg eine stabile Positionsbestimmung durch. Sony positioniert das System als universelle Lösung, die sowohl mit Broadcast- als auch mit Kinokameras unterschiedlicher Hersteller kompatibel ist.
Technische Merkmale und Tracking-Funktionalität
OCELLUS setzt sich aus einer Sensoreinheit, einer Verarbeitungseinheit (Processing-Box) und bis zu drei Objektiv-Encodern zusammen. Mithilfe von fünf Bildsensoren und Visual SLAM-Technologie erstellt das System eine digitale Referenzkarte, die eine präzise kamerainterne Positionsbestimmung ermöglicht. Die Größe dieser Referenzkarte bleibt jedoch begrenzt.
Ein Vorteil des Systems liegt in seiner Flexibilität für Innenräume und Außenbereiche. Infrarot-LEDs an der Sensoreinheit verbessern die Erfassung in schlecht beleuchteten Umgebungen. Eine Visible Light Cut Unit reduziert potenzielle Tracking-Fehler bei wechselnden Lichtverhältnissen.
OCELLUS im Überblick
Sensoreinheit mit fünf Bildsensoren
- Vier von fünf Bildsensoren gewährleisten das markerfreie Tracking und eine hohe Verdeckungsresistenz (Occlusion Resitance)
- Wenn mindestens ein eingesetzter Bildsensor gültige Merkmalspunkte erfasst, können Tracking-Daten extrahiert werden
- Infrarot-LEDs auf beiden Seiten jedes Bildsensors unterstützen das Tracking in schwach ausgeleuchteten Umgebungen
- Visible Light Cut Unit für stabiles Tracking in Umgebungen mit häufigen Lichtwechseln
- Abmessungen der Sensoreinheit: ca. 86 mm × 60 mm × 43 mm (B × H × T) (3,39″ × 2,36″ × 1,69″), Gewicht: ca. 250 g
- Montage und Positionsanpassung über NATO-Schienenmontageteilen (im Lieferumfang enthalten)
- Anschluss an und Stromversorgung über die Processing-Box via einem USB-Type-C-Kabel mit Verriegelungsmechanismus
Processing-Box
- Echtzeit-Übertragung von Tracking-Daten und Kamera-/Objektiv-Metadaten an CG-Rendering-Software wie Unreal Engine über Ethernet-Kabel im Free-D-Format
- Genlock-Eingang, Timecode-Eingang, SDI-Eingangs-/Ausgangsanschlüssen und Objektiv-Encoder-Anschlussklemmen
- Unterstützt die Aufzeichnung von Tracking-Daten und Kamera-/Objektiv-Metadaten als FBX-Dateien auf SDXC-Speicherkarten (UHS-II/UHS-I), synchronisiert mit Videodateien der Hauptkamera
- OLED-Display zur Überprüfung von IP-Adresse, Tracking-Informationen, Objektivdaten und mehr
Objektiv-Encoder
- Erkennt präzise Rotationswinkel und Positionen von Objektivfokus, Zoom und Blendenwerten
- Überträgt die erkannten Daten über ein 7-poliges LEMO-Kabel an die Processing-Box
- Ermöglicht die Erfassung von Metadaten für Objektive und Kameras, die das Einbetten von Objektivdaten am SDI-Ausgang nicht unterstützen
- Fünf verschiedene Zahnradtypen für unterschiedliche Objektive
Integration von Kameradaten und Echtzeit-Metadaten
OCELLUS stellt Metadaten zur Kameraposition und -ausrichtung in Echtzeit bereit. Bei kompatiblen Sony-Kameras lassen sich zusätzlich Fokus-, Blenden- und Zoomwerte über den SDI-Ausgang auslesen und per Ethernet an externe Geräte übertragen. Das System unterstützt Cooke /i-, B4- und E-Mount-Objektive, sofern die Kamera Metadaten im SDI-Signal einbettet.
Für Objektive ohne SDI-Metadatenintegration stehen zusätzliche Objektiv-Encoder zur Verfügung. Diese übertragen die erfassten Objektivwerte über ein LEMO-Kabel an die Processing-Box. Dort werden die Tracking- und Objektivdaten aufgezeichnet und synchronisiert mit der Videodatei gespeichert. OCELLUS überträgt Tracking-Daten zudem an Render-Engines wie Unreal Engine im Free-D-Format.
Kompakte Bauweise und flexible Montage
Die Sensoreinheit von OCELLUS wiegt etwa 250 Gramm und besitzt ein kompaktes Design. Dank NATO-Schienenhalterungen lässt sie sich an verschiedenen Kamerasystemen befestigen. Ein verriegelbares USB-C-Kabel verbindet sie mit der Processing-Box und übernimmt gleichzeitig die Stromversorgung.
Die Processing-Box verfügt über diverse Schnittstellen, darunter Genlock- und Timecode-Eingänge, SDI-Ein- und -Ausgänge sowie Anschlüsse für Objektiv-Encoder. Ein OLED-Display zeigt Statusinformationen zu Tracking- und Metadaten-Einstellungen an.
Verfügbarkeit und Markteinführung
OCELLUS wird auf der NAB Show 2025 in Las Vegas ab dem 6. April am Sony-Stand präsentiert. Sony plant, das System ab Herbst 2025 auf den Markt zu bringen.
