Motion Capture für Einsteiger

KI-gestütztes Motion Capture: schnelle Ergebnisse ohne Anzug

Für kurze, klar abgegrenzte Bewegungsabläufe ist KI-gestütztes Video-Mocap inzwischen eine praktische Einstiegsmethode: Eine einzelne Kamera oder ein Smartphone genügt oft, um einen kurzen Take ohne Anzug und Körpersensoren in eine erste Charakteranimation zu verwandeln. Für Walkcycles, Gesten, Previsualisierung und kurze Spielszenen kann das vollkommen ausreichen – besonders, wenn die Aufnahme anschließend nur leicht angepasst werden muss.

KI-Mocap direkt in Unreal Engine und iClone

Der Trend ist in verbreiteten Animationswerkzeugen angekommen. Unreal Engine 5.8 bietet MetaHuman Animator mit markerlosem Capture aus einer einzelnen Videoaufnahme. Diese Funktion ist derzeit experimentell, wird offline berechnet und zielt auf MetaHuman-Charaktere; sie ist kein universeller Echtzeit-Mocap-Schalter für beliebige Skelette. iClone bietet mit Video Mocap ab Version 8.63 ebenfalls einen integrierten Video-zu-Bewegung-Workflow, den Reallusion gemeinsam mit QuickMagic umsetzt. Das Video wird importiert, die generierte Bewegung kann geprüft, verfeinert und für andere 3D-Anwendungen exportiert werden.

Für einfache, kurze Takes ist das oft der effizienteste Weg: Kamera aufstellen, Bewegung aufnehmen, generieren lassen und den Clip am Charakter prüfen. Das Ergebnis ist eine gute Grundlage für Blocking, Previs, kurze Animationen oder Gameplay-Prototypen. Je komplexer die Szene, desto wichtiger werden saubere Aufnahmebedingungen und anschließendes Cleaning.

Weitere KI-Mocap-Dienste

Zusätzlich bieten spezialisierte Dienste wie Radical, QuickMagic oder MoveAI an. Dafür genügt ein Video, das zum Beispiel mit einer Kamera oder einem Smartphone aufgenommen wurde. Das Video wird je nach Werkzeug lokal in einer Anwendung oder über einen Webdienst analysiert und anschließend als Bewegungsdaten ausgegeben. Die Verfahren unterscheiden sich in Abdeckung, Stabilität und Detailtreue. Für kurze, klar gerahmte Takes liefern sie häufig eine brauchbare Ausgangsanimation. Bei Verdeckungen, Körperkontakt, längeren Szenen und präziser Fingerarbeit kommt es besonders auf gute Aufnahmebedingungen und anschließendes Cleaning an.

Vorteile von KI-gestützten Lösungen:

• Kein zusätzliches Equipment außer Kamera/Smartphone erforderlich
• Schnelle Ergebnisse
• Günstige oder kostenlose Einstiegsoptionen

Einschränkungen:

• Keine Live-Ausgabe: Video-Mocap wird in der Regel nach der Aufnahme berechnet. Je nach Werkzeug geschieht das lokal oder online; bis der Solve fertig ist, erscheint die Bewegung nicht in Echtzeit auf dem Charakter.

Hardware-Mocap: Wann Anzüge und Handschuhe sinnvoll bleiben

KI-Video-Mocap ergänzt die klassische Hardware, ersetzt sie aber nicht in jedem Workflow. Bei Rokoko ist der Körperanzug weiterhin der Smartsuit Pro II; die jüngere Hardwaregeneration betrifft vor allem die Smartgloves II. Das passt zu unserer Praxiserfahrung: Die erste Smartgloves-Generation war für präzise Fingerbewegungen teilweise zu ungenau. Die überarbeiteten Handschuhe zielen auf eine stabilere und genauere Erfassung der Hände. Mehr zu unserem Einsatz des Anzugs erfahren Sie in unserem separaten Rokoko-Beitrag.

Ein Anzug bleibt die bessere Wahl, wenn Bewegungen live auf den Charakter übertragen werden sollen, Takes länger oder dynamischer sind oder die Kamera den Körper nicht durchgehend gut erfassen kann. Für kurze, klar sichtbare Bewegungen ist Video-Mocap oft schneller startklar und ausreichend. Entscheidend ist der Zweck des Takes.

Inertiale Systeme: Perception Neuron und Rokoko

Inertiale Motion-Capture-Systeme wie Perception Neuron und Rokoko bieten eine fortschrittliche Alternative zur Kinect-Lösung und eignen sich ideal für ambitioniertere Projekte. Beide Systeme verwenden Sensoren (IMUs), die direkt am Körper getragen werden, und erfassen Bewegungen präzise in Echtzeit. Dennoch unterscheiden sich die beiden Ansätze in einigen entscheidenden Punkten:

Perception Neuron:

Dieses System zeichnet sich durch eine größere Flexibilität aus, da es mit einer höheren Anzahl von Sensoren (je nach Kit) ausgestattet werden kann. Dadurch eignet es sich besonders für komplexe Bewegungsabläufe. Allerdings erfordert es eine aufwendigere Einrichtung und Kalibrierung. Aus persönlicher Erfahrung lässt sich sagen, dass das Anlegen der einzelnen Sensoren ziemlich zeitaufwendig ist und es schwierig sein kann, diese alleine korrekt zu platzieren. Es handelt sich hierbei nicht um einen Anzug, in den man einfach hineinschlüpfen kann, sondern die Sensoren müssen einzeln befestigt werden, was auch dazu führt, dass die Position jedes Sensors genau überprüft werden muss. Auf der positiven Seite bietet die Software von Perception Neuron oft natürlichere Walkcycles als vergleichbare Lösungen. Der Kundensupport von Perception Neuron wurde jedoch als schwach beschrieben, insbesondere bei der Bearbeitung von Garantie- oder Austauschfällen, die häufig viel Zeit in Anspruch nehmen.

Rokoko:

Im Vergleich dazu setzt Rokoko auf ein einfacheres Setup mit einer benutzerfreundlichen Software (Rokoko Studio), die speziell für Kreative ohne tiefgehende technische Kenntnisse entwickelt wurde. Der Rokoko-Anzug ermöglicht ein schnelles und unkompliziertes Anlegen, da man einfach hineinschlüpfen kann und schnell arbeitsbereit ist. Rokoko ist ein europäisches Unternehmen und überzeugt durch schnellen und kulanten Benutzersupport, insbesondere bei defekten Sensoren oder anderen Problemen. Die Infrastruktur rund um die Geräte und die Software wirkt deutlich ausgereifter. Ein kleiner Nachteil von Rokoko ist, dass die Walkcycles bei Bewegungen wie Gehen manchmal etwas unnatürlich wirken. Dennoch bietet Rokoko für den Preis ein sehr gutes Gesamtpaket und erleichtert den Einstieg in die Motion-Capture-Technologie erheblich.

Vorteile inertialer Systeme:

• Keine externen Kameras nötig
• Mehr Bewegungsfreiheit, auch im Freien
• Bessere Ergebnisse bei dynamischen oder akrobatischen Bewegungen

Nachteile:

• Sensoren müssen regelmäßig kalibriert und korrekt angelegt werden, da ansonsten nach etwa 15 Minuten Aufnahme sogenannter „Drift“ auftreten kann. Dies bedeutet, dass die erfassten Bewegungen zunehmend ungenau werden, da die Sensoren ihre exakte Position relativ zueinander verlieren. Um dies zu vermeiden, ist eine erneute Kalibrierung notwendig, was den Workflow unterbrechen und Zeit kosten kann.
• Magnetische oder elektrische Störquellen können das Tracking beeinflussen, obwohl dieses Problem zunehmend in den Hintergrund tritt. Dennoch können starke elektromagnetische Felder, wie sie in der Nähe großer Metallobjekte auftreten, die Genauigkeit der Aufnahmen erheblich beeinträchtigen.