Ein eigener KI-Avatar muss heute kein Millionenprojekt mehr sein. Die entscheidende Frage ist nicht, welches Tool „das beste“ ist, sondern welche Aufgabe im eigenen Projekt gelöst werden muss.

Ein Musiker, der lediglich einen Avatar für ein Musikvideo benötigt, braucht beispielsweise einen völlig anderen Workflow als jemand, der eine Figur live auf der Bühne bewegen möchte. Deshalb haben wir die wichtigsten Werkzeugkategorien zusammengestellt – mit Beispielen, aber bewusst ohne Ranking.

Hinweis: Funktionen, Preise und Lizenzbedingungen verändern sich laufend. Vor einer kommerziellen Nutzung sollten immer die aktuellen Bedingungen des jeweiligen Anbieters geprüft werden.

1. Avatar erstellen

Am Anfang steht die Figur. Sie kann realistisch aussehen, stilisiert sein oder bewusst wie eine digitale Kunstfigur wirken. Für einen ersten Versuch muss man nicht zwangsläufig selbst modellieren.

• VRoid Studio

VRoid Studio ist ein niedrigschwelliger Einstieg in die 3D-Charaktererstellung. Das Programm ist kostenlos und erlaubt unter anderem die Anpassung von Gesicht, Haaren, Kleidung und weiteren Eigenschaften. Modelle lassen sich als VRM exportieren und in kompatible Anwendungen übernehmen.

Interessant für:

• Einsteiger

• stilisierte Charaktere

• virtuelle Musiker

• erste Experimente mit 3D-Avataren

Ein wichtiger Punkt: Auch wenn VRoid Studio kostenlos ist, gelten für bestimmte enthaltene Inhalte eigene Lizenzbedingungen. Wer einen Avatar kommerziell einsetzen möchte, sollte diese Bedingungen prüfen.

• Andere Möglichkeiten

Alternativ kommen je nach Zielsetzung auch professionelle 3D-Character-Systeme oder individuell modellierte Figuren infrage. Der Vorteil eines professionellen Systems liegt häufig in der größeren Kontrolle über Körper, Gesicht, Kleidung und Animation. Der Nachteil: Der Einstieg wird komplexer und kann deutlich teurer werden.

2. 3D-Modellierung und Animation

Wer seinen Charakter stärker kontrollieren möchte, landet schnell bei einer klassischen 3D-Software.

• Blender

Blender ist Open Source und deckt praktisch die gesamte 3D-Pipeline ab: Modellierung, Rigging, Animation, Rendering, Compositing, Motion Tracking und sogar Videoschnitt. Für Avatar-Projekte sind vor allem folgende Funktionen interessant:

• 3D-Modellierung

• Rigging

• Keyframe-Animation

• Motion Paths

• Shape Keys für Gesicht und Körper

• Sound-Synchronisation

• Motion Tracking

Interessant für:

• Creator mit etwas technischem Interesse

• Musiker, die vollständige Kontrolle möchten

• Musikvideos

• aufwendigere Bühnenvisuals

• individuelle Charaktere

Blender ist kostenlos – aber nicht unbedingt einfach. Das ist ein wichtiger Unterschied.

Kostenlos bedeutet nicht automatisch einsteigerfreundlich.

3. Motion Capture

Jetzt kommt Bewegung ins Spiel. Motion Capture übersetzt die Bewegungen eines Menschen in Daten, die anschließend einen digitalen Charakter steuern können. Dafür gibt es inzwischen sehr unterschiedliche Ansätze:

• Webcam-basierte Erfassung

• Smartphone-Tracking

• Videoanalyse

• spezielle Sensoren

• Motion-Capture-Anzüge

• Kombinationen aus mehreren Verfahren

  • Rokoko

Rokoko bietet ein Ökosystem rund um Motion Capture, Animation und Live-Streaming.

Rokoko Studio verfügt beispielsweise über einen kostenlosen Starter-Tarif. Dieser ermöglicht unter anderem das Aufnehmen und Exportieren von Motion-Capture-Daten. Die Software unterstützt außerdem KI-basierte Video-to-Motion-Funktionen und Text-to-Motion. Umfangreichere Funktionen wie das Retargeting eigener Charaktere oder bestimmte Live- und Face-Capture-Funktionen sind an höhere Tarife gebunden. Rokoko nennt unter anderem Integrationen mit Blender, Unreal Engine, Unity, Maya, Cinema 4D und weiteren 3D-Systemen.

Interessant für:

• Musiker mit 3D-Avataren

• Tänzer

• Performance-Projekte

• virtuelle Bühnen

• Live-Animation

Der große Vorteil solcher Systeme ist die Möglichkeit, Bewegungsdaten nicht nur für ein Video, sondern auch für wiederverwendbare Animationen zu nutzen.

4. Gesicht und Lip-Sync

Der Körper kann sich bewegen – aber ein Avatar mit völlig starrem Gesicht wirkt schnell künstlich. Hier kommen Face Tracking und Lip-Sync ins Spiel.

• Adobe Character Animator

Adobe Character Animator verfolgt Gesichts- und Körperbewegungen über Kamera und Mikrofon und kann daraus in Echtzeit Animationen erzeugen. Auch automatische Lippensynchronisation ist integriert. Adobe bietet einen kostenlosen Einstieg mit Character Animator Starter; zusätzliche Funktionen stehen in umfangreicheren Versionen zur Verfügung. Das System arbeitet mit sogenannten Puppets und eignet sich besonders gut für stilisierte beziehungsweise 2D-orientierte Figuren.

Interessant für:

• Cartoon-Avatare

• Moderation

• Livestreams

• Musikvideos

• schnelle Prototypen

• Live-Performances

Adobe beschreibt ausdrücklich einen Workflow, bei dem bereits Webcam und Mikrofon ausreichen können, um Gesicht und Stimme auf eine Figur zu übertragen.

5. Professionellere 3D-Animation

Wenn aus dem kleinen Experiment eine aufwendigere Produktion werden soll, gibt es komplette Character-Animation-Pipelines.

• iClone

iClone kombiniert Charakteranimation, Motion Capture, Gesichtsanimation, Lip-Sync und Szenenproduktion in einer Plattform. Reallusion bietet außerdem zahlreiche fertige Charaktere, Bewegungen und weitere Assets. Für Motion Capture stehen zusätzliche Werkzeuge für Körper-, Gesichts- und Handbewegungen zur Verfügung. Die Daten können beispielsweise in andere 3D-Systeme exportiert werden.

Interessant für:

5. Professionellere 3D-Animation

Wenn aus dem kleinen Experiment eine aufwendigere Produktion werden soll, gibt es komplette Character-Animation-Pipelines.

• iClone

Interessant für:

• professionelle Animation

• Musikvideos

• virtuelle Produktionen

• komplexere Avatar-Performances

• Creator, die möglichst viel in einer Umgebung erledigen möchten

Hier steigt allerdings auch die Komplexität des Workflows.

6. Ein wichtiger Unterschied: Avatar-Tool ≠ Motion-Capture-Tool

Das wird bei der Recherche nach Avatar-Software schnell verwirrend. Ein Programm kann hervorragend Avatare erstellen, aber keine Körperbewegungen erfassen. Ein anderes kann Motion Capture beherrschen, aber keine Charaktere modellieren. Ein drittes kümmert sich hauptsächlich um Gesicht und Lip-Sync.

Deshalb sollte man einen Avatar-Workflow eher als Kette betrachten:

Charakter

→

Rig

→

Motion Capture

→

Gesicht

→

Animation

→

Rendering

→

Live-Ausgabe

Nicht jedes Projekt benötigt jede Stufe.

7. Für ein Musikvideo reicht oft viel weniger

Wer lediglich einen Avatar in einem Musikvideo einsetzen möchte, kann den Live-Teil komplett überspringen. Ein möglicher Workflow:

Avatar erstellen

↓

Bewegung erzeugen

↓

Gesang/Musik synchronisieren

↓

Animation rendern

↓

Video schneiden

Fertig.

Es muss keine Echtzeitübertragung geben. Das ist gerade für kleine Creator ein großer Vorteil. Man kann die einzelnen Szenen so lange bearbeiten, bis sie funktionieren.

8. Für eine Live-Show wird es anspruchsvoller

Eine Bühne stellt andere Anforderungen. Hier muss die Software beispielsweise:

• Bewegungen in Echtzeit übertragen,

• geringe Verzögerung besitzen,

• mit der verwendeten 3D-Umgebung kommunizieren,

• zuverlässig laufen,

• Audio und Visuals synchron halten,

• und möglichst auch bei einem technischen Fehler kontrollierbar bleiben.

Für einen ersten Auftritt ist deshalb eine vorproduzierte Animation häufig wesentlich einfacher. Erst wenn das Konzept funktioniert, lohnt sich der nächste Schritt Richtung Echtzeit.

9. Der Low-Budget-Weg

Wer mit möglichst wenig Aufwand anfangen möchte, könnte sich auf vier Bausteine beschränken:

• Charakter

Eine einfache Avatar-Lösung.

• Bewegung

Kamera- oder videobasiertes Motion Capture.

• Animation

Eine kostenlose oder bereits vorhandene 3D-/Animationsumgebung.

• Ausgabe

Fernseher, Monitor oder Projektor. Damit lässt sich bereits ein erster Test durchführen. Man benötigt keine LED-Wand und keinen Motion-Capture-Anzug.

10. Der nächste Schritt: Mensch und Avatar gemeinsam

Der eigentliche kreative Mehrwert entsteht erst, wenn der Avatar nicht einfach nur im Hintergrund läuft. Interessanter wird es, wenn er mit dem Musiker interagiert. Zum Beispiel:

Der Musiker spielt einen Akkord.

Der Avatar reagiert.

Der Musiker geht nach links.

Der Avatar folgt ihm digital.

Der Refrain beginnt.

Die virtuelle Umgebung verändert sich.

Das Instrument wechselt.

Auch der Avatar verändert seine Gestalt. Damit wird aus einem Avatar ein Bestandteil der Performance.

11. Musik kann den Avatar steuern

Noch interessanter wird es, wenn die Musik selbst Steuerdaten liefert. Dafür können beispielsweise MIDI- oder Audiosignale verwendet werden.

Eine mögliche Logik:

Das muss nicht zwingend mit KI funktionieren. Und genau das ist wichtig: Nicht jede Komponente eines KI-Avatar-Projekts muss KI sein.

Oft ist eine Kombination aus klassischer Animation, Motion Capture, Audio- und MIDI-Steuerung und generativer KI sinnvoller als ein komplett KI-basierter Workflow.

12. Was sollte ein Creator vor dem Kauf prüfen?

Nicht nur den Preis. Wichtiger sind Fragen wie:

• Kann ich meinen eigenen Avatar importieren?

Das ist entscheidend, wenn die Figur nicht aus dem jeweiligen System stammt.

• Kann ich die Bewegungsdaten exportieren?

Ein geschlossener Workflow kann später zum Problem werden.

• Welche Formate werden unterstützt?

Zum Beispiel FBX, BVH oder VRM können je nach Workflow relevant sein.

• Gibt es Echtzeit-Streaming?

Für Videos spielt das keine große Rolle. Für Live-Shows dagegen schon.

• Wie hoch ist die Verzögerung?

Bei einer Live-Performance können schon kleine Verzögerungen auffallen.

• Was passiert bei einem Ausfall?

Ein Live-System sollte einen möglichst einfachen Fallback besitzen.

• Welche Lizenz gilt?

Besonders wichtig bei kommerziellen Projekten.

13. Lizenzen nicht vergessen

Bei digitalen Figuren können mehrere Rechteebenen zusammenkommen. Dazu gehören beispielsweise:

• Rechte am eigenen Bild

• Rechte an fremden Bildern

• Rechte an Stimmen

• Rechte an Musik

• Rechte an 3D-Modellen

• Lizenzen für Texturen und Assets

• Nutzungsbedingungen des jeweiligen Dienstes

• kommerzielle Nutzung der erzeugten Inhalte

Auch kostenlose Software kann Inhalte enthalten, für die besondere Lizenzbedingungen gelten. Bei VRoid Studio beispielsweise weist der Anbieter ausdrücklich darauf hin, dass bestimmte mitgelieferte Presets und Assets eigenen Lizenzbedingungen unterliegen. Deshalb gilt:

Kostenloses Tool bedeutet nicht automatisch: Alles damit Erzeugte darf ohne Einschränkung kommerziell verwendet werden.

14. Unser Vorschlag für Creator

Statt sofort ein komplettes Live-System aufzubauen, würden wir in drei Stufen testen.

• Stufe 1 – Video

Ein Avatar erscheint in einem Musikvideo.

Ziel: Funktioniert die Figur visuell?

• Stufe 2 – Performance

Der Avatar reagiert auf die Bewegungen des Musikers.

Ziel: Funktioniert die Interaktion?

• Stufe 3 – Live

Der Avatar wird Bestandteil einer echten Bühnenperformance.

Ziel: Funktioniert der gesamte Workflow unter Live-Bedingungen?

Für die Umsetzung können je nach gewünschtem Stil unterschiedliche Tools eingesetzt werden: von einfachen Avatar- und Video-Tools für die erste Stufe bis hin zu Motion-Capture-, Echtzeit- und 3D-Systemen für die späteren Stufen.

So entsteht kein großes technisches Risiko am Anfang: Jede Stufe liefert Erkenntnisse für die nächste. Erst wenn Figur und Interaktion funktionieren, lohnt sich der Aufbau eines vollständigen Live-Systems.