Facemotion3d

1. Verbesserungen an Oberfläche und Design

Die in iFacialMocap angezeigten Avatare waren einfach, aber Facemotion3d bietet zusätzliche Avatare mit reichhaltigerer Grafik.

Auch das Button-Design wurde verbessert, einschließlich Animationen beim Drücken.

2. Kommunikation mit DAZ Studio

Facemotion3d kann in Echtzeit mit DAZ Studio kommunizieren.

3. Direkte Kommunikation mit Maya

iFacialMocap konnte über eine PC-Software mit Maya kommunizieren. Facemotion3d ermöglicht dagegen die direkte Kommunikation mit Maya, ohne eine Zwischensoftware auf dem PC zu verwenden.

Außerdem wird die Geschwindigkeit beim Baking von per Streaming aufgezeichneten Animationen verbessert. Beim Baking kann auch Audio per Streaming in die Timeline importiert werden.

4. Direkte Kommunikation mit Blender

iFacialMocap konnte über eine PC-Software mit Blender kommunizieren. Facemotion3d ermöglicht dagegen die direkte Kommunikation mit Blender, ohne eine Zwischensoftware auf dem PC zu verwenden.

Außerdem wird die Geschwindigkeit beim Baking von per Streaming aufgezeichneten Animationen verbessert. Beim Baking kann auch Audio per Streaming in die Timeline importiert werden.

5. Direkte Kommunikation mit Unity

iFacialMocap konnte über eine PC-Software mit Unity kommunizieren. Facemotion3d ermöglicht dagegen die direkte Kommunikation mit Unity, ohne eine Zwischensoftware auf dem PC zu verwenden.

Außerdem erleichtert Facemotion3d die Spieleentwicklung, da Objektnamen in Unity eingebettet werden können. Es wurden eine Option zur automatischen Verbindung beim Spielstart sowie eine TCP/IP-Kommunikation zusätzlich zu UDP hinzugefügt.

Facemotion3d × Unity — Face Tracking mit iPhone und Unity.

6. Import mehrerer VRM

Facemotion3d ermöglicht das Importieren und Registrieren von zwei oder mehr VRM-Modellen in der iOS-App. Auch Einstellungen wie Licht und Kamera können feinjustiert werden.

7. BlendShape-Kalibrierung

Facemotion3d kann BlendShape kalibrieren. Dadurch lassen sich Probleme beheben, z. B. wenn sich die Augen des Avatars nicht weit öffnen oder der Mund nicht richtig schließt.

8. Möglichkeit, BlendShape auf Spracherkennung reagieren zu lassen

Wenn Sie ein in der App registriertes Wort sprechen, kann der entsprechende BlendShape bewegt werden. Sagen Sie z. B. „hello“, kann der BlendShape hello bewegt werden.

9. Import von .scn-Dateien

Benutzerdefinierte Avatare mit der Erweiterung .scn können in die Facemotion3d-Anwendung importiert werden.

Wie .scn-Dateien erstellt und verwendet werden, wird im folgenden Artikel beschrieben.
https://note.com/pekochun/n/n69d6b093b1c7

10. Verwaltung mehrerer aufgezeichneter Daten in der App

Mit iFacialMocap konnte in der App nur eine aufgezeichnete Animation verwaltet werden. Mit Facemotion3d können mehrere Daten verwaltet werden.

Die Anleitung zur Verwendung finden Sie im folgenden Artikel.
https://note.com/pekochun/n/ne89b6f5661f2

11. Bildschirmaufnahme während der Aufzeichnung

Facemotion3d bietet eine Option, den Bildschirm gleichzeitig mit der Animation aufzuzeichnen.

12. Reaktion auf Anfragen

Anfragen nach zusätzlichen Funktionen werden mit Priorität für Facemotion3d gegenüber iFacialMocap umgesetzt.

13. Automatisch scrollende Textanzeige

Facemotion3d kann während des Face Trackings automatisch scrollenden Text anzeigen. Das ist z. B. beim Singen mit eingeblendeten Liedtexten nützlich.

Die iOS-App Facemotion3d Version 1.2.6 ist jetzt verfügbar. Während des Face Trackings kann nun automatisch scrollender Text angezeigt werden.

Diese Funktion kann unter „Settings“ -> „Other Features“ aktiviert werden. Außerdem können Transparenz und Scrollgeschwindigkeit geändert werden. pic.twitter.com/u4nIa0S3Xo

— Facemotion3d (@facemotion3d) November 16, 2022