AI / Interaction

Chat Buddy

Chat Buddy

Wir haben für die Fachhochschule Nordwestschweiz (FHNW) eine Unity-Anwendung entwickelt, die mithilfe der OpenAI API Nutzern ein Gespräch mit Rosy, einem 3D-Avatar, ermöglicht. Mit Echtzeit-Lippensynchronisation, die direkt von der OpenAI-Sprachausgabe gesteuert wird.

Die Herausforderung

Ein glaubwürdiges Echtzeit-Gesprächserlebnis mit einem 3D-Avatar zu schaffen, erforderte die nahtlose Integration von KI-Sprache, Lippensynchronisation und ausdrucksstarker Animation innerhalb eines engen Performance-Budgets.

Unsere Lösung

Wir integrierten die OpenAI API für natürliche Sprachkonversation und TTS und entwickelten anschliessend ein individuelles Echtzeit-Lippensynchronisationssystem, das die Mundbewegungen des Avatars direkt aus der Audioausgabe steuert.

Eingesetzte Technologien

UnityOpenAI APITTSLippensynchronisation3D-AvatarC#Echtzeit-KI
Kontakt

Erzählen Sie uns von Ihrem Projekt

Wir freuen uns auf Ihre Nachricht – per E-Mail an hello@interactionideas.com oder telefonisch unter +41 76 235 66 99.

Projekt anfragen