Tworzymy awatary AI do rozmów z Twoimi gośćmi i klientami

Awatar AI to wirtualna postać, która dzięki generatywnej AI rozmawia z ludźmi w czasie rzeczywistym, tekstowo lub głosowo, i odpowiada na podstawie danych firmy. Łączy rozpoznawanie mowy (speech-to-text), duży model językowy z generowaniem wspomaganym wyszukiwaniem (RAG) i syntezę mowy (text-to-speech). theBlue.ai tworzy awatary AI jako asystentów w przeglądarce, jako samodzielne aplikacje na duże ekrany i jako awatary 3D do wirtualnej rzeczywistości.

Chatbot odpowiada tekstem w oknie czatu. Awatar AI ma dodatkowo twarz i głos: mówi się do niego na głos, a on odpowiada mową i w trakcie rozmowy może pokazywać treści na ekranie. Sprawdza się tam, gdzie nikt nie chce pisać, np. na terenie wydarzenia, w recepcji czy w przestrzeni VR. Oba rozwiązania mogą odpowiadać na podstawie Twoich danych.

Na stronie internetowej, na dużych ekranach i w wirtualnej rzeczywistości, np. na Microsoft Mesh. Na Niemieckim Kongresie Chirurgicznym ten sam asystent działał w kiosku z ekranem i jako aplikacja VR w goglach Meta Quest 3.

Tak. W hali kongresowej panują bardzo trudne warunki akustyczne, dlatego łączymy profesjonalne mikrofony z programową redukcją szumów i przetwarzamy mowę równolegle, aby odpowiedzi przychodziły na tyle szybko, że całość przypomina zwykłą rozmowę. W takiej konfiguracji asystent przepracował cztery dni Niemieckiego Kongresu Chirurgicznego.

Na 141. Kongresie Niemieckiego Towarzystwa Chirurgicznego (DCK 2024) w Centrum Kongresowym w Lipsku, od 23 do 26 kwietnia 2024, asystent głosowy prowadził gości przez setki równoległych sesji w kiosku z ekranem i w VR. Na XPOMET Medicinale 2024 w Lipsku awatar Paula, stworzony wspólnie z Johannesstift Diakonie, odpowiadał na pytania gości po angielsku i po niemiecku. Zobacz case study DCK i case study XPOMET.

W tych, których potrzebujesz. Awatar mówi w językach Twoich gości i klientów, potrafi rozpoznać, jakim językiem posługuje się rozmówca, i odpowiedzieć w tym samym. Na XPOMET Medicinale nasz awatar Paula automatycznie rozpoznawał angielski i niemiecki i nadążał za gośćmi, którzy zmieniali język w trakcie rozmowy.

Odpowiada na podstawie danych Twojej firmy dzięki generowaniu wspomaganemu wyszukiwaniem (RAG), np. z dokumentów lub z bazy danych wydarzenia z wystawcami, sesjami i lokalizacjami. Za pomocą narzędzi może sprawdzać informacje i wykonywać działania, a w trakcie rozmowy polecać sesje lub pokazywać na ekranie przydatne treści.

Każdego awatara budujemy zgodnie z Twoimi zasadami ochrony danych, aby Twoje informacje pozostały bezpieczne. Na XPOMET model słowa aktywującego działał lokalnie na urządzeniu, więc żadne nagranie nie trafiało do chmury tylko po to, by rozpocząć rozmowę.

Prowadzimy Cię od wstępnej koncepcji przez MVP do w pełni działającego awatara, w szybkich iteracjach i na sprawdzonych technologiach i frameworkach. Każdy projekt to jednorazowa usługa, która kończy się w pełni funkcjonalnym awatarem.