Ochrona zdrowia · Organizacja kongresów
Cztery dni pytań od uczestników, na które asystent odpowiadał głosem
141. Niemiecki Kongres Chirurgiczny (DCK), organizowany przez Niemieckie Towarzystwo Chirurgiczne, trwa cztery dni: setki równoległych sesji, tysiące uczestników i pełna hala wystawiennicza. Szukanie właściwej sesji, sprawdzanie zmian w programie i poruszanie się po obiekcie spadało na punkty informacyjne, które w godzinach szczytu nie nadążały. Wdrożyliśmy asystenta, który odpowiadał na te pytania w rozmowie głosowej w czasie rzeczywistym, na kiosku z dużym ekranem i w VR.
Kluczowe rezultaty
Klient: Niemieckie Towarzystwo Chirurgiczne
141. Niemiecki Kongres Chirurgiczny (DCK 2024) w Centrum Kongresowym w Lipsku, od 23 do 26 kwietnia 2024. Organizator: Niemieckie Towarzystwo Chirurgiczne.
- Branża
- Ochrona zdrowia i organizacja kongresów
- Zastosowanie
- Automatyczne wskazywanie sesji i obsługa uczestników
- Podejście AI
- LLM z RAG i przetwarzaniem mowy
- Interfejsy
- Kiosk z ekranem i VR na Meta Quest 3
- Wydarzenie
- DCK 2024, Lipsk, 23 do 26 kwietnia
- Realizacja
- Design thinking, potem zwinne wdrożenie
W skrócie
Dlaczego punkt informacyjny przestał wystarczać
- Cztery dni, setki sesji równolegle w kilku salach i tysiące uczestników, którzy muszą trafić na właściwą we właściwym czasie.
- Spadało to na punkty informacyjne, a w przerwach między sesjami były one przeciążone. Drukowany program traci aktualność przy pierwszej zmianie, a aplikacja konferencyjna wymaga pobrania i pisania.
- Uczestnik podchodzi i pyta na głos. Asystent zna cały program i bazę danych wydarzenia, więc odpowiada na pytania w rodzaju „które warsztaty mają jeszcze wolne miejsca dziś po południu”.
- Działał na kiosku z ekranem i jako doświadczenie VR na Meta Quest 3, bez przerwy przez wszystkie cztery dni, bez kolejki.
Punkt wyjścia
Wyzwanie
Czterodniowy kongres z setkami równoległych sesji i tysiącami uczestników, a przy tym brak skalowalnego sposobu, żeby udzielać indywidualnych wskazówek i informacji o wydarzeniu bez personelu na każdym kroku.
Duże kongresy medyczne są złożone organizacyjnie. Ten trwa cztery dni i obejmuje setki sesji odbywających się jednocześnie: wykłady, warsztaty, sympozja i pokazy na żywo w kilku salach. Tysiące uczestników muszą we właściwym czasie trafić na właściwą sesję, śledzić zmiany w programie, znaleźć stoiska wystawców i dowiedzieć się czegoś o instytucji organizującej kongres.
Zwykle zajmują się tym punkty informacyjne, których pracownicy muszą znać cały program, układ obiektu i szczegóły dotyczące wystawców. W godzinach szczytu, zwłaszcza w przerwach między sesjami, te punkty są przeciążone.
Drukowany program jest nieaktualny od pierwszej zmiany w harmonogramie. Aplikacje konferencyjne pomagają, ale trzeba je pobrać i coś w nich wpisać. Uczestnicy tracą czas i omijają ważne dla siebie sesje, a organizatorzy płacą za personel, który i tak nie nadąża.
Budowa
Co zbudowaliśmy
Wdrożyliśmy asystenta, do którego uczestnik mógł po prostu podejść i zapytać na głos, tak jak pyta się kolegę. Bez aplikacji do pobrania, bez interfejsu do nauki, bez pisania na telefonie.
Rekomendacje sesji zamiast wyszukiwarki
Przy setkach sesji odbywających się jednocześnie najwięcej dawało wskazanie tej właściwej. System zna cały program kongresu i odpowiada na pytania w rodzaju „co się teraz dzieje w chirurgii kolorektalnej”, na które pracownik punktu informacyjnego odpowiadałby, wertując segregator.
Całe wydarzenie, a nie sam program
Asystent odpowiada też na pytania o wystawców, instytucję organizującą kongres i drogę przez obiekt. System wyszukiwania podłączony do pełnej bazy danych wydarzenia sprawia, że odpowiedzi są aktualne, a nie zamrożone w chwili druku.
Głos, który radzi sobie na hali kongresowej
Hala kongresowa to trudne warunki akustyczne: setki rozmów naraz, komunikaty z głośników, ciągły ruch. Połączyliśmy profesjonalne mikrofony z programową redukcją szumów, żeby rozpoznawanie mowy działało także w najgłośniejszych miejscach, a przetwarzanie zrównolegliliśmy, żeby odpowiedzi przychodziły tak szybko jak w zwykłej rozmowie.
Kiosk i gogle VR
Asystent działał na kiosku z dużym ekranem do szybkich pytań w przelocie oraz jako immersyjne doświadczenie VR na Meta Quest 3. Uczestnik sam wybierał: szybka pomoc albo coś, przy czym warto się zatrzymać.
Co się zmieniło
Rezultaty
Przed
Drukowane programy, statyczne oznakowanie i punkty informacyjne z obsługą. Ograniczona przepustowość w godzinach szczytu, brak spersonalizowanych rekomendacji sesji, a wiadomości o zmianach w programie rozchodziły się powoli.
Po
Asystent odpowiadający na pytania uczestników na bieżąco, spersonalizowane rekomendacje sesji z całego programu i dostępność bez przerwy przez cztery dni kongresu, bez kolejek.
Asystent działał przez wszystkie cztery dni kongresu i od razu podpowiadał uczestnikom, na którą sesję pójść, gdzie znaleźć wystawcę i jak poruszać się po obiekcie.
Bez niego ktoś musiałby ręcznie przeszukiwać drukowany program, i to dokładnie wtedy, gdy nikt nie ma na to czasu.
Dla organizatorów i wystawców to model do powtórzenia, a nie jednorazowa instalacja: ten sam system można skonfigurować dla każdego wydarzenia z ustrukturyzowanymi danymi o programie, od targów branżowych po konferencje firmowe.
Pytania o ten projekt
Automatyczne wskazywanie sesji i obsługa uczestników. Czterodniowy kongres z setkami równoległych sesji i tysiącami uczestników, a przy tym brak skalowalnego sposobu, żeby udzielać indywidualnych wskazówek i informacji o wydarzeniu bez personelu na każdym kroku.
Nieprzerwana obsługa uczestników przez cały kongres: 4 dni. Równoległych sesji, z rekomendacjami dopasowanymi do rozmówcy: Setki. Naturalna mowa, bez pisania i bez pobierania aplikacji: Głos.
LLM z RAG i przetwarzaniem mowy. Wykorzystana technologia: Duże modele językowe (LLM), Architektura RAG, Speech-to-text, Text-to-speech, Function calling, WebSockets, Meta Quest 3 i VR, Redukcja szumów, Awatar AI.
Wykorzystana technologia
Porozmawiaj z zespołem, który to zbudował
Odpowiadamy w ciągu jednego dnia roboczego.
Więcej projektów
HealthTech · Wydarzenia i konwersacyjna AI
Awatar, który odpowiada na pytania gości, gdy punkt informacyjny nie nadąża
Czytaj więcej
Administracja publiczna · Obsługa obywateli
Obywatel pyta własnymi słowami, a jedenastu agentów ustala, kto odpowie
Czytaj więcej
MedTech · Automatyzacja procesów wewnętrznych