Asystenci GłosowiDemo na żywo

Słownikwykrywanie aktywności głosowej

Co to jest VAD w asystencie głosowym

VAD (voice activity detection, wykrywanie aktywności głosowej) to mechanizm, który wiele razy na sekundę sprawdza, czy w dźwięku z linii telefonicznej jest ludzka mowa, czy tylko cisza, szum albo echo. Sam z siebie nie wie, czy cisza oznacza koniec zdania, czy tylko chwilę namysłu, dlatego w voicebocie pracuje razem z dodatkowym mechanizmem, który podejmuje decyzję o końcu tury rozmowy.

Kiedy klient zaczyna mówić, a kiedy kończy

VAD ma dwa główne zastosowania w rozmowie. Pierwsze to wykrycie, że klient zaczął mówić, także wtedy, gdy sam agent jeszcze nie skończył swojej kwestii, czyli przerywanie wypowiedzi (barge-in). Drugie to wykrycie, że klient przestał mówić, co uruchamia wykrywanie końca wypowiedzi i decyzję, czy agent może już odpowiedzieć. Bez dobrego VAD system albo wskakuje w każdą pauzę na oddech, albo trzyma zbyt długą ciszę po zwykłym „tak”. Klient słyszy oba błędy od razu: pierwszy jako agenta, który wchodzi w słowo, drugi jako agenta, który zwleka.

Pauza w środku numeru PESEL

Asystent AI

Gabinet fizjoterapii Ruch, mówi asystent AI. Poproszę o numer PESEL. Spokojnie, poczekam.

Dzwoniący

Czterdzieści osiem, zero dwa… zaraz, gdzie ja mam dowód… (po kilku sekundach podaje resztę numeru)

Asystent AI

Dziękuję, mam wszystkie jedenaście cyfr.

Gabinet fizjoterapii jest zmyślony.

Pauza w środku dyktowania mogłaby zostać odczytana jako koniec wypowiedzi. System, który wie, że PESEL ma jedenaście cyfr, poczeka dłużej.

Echo i hałas w tle

Pierwszy kłopot to echo własnego głosu agenta, które wraca przez słuchawkę klienta, zwłaszcza gdy ktoś rozmawia na głośniku albo z zestawu w samochodzie. Bez usunięcia echa VAD mógłby uznać, że to klient mówi, choć w rzeczywistości słyszy własny głos systemu. Drugi kłopot to hałas w tle, jak telewizor czy szczekający pies, który VAD musi odróżnić od prawdziwej mowy, zanim zdecyduje, że agenta należy przerwać.

Sprawdź agenta z telefonu w samochodzie albo przy włączonym telewizorze, bo w cichym pokoju na demo tego nie usłyszysz.

Przeczytaj też

TechnologiaWykrywanie końca wypowiedzi: kiedy asystent głosowy może zacząć mówićVAD, próg ciszy i koniec tury: pauzy seniorów, dyktowanie PESEL-u i numerów, agent, który wchodzi w słowo za wcześnie.SłownikBarge-inFunkcja, dzięki której klient przerywa voicebotowi w trakcie mówienia, a system natychmiast milknie i słucha.SłownikTura rozmowyKolej jednej strony w dialogu. System musi rozpoznać, kiedy tura klienta się skończyła, zanim zacznie odpowiadać.SłownikLatencjaCzas od końca pytania klienta do pierwszego słowa odpowiedzi agenta. Im krótszy, tym rozmowa brzmi naturalniej.TechnologiaPrzerywanie wypowiedzi, czyli co robi asystent głosowy, gdy klient wchodzi mu w słowoBarge-in, czyli klient wchodzi agentowi w słowo: jak system to wykrywa, fałszywe przerwania przez kaszel i hałas, polskie „mhm”.SłownikAgent AIProgram, który sam planuje kroki i korzysta z narzędzi, by zrealizować zadanie. Voicebot to agent AI działający głosem przez telefon.

Posłuchaj, jak to brzmi w praktyce

Pięciu asystentów demo rozmawia po polsku w przeglądarce, bez instalowania czegokolwiek. Dane w rozmowach są przykładowe, ale sposób prowadzenia rozmowy jest taki sam jak w prawdziwym wdrożeniu.

Porozmawiaj z demoWdrożenie u siebie: Infinity Tech