Słownikwykrywanie aktywności głosowej
Co to jest VAD w asystencie głosowym
VAD (voice activity detection, wykrywanie aktywności głosowej) to mechanizm, który wiele razy na sekundę sprawdza, czy w dźwięku z linii telefonicznej jest ludzka mowa, czy tylko cisza, szum albo echo. Sam z siebie nie wie, czy cisza oznacza koniec zdania, czy tylko chwilę namysłu, dlatego w voicebocie pracuje razem z dodatkowym mechanizmem, który podejmuje decyzję o końcu tury rozmowy.
Kiedy klient zaczyna mówić, a kiedy kończy
VAD ma dwa główne zastosowania w rozmowie. Pierwsze to wykrycie, że klient zaczął mówić, także wtedy, gdy sam agent jeszcze nie skończył swojej kwestii, czyli przerywanie wypowiedzi (barge-in). Drugie to wykrycie, że klient przestał mówić, co uruchamia wykrywanie końca wypowiedzi i decyzję, czy agent może już odpowiedzieć. Bez dobrego VAD system albo wskakuje w każdą pauzę na oddech, albo trzyma zbyt długą ciszę po zwykłym „tak”. Klient słyszy oba błędy od razu: pierwszy jako agenta, który wchodzi w słowo, drugi jako agenta, który zwleka.
Pauza w środku numeru PESEL
Gabinet fizjoterapii Ruch, mówi asystent AI. Poproszę o numer PESEL. Spokojnie, poczekam.
Czterdzieści osiem, zero dwa… zaraz, gdzie ja mam dowód… (po kilku sekundach podaje resztę numeru)
Dziękuję, mam wszystkie jedenaście cyfr.
Pauza w środku dyktowania mogłaby zostać odczytana jako koniec wypowiedzi. System, który wie, że PESEL ma jedenaście cyfr, poczeka dłużej.
Echo i hałas w tle
Pierwszy kłopot to echo własnego głosu agenta, które wraca przez słuchawkę klienta, zwłaszcza gdy ktoś rozmawia na głośniku albo z zestawu w samochodzie. Bez usunięcia echa VAD mógłby uznać, że to klient mówi, choć w rzeczywistości słyszy własny głos systemu. Drugi kłopot to hałas w tle, jak telewizor czy szczekający pies, który VAD musi odróżnić od prawdziwej mowy, zanim zdecyduje, że agenta należy przerwać.
Sprawdź agenta z telefonu w samochodzie albo przy włączonym telewizorze, bo w cichym pokoju na demo tego nie usłyszysz.
Posłuchaj, jak to brzmi w praktyce
Pięciu asystentów demo rozmawia po polsku w przeglądarce, bez instalowania czegokolwiek. Dane w rozmowach są przykładowe, ale sposób prowadzenia rozmowy jest taki sam jak w prawdziwym wdrożeniu.