Wejście multimodalne
Wejście multimodalne
Skonfiguruj załączniki plików i wprowadzanie z klawiatury dla agenta.
Omówienie
Ustawienia wejścia multimodalnego określają dodatkowe sposoby, na jakie użytkownicy mogą przekazywać informacje agentowi poza mową. Znajdziesz je w zakładce Zaawansowane agenta, w sekcji Wejście multimodalne.
Wprowadzanie plików
Wprowadzanie plików pozwala użytkownikom wysyłać agentowi obrazy i pliki PDF na czacie. Agent może odczytywać te pliki, gdy wybrany model obsługuje obrazy i/lub dokumenty.
Załączniki są ignorowane, jeśli model nie obsługuje danego typu pliku, nawet gdy wprowadzanie plików jest włączone.
Konfiguracja
Użytkownicy mogą dołączać pliki w widżecie, obsługiwanych kanałach czatu, takich jak Slack, lub przez API przesyłania pliku rozmowy.
Aktualizacja w panelu
Aktualizacja przez CLI
Aktualizacja przez API
Wprowadzanie DTMF
Wprowadzanie DTMF pozwala dzwoniącym wpisywać cyfry na klawiaturze telefonu podczas rozmowy. Użyj go do zbierania numerów telefonów, wyborów z menu i innych danych liczbowych bez korzystania z rozpoznawania mowy.
To przeciwieństwo narzędzia systemowego odtwarzania tonu klawisza, które wysyła tony od agenta.
Obsługiwane jest tylko pozapasmowe DTMF z Twilio, SIP trunking (telefonia) lub Genesys. Tony pasmowe w strumieniu audio są ignorowane. Widżet internetowy i kanały czatu nie mogą wysyłać DTMF.
Każde naciśnięcie klawisza jest buforowane, aż sekwencja zostanie zakończona. Zakończenie sekwencji tworzy jedną turę użytkownika.
- Dzwoniący naciska klawisz. Pierwsza cyfra przerywa agentowi, jeśli mówi.
- Kolejne cyfry są dodawane do tego samego bufora.
- Sekwencja kończy się, gdy dzwoniący naciśnie
#(jeśli zakończenie hashem jest włączone) lub gdy przed upływem limitu czasu nie nadejdą kolejne cyfry. - Agent otrzymuje zebrane cyfry jako turę użytkownika i odpowiada.
# jest znacznikiem końca, gdy zakończenie hashem jest włączone; nie jest uwzględniany w zebranym ciągu. # naciśnięty przy pustym buforze jest ignorowany. Bufor przyjmuje 0-9, *, # i A-D, maksymalnie 50 znaków.
Konfiguracja
conversation_config.conversation.dtmf_input_settings ma wartość null, gdy wprowadzanie DTMF jest wyłączone. Po włączeniu wartości domyślne to:
Redakcja dotyczy tury klawiatury w zapisanych danych rozmowy. Nie ukrywa cyfr przed agentem podczas trwającej rozmowy ani nie zmienia cyfr, które agent wypowiada lub wysyła do narzędzia. To niezależne od redakcji historii rozmowy.
Aktualizacja w panelu
Aktualizacja przez CLI
Aktualizacja przez API
Zaktualizuj prompt systemowy agenta, aby wiedział, kiedy poprosić o dane z klawiatury. Na przykład: