Wejście multimodalne

Skonfiguruj załączniki plików i wprowadzanie z klawiatury dla agenta.

Omówienie

Ustawienia wejścia multimodalnego określają dodatkowe sposoby, na jakie użytkownicy mogą przekazywać informacje agentowi poza mową. Znajdziesz je w zakładce Zaawansowane agenta, w sekcji Wejście multimodalne.

Wprowadzanie plików

Wprowadzanie plików pozwala użytkownikom wysyłać agentowi obrazy i pliki PDF na czacie. Agent może odczytywać te pliki, gdy wybrany model obsługuje obrazy i/lub dokumenty.

Załączniki są ignorowane, jeśli model nie obsługuje danego typu pliku, nawet gdy wprowadzanie plików jest włączone.

Konfiguracja

PoleTypDomyślnieOpis
enabledbooleantrueGdy ma wartość true, użytkownicy mogą dołączać obrazy lub pliki PDF, jeśli model obsługuje ten typ danych wejściowych.
max_files_in_memoryinteger10Liczba ostatnio przesłanych plików przechowywanych jednocześnie w pamięci. Zakres: od 1 do 10. Po osiągnięciu limitu starsze pliki są zastępowane krótkim podsumowaniem.
max_files_per_conversationinteger10Łączna liczba plików, które użytkownik może przesłać w jednej rozmowie. Przesyłanie jest rozliczane za plik. Użyj -1, aby nie ustawiać limitu. Wartość musi wynosić -1 lub być co najmniej równa max_files_in_memory.

Użytkownicy mogą dołączać pliki w widżecie, obsługiwanych kanałach czatu, takich jak Slack, lub przez API przesyłania pliku rozmowy.

1

Otwórz Wejście multimodalne

Otwórz agenta w panelu, upewnij się, że wybrany model obsługuje obrazy i/lub pliki PDF, a następnie przejdź do zakładki Zaawansowane.

2

Włącz załączniki plików

W sekcji Wejście multimodalne włącz opcję Zezwalaj na załączniki plików.

3

Ustaw limity plików

Opcjonalnie ustaw Pliki przechowywane w pamięci i Maks. liczba plików na rozmowę.

4

Zapisz zmiany

Zapisz agenta. Użytkownicy będą wtedy mogli dołączać obrazy i pliki PDF na czacie.

Wprowadzanie DTMF

Wprowadzanie DTMF pozwala dzwoniącym wpisywać cyfry na klawiaturze telefonu podczas rozmowy. Użyj go do zbierania numerów telefonów, wyborów z menu i innych danych liczbowych bez korzystania z rozpoznawania mowy.

To przeciwieństwo narzędzia systemowego odtwarzania tonu klawisza, które wysyła tony od agenta.

Obsługiwane jest tylko pozapasmowe DTMF z Twilio, SIP trunking (telefonia) lub Genesys. Tony pasmowe w strumieniu audio są ignorowane. Widżet internetowy i kanały czatu nie mogą wysyłać DTMF.

Każde naciśnięcie klawisza jest buforowane, aż sekwencja zostanie zakończona. Zakończenie sekwencji tworzy jedną turę użytkownika.

  1. Dzwoniący naciska klawisz. Pierwsza cyfra przerywa agentowi, jeśli mówi.
  2. Kolejne cyfry są dodawane do tego samego bufora.
  3. Sekwencja kończy się, gdy dzwoniący naciśnie # (jeśli zakończenie hashem jest włączone) lub gdy przed upływem limitu czasu nie nadejdą kolejne cyfry.
  4. Agent otrzymuje zebrane cyfry jako turę użytkownika i odpowiada.

# jest znacznikiem końca, gdy zakończenie hashem jest włączone; nie jest uwzględniany w zebranym ciągu. # naciśnięty przy pustym buforze jest ignorowany. Bufor przyjmuje 0-9, *, # i A-D, maksymalnie 50 znaków.

Konfiguracja

conversation_config.conversation.dtmf_input_settings ma wartość null, gdy wprowadzanie DTMF jest wyłączone. Po włączeniu wartości domyślne to:

PoleTypDomyślnieOpis
dtmf_input_timeoutfloat2.0Liczba sekund oczekiwania po ostatnim naciśnięciu klawisza przed zakończeniem sekwencji. Zakres: od 0.5 do 10.0.
hash_terminatorbooleantrueJeśli ma wartość true, # natychmiast kończy sekwencję i nie jest uwzględniany w zebranych cyfrach.
redact_inputbooleanfalseJeśli ma wartość true, wpisy z klawiatury są zastępowane przez <REDACTED> w zapisanej transkrypcji, dzienniku rozmowy i analizie.

Redakcja dotyczy tury klawiatury w zapisanych danych rozmowy. Nie ukrywa cyfr przed agentem podczas trwającej rozmowy ani nie zmienia cyfr, które agent wypowiada lub wysyła do narzędzia. To niezależne od redakcji historii rozmowy.

1

Otwórz Wejście multimodalne

Otwórz agenta w panelu i przejdź do zakładki Zaawansowane.

2

Włącz wprowadzanie DTMF

W sekcji Wejście multimodalne włącz opcję Włącz wprowadzanie DTMF.

3

Skonfiguruj limit czasu i redakcję

Opcjonalnie ustaw Limit czasu wprowadzania DTMF, Użyj # do zakończenia wprowadzania DTMF oraz Redaguj wprowadzanie DTMF.

4

Zapisz zmiany

Zapisz agenta, a potem zadzwoń i wpisz cyfry na klawiaturze.

Zaktualizuj prompt systemowy agenta, aby wiedział, kiedy poprosić o dane z klawiatury. Na przykład:

If you need the caller's phone number, ask them to type it on their keypad. Wait for the DTMF
input before continuing.