Dubbing v2 API
Dubbing v2 ist jetzt über die API verfügbar. Es übersetzt Audio und Video in mehr als 90 Sprachen und bewahrt dabei Stimme, Tonfall und Sprechtempo aller Sprecher.
Die neue projektbasierte API speichert Quelltranskripte und Übersetzungen als bearbeitbares JSON. Erstellen Sie ein Projekt aus einer Datei oder URL, fügen Sie eine oder mehrere Zielsprachen hinzu, bearbeiten Sie einzelne Transkriptsegmente oder Übersetzungen und generieren Sie dann nur die geänderten Bereiche neu. Folgen Sie der Dubbing-Schnellstartanleitung, um Ihre erste Synchronisation zu erstellen.
ElevenAgents
- Guardrail-Filter für Konversationen: Konversationen auflisten fügt die optionalen Abfrageparameter
guardrail_types(GuardrailType[]) undcustom_guardrail_names(String-Array) hinzu. Die bestehende Konversationshierarchie kann jetzt mit dem optionalen Parameterparent_conversation_id(String) gefiltert werden. - Status von Branch-Abweichungen: Agent-Branches auflisten fügt das optionale Flag
include_commit_status(Boolean, Standardwertfalse) hinzu. Wenn es aktiviert ist, enthalten Branch-Zusammenfassungen die nullable Feldercommits_ahead,commits_behindundmerged_into_branch_id. - Steuerung von Konversationen und Tools: Client-Overrides unterstützen jetzt
max_duration_secondsundpronunciation_dictionary_locators. Die MCP-Serverkonfiguration fügtrequest_metahinzu, um MCP-_meta-Werte an Tool-Aufrufe zu übergeben. Timeouts für Webhook-Tools unterstützen jetzt bis zu 300 Sekunden. - Nutzung der Analyse nach Anrufen: Die Konversationsabrechnung fügt eine Aufschlüsselung nach
analysismit laufenden Summen pro Funktion und Ausführungs-Snapshots hinzu. Transkript-Nachrichten erhaltentriggered_guardrailsund Konversationswechsel das optionale Feldproducing_llm.
Stimmen
- Filter für die Stimmensuche: Alle Stimmen v2 abrufen fügt die optionalen Abfrageparameter
gender,age,language,accent,use_cases,min_notice_period_days,include_custom_rates,include_live_moderatedundhigh_qualityhinzu.
SDK-Releases
JavaScript SDK
- v2.63.0 - Optionen für Echtzeit-Spracherkennung für sekundäre Sprachen, Sprach- und Entitätserkennung, Filterung von Hintergrundgeräuschen, Logging und Single-Use-Token-Authentifizierung hinzugefügt. Ereignisse für finale Transkripte, Entitäten und ungültige Anfragen hinzugefügt; Versand nicht akzeptierter Bedingungen, doppelte
audio_format-Parameter und inklusive VAD-Grenzen korrigiert. - v2.62.0 - Methoden für Massenaktualisierungen von Dubbing-Transkripten und
DubbingRegenerateResponsehinzugefügt; Guardrail-Filter für Konversationen, Commit-Status für Agent-Branches, Agent-Benachrichtigungen und MCP-requestMeta-Unterstützung hinzugefügt. Das Erstellen von Sprachzielen akzeptiertmodelIdnicht mehr. - v2.61.0 - Filterung der Konversationshierarchie, Abrechnung der Analyse nach Anrufen, Metadaten ausgelöster Guardrails, Details zu Branch-Merge-Konflikten, DTMF-Eingabeschwärzung und Dubbing-Transkript-Uploads hinzugefügt. Exportierte OpenAI-Realtime-Session-Typen und
run_subagent_*-Tool-Ergebnisvarianten entfernt.
Python SDK
- v2.63.0 - Optionen für Echtzeit-Spracherkennung für sekundäre Sprachen, Sprach- und Entitätserkennung, Filterung von Hintergrundgeräuschen, Logging und Single-Use-Token-Authentifizierung hinzugefügt. Ereignisse für finale Transkripte, Entitäten und ungültige Anfragen hinzugefügt; Versand nicht akzeptierter Bedingungen korrigiert. Verbindungen ohne API-Schlüssel oder Token werden jetzt abgelehnt.
- v2.62.0 - Dubbing-Methoden
update_segmentsundDubbingRegenerateResponsehinzugefügt; Unterstützung fürguardrail_types,custom_guardrail_names,include_commit_statusund MCP-request_metahinzugefügt. Dubbing-Segmentaktualisierungen verwenden jetzt Request-Body-Modelle, und das Erstellen von Sprachzielen akzeptiertmodel_idnicht mehr. - v2.61.0 -
parent_conversation_id, Analyseabrechnung, Metadaten ausgelöster Guardrails, Branch-Merge-Konflikte, DTMF-Eingabeschwärzung und Dubbing-Transkript-Uploads hinzugefügt. OpenAI-Realtime-Session-Typen undrun_subagent_*-Ergebnismodelle entfernt.
Android SDK
- v0.12.1 - Korrigiert, dass beabsichtigte Verbindungsabbrüche bei reinen Text-Sessions als
ConversationStatus.ERRORgemeldet wurden. - v0.12.0 -
ConversationConfig.useMediaStreamhinzugefügt, um Konversationsaudio über den Android-Medienstream zu leiten. Normale Remote-WebSocket-Schließungen melden jetztDisconnectionDetails.Agent, während lokal initiierte SchließungenDisconnectionDetails.Usermelden.
MCP-Server
- v0.12.2 - Ein Problem mit Path Traversal korrigiert.
API
API-Änderungen anzeigen
Neue Endpunkte
Dubbing
- Quellsegmente gesammelt aktualisieren -
PATCH /v1/dubbing/project/{project_id}/transcript/segments- Erfordert
DubbingBulkSegmentUpdateRequest - Aktualisiert Quellsegmenttext, Sprecher oder Timing atomar
- Gibt
DubbingBulkSourceSegmentUpdateResponsemit den aktualisiertensegmentsundrevisionzurück
- Erfordert
- Zielsegmente gesammelt aktualisieren -
PATCH /v1/dubbing/project/{project_id}/language/{language_id}/transcript/segments- Erfordert
DubbingBulkTargetSegmentUpdateRequest - Aktualisiert Übersetzungen für mehrere Zielsegmente atomar
- Gibt
DubbingBulkTargetSegmentUpdateResponsemit den aktualisiertensegmentsundrevisionzurück
- Erfordert
Aktualisierte Endpunkte
ElevenAgents
- Konversationen auflisten -
GET /v1/convai/conversations- Optionales
parent_conversation_id(String) hinzugefügt - Optionale wiederholbare Parameter
guardrail_types(GuardrailType[]) undcustom_guardrail_names(String-Array) hinzugefügt
- Optionales
- Agent-Branches auflisten -
GET /v1/convai/agents/{agent_id}/branches- Optionales
include_commit_status(Boolean, Standardwertfalse) hinzugefügt - Branch-Zusammenfassungen erhalten die nullable Felder
commits_ahead(Integer),commits_behind(Integer) undmerged_into_branch_id(String)
- Optionales
Stimmen
- Alle Stimmen v2 abrufen -
GET /v2/voices- Optionale Filter
gender,ageundaccent(String) hinzugefügt - Optionale Filter
languageunduse_cases(String-Array) hinzugefügt - Optionale Filter
min_notice_period_days(Integer),include_custom_rates,include_live_moderatedundhigh_quality(Boolean) hinzugefügt
- Optionale Filter
Schema-Änderungen
ElevenAgents
- Client-Override-Schemas erhalten
max_duration_seconds(Integer) undpronunciation_dictionary_locators(Array) - MCP-Server-Eingabe- und Ausgabeschemas erhalten
request_meta-Maps - Einstellungen der Agent-Plattform erhalten
alerting; die Spracherkennung erhältonly_at_conversation_start(Boolean) AnalysisCharging.last_runist jetzt erforderlich und nicht nullable; laufende Summen erhalten das erforderliche Feldruns(Integer)- Antworten für RAG-Chunks erfordern jetzt
content_formatunddocument_type