Hoppa till navigering

Dubbing v2 API

Dubbing v2 är nu tillgängligt via API:et. Det översätter ljud och video till fler än 90 språk samtidigt som varje talares röst, tonfall och tempo bevaras.

Det nya projektbaserade API:et sparar källtranskriptioner och översättningar som redigerbar JSON. Skapa ett projekt från en fil eller URL, lägg till ett eller flera målspråk, redigera enskilda transkriptionssegment eller översättningar och generera sedan bara de områden som har ändrats igen. Följ snabbstartsguiden för Dubbing för att skapa din första dubbning.

ElevenAgents

  • Skyddsfilter för konversationer: Lista konversationer lägger till de valfria frågeparametrarna guardrail_types (GuardrailType[]) och custom_guardrail_names (strängarray). Den befintliga konversationshierarkin kan nu filtreras med valfria parent_conversation_id (sträng).
  • Status för grendivergens: Lista agentgrenar lägger till valfria include_commit_status (boolesk, standardvärde false). När den är aktiverad innehåller grensammanfattningar de nullbara fälten commits_ahead, commits_behind och merged_into_branch_id.
  • Kontroller för konversationer och verktyg: Klientåsidosättningar stöder nu max_duration_seconds och pronunciation_dictionary_locators. MCP-serverkonfigurationen lägger till request_meta för att skicka MCP-_meta-värden till verktygsanrop, och tidsgränser för webhook-verktyg stöder nu upp till 300 sekunder.
  • Användning för analys efter samtal: Debitering för konversationer lägger till en analysis-uppdelning med löpande summor per funktion och körningsögonblicksbilder. Transkriptionsmeddelanden lägger till triggered_guardrails, och konversationsturer lägger till valfria producing_llm.

Röster

  • Filter för röstsökning: Hämta alla röster v2 lägger till de valfria frågeparametrarna gender, age, language, accent, use_cases, min_notice_period_days, include_custom_rates, include_live_moderated och high_quality.

SDK-versioner

JavaScript SDK

  • v2.63.0 - Lade till alternativ för Speech to Text i realtid för sekundära språk, språk- och entitetsidentifiering, filtrering av bakgrundsljud, loggning och autentisering med engångstoken. Lade till händelser för slutligt transkript, entitet och ogiltig begäran; åtgärdade utskick av ej godkända villkor, duplicerade audio_format-parametrar och inkluderande VAD-gränser.
  • v2.62.0 - Lade till metoder för massuppdatering av Dubbing-transkript och DubbingRegenerateResponse; lade till stöd för konversationsskyddsfilter, commit-status för agentgrenar, agentaviseringar och MCP requestMeta. Skapande av språkmål accepterar inte längre modelId.
  • v2.61.0 - Lade till filtrering av konversationshierarki, debitering för analys efter samtal, metadata för aktiverade skyddsregler, detaljer om sammanslagningskonflikter i grenar, maskering av DTMF-indata och uppladdning av Dubbing-transkriptioner. Tog bort exporterade OpenAI-sessionstyper för realtid och resultatvarianter för verktyget run_subagent_*.

Python SDK

  • v2.63.0 - Lade till alternativ för Speech to Text i realtid för sekundära språk, språk- och entitetsidentifiering, filtrering av bakgrundsljud, loggning och autentisering med engångstoken. Lade till händelser för slutligt transkript, entitet och ogiltig begäran; åtgärdade utskick av ej godkända villkor och avvisar nu anslutningar utan API-nyckel eller token.
  • v2.62.0 - Lade till Dubbing-metoderna update_segments och DubbingRegenerateResponse; lade till stöd för guardrail_types, custom_guardrail_names, include_commit_status och MCP request_meta. Uppdateringar av Dubbing-segment använder nu modeller för begärandetext, och skapande av språkmål accepterar inte längre model_id.
  • v2.61.0 - Lade till parent_conversation_id, debitering för analys, metadata för aktiverade skyddsregler, sammanslagningskonflikter i grenar, maskering av DTMF-indata och uppladdning av Dubbing-transkriptioner. Tog bort OpenAI-sessionstyper för realtid och resultatmodeller för run_subagent_*.

Android SDK

  • v0.12.1 - Åtgärdade att avsiktliga frånkopplingar av sessioner med endast text rapporterades som ConversationStatus.ERROR.
  • v0.12.0 - Lade till ConversationConfig.useMediaStream för att dirigera konversationsljud genom Androids medieström. Fjärrinitierade normala WebSocket-stängningar rapporterar nu DisconnectionDetails.Agent, medan lokalt initierade stängningar rapporterar DisconnectionDetails.User.

MCP-server

  • v0.12.2 - Åtgärdade ett problem med sökvägstraversering.

API

Nya slutpunkter

Dubbing

  • Massuppdatera källsegment - PATCH /v1/dubbing/project/{project_id}/transcript/segments
    • Kräver DubbingBulkSegmentUpdateRequest
    • Uppdaterar atomärt källsegmentets text, talare eller tidpunkt
    • Returnerar DubbingBulkSourceSegmentUpdateResponse med uppdaterade segments och revision
  • Massuppdatera målsegment - PATCH /v1/dubbing/project/{project_id}/language/{language_id}/transcript/segments
    • Kräver DubbingBulkTargetSegmentUpdateRequest
    • Uppdaterar atomärt översättningar för flera målsegment
    • Returnerar DubbingBulkTargetSegmentUpdateResponse med uppdaterade segments och revision

Uppdaterade slutpunkter

ElevenAgents

  • Lista konversationer - GET /v1/convai/conversations
    • Lade till valfria parent_conversation_id (sträng)
    • Lade till valfria upprepningsbara guardrail_types (GuardrailType[]) och custom_guardrail_names (strängarray)
  • Lista agentgrenar - GET /v1/convai/agents/{agent_id}/branches
    • Lade till valfria include_commit_status (boolesk, standardvärde false)
    • Grensammanfattningar lägger till nullbara commits_ahead (heltal), commits_behind (heltal) och merged_into_branch_id (sträng)

Röster

  • Hämta alla röster v2 - GET /v2/voices
    • Lade till valfria filter för gender, age och accent (sträng)
    • Lade till valfria filter för language och use_cases (strängarray)
    • Lade till valfria filter för min_notice_period_days (heltal), include_custom_rates, include_live_moderated och high_quality (boolesk)

Schemaändringar

ElevenAgents

  • Scheman för klientåsidosättningar lägger till max_duration_seconds (heltal) och pronunciation_dictionary_locators (array)
  • In- och utmatningsscheman för MCP-servern lägger till request_meta-mappningar
  • Agentplattformens inställningar lägger till alerting; språkidentifiering lägger till only_at_conversation_start (boolesk)
  • AnalysisCharging.last_run är nu obligatoriskt och kan inte vara null; löpande summor lägger till obligatoriska runs (heltal)
  • Svar för RAG-segment kräver nu content_format och document_type