실시간 음성·번역·비디오 생성 기능 확대
Realtime, 번역, Video to Music과 여러 에이전트·워크스페이스 API가 새로 추가되거나 확장되었습니다.
교안에 영향
이전 안내에서 Realtime, Workspace environments, service account API key 비활성화, Music의 enable_logging, Sound Effects 출력 형식 관련 설명은 수정이 필요합니다.
요약
- Eleven Realtime가 ElevenAgents용 새 모델군으로 추가되어, LLM·Speech to Text·Text to Speech 설정을 한 번에 묶어 사용할 수 있습니다. - Realtime Translation이 실시간 음성 번역 WebSocket API로 제공되며, 대화 중인 음성을 다른 언어의 음성으로 바꿀 수 있습니다. - Video to Music API가 추가되어 비디오를 입력하면 음악과 옵션에 따라 음향 효과까지 생성할 수 있습니다. - Alerts, Guardrails, Workspace environments, Google Calendar 이벤트 업데이트 등 ElevenAgents와 워크스페이스 관련 API가 확장되었습니다. - 음악·사운드 이펙트, Speech Engine, Dubbing, Voices, SDK, CLI, 패키지 전반에 걸쳐 출력 형식, 길이 제한, 정렬, 세션 유지, 호환성 관련 변경이 포함되었습니다.
바뀐 것
새 기능
- Eleven Realtime가 ElevenAgents voice agents용 새 모델군으로 추가되었습니다.
- Eleven Realtime v1 Mini( eleven_realtime_v1_mini )가 기본 모델로 제공됩니다.
- Eleven Realtime v1 Max( eleven_realtime_v1_max )가 복잡한 지시나 다단계 도구 호출용으로 제공됩니다.
- Realtime Translation이 실시간 음성 번역용 WebSocket API로 제공됩니다.
- Video to Music API가 추가되어 비디오로부터 음악을 생성할 수 있습니다.
- Alerts가 워크스페이스의 에이전트 오류율 이상 징후를 알려주는 기능으로 추가되었습니다.
- Workspace environments를 List environments, Create environment, Delete environment로 관리할 수 있게 되었습니다.
- Outbound call과 Submit batch call의 Twilio answering machine detection 설정에 actions가 추가되었습니다.
- Agents가 gemini-4-argon, claude-opus-4-6, ElevenLabs-hosted nemotron-35-super-vl-nvfp4를 사용할 수 있게 되었습니다.
- Google Calendar integration에 google_calendar_update_event와 google_calendar_delete_event 도구가 추가되었습니다.
- Sound Effects가 wav_8000, wav_16000, wav_22050, wav_24000, wav_32000, wav_44100, wav_48000 출력 형식을 지원합니다.
- Dubbing project language outputs에 subtitles가 포함되어 번역 자막 WebVTT를 받을 수 있게 되었습니다.
- Voice sharing review_status에 declined_resubmittable 상태가 추가되었습니다.
- Disable service account API key로 서비스 계정 API 키를 비활성화할 수 있게 되었습니다.
- List workspace groups와 List service accounts가 그룹별 concurrency 한도를 반환하고, 그룹 권한에 all_resources_access가 추가되었습니다.
- JavaScript SDK v2.74.0이 client.conversationalAi.realtime.createClientSecret와 environments client를 추가했습니다.
- Python SDK v2.74.1이 music.compose_detailed에서 enable_logging 전달을 지원합니다.
개선
- Get agent와 Update agent가 include_procedure_generated_workflow_elements를 받아 작성한 workflow 요소만 조회할 수 있게 되었습니다.
- Rebase branch와 Preview rebase가 source_branch_id를 받아 main 이외의 브랜치에서 변경을 가져올 수 있게 되었습니다.
- Delete agent가 force를 받아 다른 에이전트가 subagent로 사용하는 경우에도 삭제할 수 있게 되었습니다.
- List agents가 sort_by=updated_at을 지원하고, 각 요약에 updated_at_unix_secs가 포함됩니다.
- Speech Engine conversation의 최대 길이가 40분으로 늘어났습니다.
- List Speech Engines가 sort_by=updated_at을 지원하고 각 요약에 updated_at_unix_secs가 포함됩니다.
기타
- Guardrails가 alpha를 벗어나 일반 제공 상태가 되었습니다.
- Music generation, composition plan, stem separation, Video to music, Sound Effects가 enable_logging=false로 Zero Retention Mode를 사용할 수 있게 되었습니다.