Plugin guides
Plugin cuộc gọi thoại
Các cuộc gọi thoại cho OpenClaw thông qua Plugin: thông báo gọi đi, hội thoại nhiều lượt, thoại thời gian thực song công toàn phần, phiên âm trực tuyến và cuộc gọi đến với chính sách danh sách cho phép.
Nhà cung cấp: mock (phát triển, không dùng mạng), plivo (Voice API + chuyển tiếp XML +
nhập liệu bằng giọng nói GetInput), telnyx (Call Control v2), twilio (Programmable Voice +
Media Streams).
Bắt đầu nhanh
Install the plugin
From npm
openclaw plugins install @openclaw/voice-callFrom a local folder (dev)
PLUGIN_SRC=./path/to/local/voice-call-pluginopenclaw plugins install "$PLUGIN_SRC"cd "$PLUGIN_SRC" && pnpm installSử dụng gói không kèm phiên bản để theo thẻ phát hành hiện tại. Chỉ ghim một phiên bản chính xác khi bạn cần quy trình cài đặt có thể tái lập. Sau đó, khởi động lại Gateway để Plugin được nạp.
Configure provider and webhook
Đặt cấu hình trong plugins.entries.voice-call.config (xem
Cấu hình bên dưới). Tối thiểu cần có: provider, thông tin
xác thực của nhà cung cấp, fromNumber và URL Webhook có thể truy cập công khai.
Verify setup
openclaw voicecall setupopenclaw voicecall setup --jsonKiểm tra trạng thái bật Plugin, thông tin xác thực của nhà cung cấp, khả năng
truy cập Webhook và bảo đảm chỉ một chế độ âm thanh (streaming hoặc realtime) đang hoạt động.
Smoke test
openclaw voicecall smokeopenclaw voicecall smoke --to "+15555550123"Theo mặc định, cả hai đều chỉ chạy thử mà không thực hiện thao tác thật. Thêm --yes để thực hiện một cuộc gọi
thông báo ngắn:
openclaw voicecall smoke --to "+15555550123" --yesCấu hình
Nếu enabled: true nhưng nhà cung cấp đã chọn thiếu thông tin xác thực, quá trình khởi động
Gateway sẽ ghi cảnh báo thiết lập chưa hoàn tất kèm các khóa còn thiếu và bỏ qua
việc khởi động môi trường chạy. Các lệnh, lời gọi RPC và công cụ tác nhân vẫn trả về
chính xác cấu hình còn thiếu khi được sử dụng.
{ plugins: { entries: { "voice-call": { enabled: true, config: { provider: "twilio", // or "telnyx" | "plivo" | "mock" fromNumber: "+15550001234", // or TWILIO_FROM_NUMBER for Twilio toNumber: "+15550005678", sessionScope: "per-phone", // per-phone | per-call numbers: { "+15550009999": { inboundGreeting: "Silver Fox Cards, how can I help?", responseSystemPrompt: "You are a concise baseball card specialist.", tts: { providers: { openai: { speakerVoice: "alloy" }, }, }, }, }, twilio: { accountSid: "ACxxxxxxxx", authToken: "...", // region: "ie1", // optional: us1 | ie1 | au1; defaults to us1 }, telnyx: { apiKey: "...", connectionId: "...", // Telnyx webhook public key from the Mission Control Portal // (Base64; can also be set via TELNYX_PUBLIC_KEY). publicKey: "...", }, plivo: { authId: "MAxxxxxxxxxxxxxxxxxxxx", authToken: "...", }, // Webhook server serve: { port: 3334, path: "/voice/webhook", }, // Webhook security (recommended for tunnels/proxies) webhookSecurity: { allowedHosts: ["voice.example.com"], trustedProxyIPs: ["100.64.0.1"], }, // Public exposure (pick one) // publicUrl: "https://example.ngrok.app/voice/webhook", // tunnel: { provider: "ngrok" }, // tailscale: { mode: "funnel", path: "/voice/webhook" }, outbound: { defaultMode: "notify", // notify | conversation }, streaming: { enabled: true /* see Streaming transcription */ }, realtime: { enabled: false /* see Realtime voice conversations */ }, }, }, }, },}Tham chiếu cấu hình
Các khóa cấp cao nhất trong plugins.entries.voice-call.config không được trình bày ở trên:
| Khóa | Mặc định | Ghi chú |
|---|---|---|
enabled |
false |
Công tắc bật/tắt chính. |
inboundPolicy |
"disabled" |
disabled | allowlist | pairing | open. Xem Cuộc gọi đến. |
allowFrom |
[] |
Danh sách E.164 được phép cho inboundPolicy: "allowlist". |
maxDurationSeconds |
300 |
Giới hạn cứng về thời lượng mỗi cuộc gọi, được áp dụng bất kể trạng thái đã trả lời hay chưa. |
staleCallReaperSeconds |
120 |
Xem Trình dọn dẹp cuộc gọi cũ. 0 sẽ vô hiệu hóa tính năng này. |
silenceTimeoutMs |
800 |
Phát hiện khoảng lặng cuối lời nói cho luồng cổ điển (không phải thời gian thực). |
transcriptTimeoutMs |
180000 |
Thời gian chờ tối đa cho bản phiên âm của người gọi trước khi từ bỏ một lượt. |
ringTimeoutMs |
30000 |
Thời gian chờ đổ chuông cho cuộc gọi đi. |
maxConcurrentCalls |
1 |
Các cuộc gọi đi vượt quá giới hạn này sẽ bị từ chối. |
outbound.notifyHangupDelaySec |
3 |
Số giây chờ sau TTS trước khi tự động ngắt máy ở chế độ thông báo. |
skipSignatureVerification |
false |
Chỉ dành cho kiểm thử cục bộ; tuyệt đối không bật trong môi trường sản xuất. |
store |
chưa đặt | Ghi đè đường dẫn nhật ký cuộc gọi mặc định ~/.openclaw/voice-calls. |
agentId |
"main" |
Tác nhân được dùng để tạo phản hồi và lưu trữ phiên. |
responseModel |
chưa đặt | Ghi đè mô hình mặc định cho các phản hồi cổ điển (không phải thời gian thực). |
responseSystemPrompt |
được tạo | Lời nhắc hệ thống tùy chỉnh cho các phản hồi cổ điển. |
responseTimeoutMs |
30000 |
Thời gian chờ để tạo phản hồi cổ điển (ms). |
Twilio mặc định sử dụng điểm cuối REST US1. Để xử lý cuộc gọi tại một Khu vực
ngoài Hoa Kỳ được hỗ trợ, hãy đặt twilio.region thành ie1 hoặc au1 và sử dụng thông tin xác thực từ
Khu vực đó. Xem
hướng dẫn về REST API ngoài Hoa Kỳ của Twilio.
Provider exposure and security notes
- Twilio, Telnyx và Plivo đều yêu cầu một URL Webhook có thể truy cập công khai.
mocklà nhà cung cấp phát triển cục bộ (không thực hiện lời gọi mạng).- Telnyx yêu cầu
telnyx.publicKey(hoặcTELNYX_PUBLIC_KEY), trừ khiskipSignatureVerificationlà true. skipSignatureVerificationchỉ dành cho kiểm thử cục bộ.- Ở gói miễn phí của ngrok, hãy đặt
publicUrlthành URL ngrok chính xác; việc xác minh chữ ký luôn được thực thi. tunnel.allowNgrokFreeTierLoopbackBypass: truecho phép Webhook Twilio có chữ ký không hợp lệ chỉ khitunnel.provider="ngrok"vàserve.bindlà local loopback (tác nhân ngrok cục bộ). Chỉ dành cho phát triển cục bộ.- URL gói miễn phí của ngrok có thể thay đổi hoặc thêm trang trung gian; nếu
publicUrlbị thay đổi, chữ ký Twilio sẽ không hợp lệ. Với môi trường sản xuất: ưu tiên miền ổn định hoặc đường hầm Tailscale.
Streaming connection caps
streaming.preStartTimeoutMs(mặc định5000) đóng các socket không bao giờ gửi khungstarthợp lệ.streaming.maxPendingConnections(mặc định32) giới hạn tổng số socket trước khi bắt đầu chưa được xác thực.streaming.maxPendingConnectionsPerIp(mặc định4) giới hạn số socket trước khi bắt đầu chưa được xác thực trên mỗi IP nguồn.streaming.maxConnections(mặc định128) giới hạn tất cả socket luồng phương tiện đang mở (đang chờ + đang hoạt động).
Legacy config migrations
Quá trình phân tích cú pháp cấu hình tự động chuẩn hóa các khóa cũ này và ghi
cảnh báo nêu rõ đường dẫn thay thế; lớp tương thích sẽ bị loại bỏ trong một bản
phát hành tương lai (2026.6.0), vì vậy hãy chạy openclaw doctor --fix để ghi lại cấu hình đã lưu
theo dạng chuẩn:
provider: "log"→provider: "mock"twilio.from→fromNumberstreaming.sttProvider→streaming.providerstreaming.openaiApiKey→streaming.providers.openai.apiKeystreaming.sttModel→streaming.providers.openai.modelstreaming.silenceDurationMs→streaming.providers.openai.silenceDurationMsstreaming.vadThreshold→streaming.providers.openai.vadThresholdrealtime.agentContext.includeSystemPromptđã bị loại bỏ (ngữ cảnh thời gian thực hiện sử dụng lời nhắc tác nhân được tạo)
Phạm vi phiên
Theo mặc định, Cuộc gọi thoại sử dụng sessionScope: "per-phone" để các cuộc gọi lặp lại từ
cùng một người gọi duy trì bộ nhớ hội thoại. Đặt sessionScope: "per-call" khi
mỗi cuộc gọi của nhà mạng cần bắt đầu bằng ngữ cảnh mới, chẳng hạn như các luồng lễ tân,
đặt chỗ, IVR hoặc cầu nối Google Meet, nơi cùng một số điện thoại có thể
đại diện cho các cuộc họp khác nhau.
Cuộc gọi thoại lưu các khóa phiên được tạo trong không gian tên của tác nhân đã cấu hình
(agent:<agentId>:voice:*). Các khóa tích hợp tường minh thô được phân giải vào cùng
không gian tên: một khóa chuẩn agent:<configuredAgentId>:* giữ nguyên
chủ sở hữu đó và tuân theo bí danh phạm vi toàn cục/session.mainKey của lõi; đầu vào
agent:* ngoại lai hoặc không đúng định dạng được đặt phạm vi như một khóa bất định dưới tác nhân
đã cấu hình; global và unknown vẫn là các giá trị canh gác toàn cục.
Hội thoại thoại thời gian thực
realtime chọn một nhà cung cấp thoại thời gian thực song công toàn phần cho âm thanh cuộc gọi trực tiếp.
Tùy chọn này tách biệt với streaming, vốn chỉ chuyển tiếp âm thanh đến các nhà cung cấp
phiên âm thời gian thực.
Hành vi hiện tại của môi trường chạy:
realtime.enabledđược hỗ trợ cho Twilio và Telnyx.realtime.providerlà tùy chọn. Nếu không được đặt, Cuộc gọi thoại sẽ sử dụng nhà cung cấp thoại thời gian thực được đăng ký đầu tiên.- Các nhà cung cấp thoại thời gian thực đi kèm: Google Gemini Live (
google) và OpenAI (openai), được đăng ký bởi các Plugin nhà cung cấp tương ứng. - Cấu hình thô do nhà cung cấp sở hữu nằm trong
realtime.providers.<providerId>. - Theo mặc định, Cuộc gọi thoại cung cấp công cụ thời gian thực dùng chung
openclaw_agent_consult. Mô hình thời gian thực có thể gọi công cụ này khi người gọi yêu cầu suy luận sâu hơn, thông tin hiện tại hoặc các công cụ OpenClaw thông thường. realtime.consultPolicycó thể tùy chọn bổ sung hướng dẫn về thời điểm mô hình thời gian thực nên gọiopenclaw_agent_consult.realtime.agentContext.enabledmặc định tắt. Khi được bật, Cuộc gọi thoại sẽ chèn danh tính tác nhân có giới hạn và một gói ngữ cảnh gồm các tệp không gian làm việc đã chọn vào chỉ dẫn dành cho nhà cung cấp thời gian thực khi thiết lập phiên.realtime.fastContext.enabledmặc định tắt. Khi được bật, trước tiên Cuộc gọi thoại sẽ tìm kiếm ngữ cảnh bộ nhớ/phiên đã được lập chỉ mục cho câu hỏi tham vấn và trả các đoạn trích đó về mô hình thời gian thực trong khoảngrealtime.fastContext.timeoutMs, sau đó chỉ chuyển sang tác nhân tham vấn đầy đủ nếurealtime.fastContext.fallbackToConsultlà true.- Nếu
realtime.providertrỏ đến một nhà cung cấp chưa được đăng ký hoặc hoàn toàn không có nhà cung cấp thoại thời gian thực nào được đăng ký, Cuộc gọi thoại sẽ ghi cảnh báo và bỏ qua phương tiện thời gian thực thay vì làm hỏng toàn bộ Plugin. inboundPolicykhông được là"disabled"khirealtime.enabledlà true;validateProviderConfigsẽ từ chối tổ hợp đó.- Khóa phiên tham vấn sẽ tái sử dụng phiên cuộc gọi đã lưu nếu có, sau đó chuyển sang
sessionScopeđã cấu hình (per-phonetheo mặc định hoặcper-callcho các cuộc gọi độc lập).
Chính sách công cụ
realtime.toolPolicy kiểm soát lượt chạy tham vấn:
| Chính sách | Hành vi |
|---|---|
safe-read-only |
Cung cấp công cụ tham vấn và giới hạn tác nhân thông thường ở các công cụ read, web_search, web_fetch, x_search, memory_search và memory_get. |
owner |
Cung cấp công cụ tham vấn và cho phép tác nhân thông thường sử dụng chính sách công cụ tác nhân thông thường. |
none |
Không cung cấp công cụ tham vấn. Các realtime.tools tùy chỉnh vẫn được chuyển tiếp đến nhà cung cấp thời gian thực. |
realtime.consultPolicy chỉ kiểm soát chỉ dẫn dành cho mô hình thời gian thực:
| Chính sách | Hướng dẫn |
|---|---|
auto |
Giữ nguyên lời nhắc mặc định và để nhà cung cấp quyết định thời điểm gọi công cụ tham vấn. |
substantive |
Trả lời trực tiếp các câu nối hội thoại đơn giản và tham vấn trước khi xử lý dữ kiện, bộ nhớ, công cụ hoặc ngữ cảnh. |
always |
Tham vấn trước mọi câu trả lời có nội dung thực chất. |
Ngữ cảnh thoại của tác nhân
Bật realtime.agentContext khi cầu nối thoại cần có phong cách giống tác nhân
OpenClaw đã cấu hình mà không phải chịu chi phí cho một lượt khứ hồi tham vấn
tác nhân đầy đủ trong các lượt thông thường. Gói ngữ cảnh được thêm một lần khi
phiên thời gian thực được tạo, vì vậy không làm tăng độ trễ theo từng lượt. Các
lệnh gọi openclaw_agent_consult vẫn chạy tác nhân OpenClaw đầy đủ và nên được
dùng cho tác vụ công cụ, thông tin hiện tại, tra cứu bộ nhớ hoặc trạng thái
không gian làm việc.
{ plugins: { entries: { "voice-call": { config: { agentId: "main", realtime: { enabled: true, provider: "google", toolPolicy: "safe-read-only", consultPolicy: "substantive", agentContext: { enabled: true, maxChars: 6000, includeIdentity: true, includeWorkspaceFiles: true, files: ["SOUL.md", "IDENTITY.md", "USER.md"], }, }, }, }, }, },}Ví dụ về nhà cung cấp thời gian thực
Google Gemini Live
Giá trị mặc định: khóa API từ realtime.providers.google.apiKey, GEMINI_API_KEY
hoặc GOOGLE_API_KEY; mô hình gemini-3.1-flash-live-preview;
giọng nói Kore. sessionResumption và contextWindowCompression mặc định được bật
cho các cuộc gọi dài hơn và có thể kết nối lại. Sử dụng silenceDurationMs,
startSensitivity và endSensitivity để tinh chỉnh việc luân phiên lượt nói nhanh hơn
trên âm thanh điện thoại.
{ plugins: { entries: { "voice-call": { config: { provider: "twilio", inboundPolicy: "allowlist", allowFrom: ["+15550005678"], realtime: { enabled: true, provider: "google", instructions: "Speak briefly. Call openclaw_agent_consult before using deeper tools.", toolPolicy: "safe-read-only", consultPolicy: "substantive", consultThinkingLevel: "low", consultFastMode: true, agentContext: { enabled: true }, providers: { google: { apiKey: "${GEMINI_API_KEY}", model: "gemini-3.1-flash-live-preview", speakerVoice: "Kore", silenceDurationMs: 500, startSensitivity: "high", }, }, }, }, }, }, },}OpenAI
{ plugins: { entries: { "voice-call": { config: { realtime: { enabled: true, provider: "openai", providers: { openai: { apiKey: "${OPENAI_API_KEY}" }, }, }, }, }, }, },}Xem nhà cung cấp Google và nhà cung cấp OpenAI để biết các tùy chọn thoại thời gian thực dành riêng cho từng nhà cung cấp.
Phiên âm trực tuyến
streaming chọn một nhà cung cấp phiên âm thời gian thực cho âm thanh cuộc gọi trực tiếp.
Hành vi thời gian chạy hiện tại:
streaming.providerlà tùy chọn. Nếu không được đặt, Cuộc gọi thoại sẽ sử dụng nhà cung cấp phiên âm thời gian thực được đăng ký đầu tiên.- Các nhà cung cấp phiên âm thời gian thực đi kèm: Deepgram (
deepgram), ElevenLabs (elevenlabs), Mistral (mistral), OpenAI (openai) và xAI (xai), được đăng ký bởi các Plugin nhà cung cấp tương ứng. - Cấu hình thô do nhà cung cấp sở hữu nằm trong
streaming.providers.<providerId>. - Sau khi Twilio gửi thông báo
startcho luồng đã được chấp nhận, Cuộc gọi thoại sẽ đăng ký luồng ngay lập tức, đưa phương tiện đầu vào vào hàng đợi qua nhà cung cấp phiên âm trong khi nhà cung cấp kết nối và chỉ bắt đầu lời chào ban đầu sau khi phiên âm thời gian thực sẵn sàng. - Nếu
streaming.providertrỏ đến một nhà cung cấp chưa được đăng ký hoặc không có nhà cung cấp nào được đăng ký, Cuộc gọi thoại sẽ ghi cảnh báo và bỏ qua truyền phát phương tiện thay vì làm hỏng toàn bộ Plugin.
Ví dụ về nhà cung cấp truyền phát
OpenAI
Giá trị mặc định: khóa API streaming.providers.openai.apiKey hoặc
OPENAI_API_KEY; mô hình gpt-4o-transcribe; silenceDurationMs: 800;
vadThreshold: 0.5.
{ plugins: { entries: { "voice-call": { config: { streaming: { enabled: true, provider: "openai", streamPath: "/voice/stream", providers: { openai: { apiKey: "sk-...", // optional if OPENAI_API_KEY is set model: "gpt-4o-transcribe", silenceDurationMs: 800, vadThreshold: 0.5, }, }, }, }, }, }, },}xAI
Giá trị mặc định: khóa API streaming.providers.xai.apiKey hoặc XAI_API_KEY (sẽ
chuyển sang hồ sơ xác thực OAuth của xAI nếu cả hai đều không được đặt); điểm cuối
wss://api.x.ai/v1/stt; mã hóa mulaw; tần số lấy mẫu 8000;
endpointingMs: 800; interimResults: true.
{ plugins: { entries: { "voice-call": { config: { streaming: { enabled: true, provider: "xai", streamPath: "/voice/stream", providers: { xai: { apiKey: "${XAI_API_KEY}", // optional if XAI_API_KEY is set endpointingMs: 800, language: "en", }, }, }, }, }, }, },}TTS cho cuộc gọi
Cuộc gọi thoại sử dụng cấu hình lõi messages.tts để truyền phát giọng nói
trong các cuộc gọi. Bạn có thể ghi đè cấu hình này trong cấu hình Plugin bằng
cùng một cấu trúc — cấu hình đó sẽ được hợp nhất sâu với messages.tts.
{ tts: { provider: "elevenlabs", providers: { elevenlabs: { speakerVoiceId: "pMsXgVXv3BLzUgSXRplE", modelId: "eleven_multilingual_v2", }, }, },}Ghi chú về hành vi:
- Các khóa
tts.<provider>cũ trong cấu hình Plugin (openai,elevenlabs,microsoft,edge) được sửa bởiopenclaw doctor --fix; cấu hình đã cam kết nên sử dụngtts.providers.<provider>. - TTS lõi được sử dụng khi truyền phát phương tiện Twilio được bật; nếu không, cuộc gọi sẽ chuyển sang giọng nói gốc của nhà cung cấp.
- Nếu một luồng phương tiện Twilio đã hoạt động, Cuộc gọi thoại sẽ không chuyển sang TwiML
OPENCLAW_DOCS_MARKER:calloutOpen:U2F5. Nếu TTS điện thoại không khả dụng trong trạng thái đó, yêu cầu phát lại sẽ thất bại thay vì trộn lẫn hai đường phát lại. - Khi TTS điện thoại chuyển sang nhà cung cấp thứ cấp, Cuộc gọi thoại sẽ ghi cảnh báo kèm chuỗi nhà cung cấp (
from,to,attempts) để gỡ lỗi. - Khi thao tác ngắt lời hoặc việc đóng luồng của Twilio xóa hàng đợi TTS đang chờ, các yêu cầu phát lại trong hàng đợi sẽ được hoàn tất thay vì khiến bên gọi chờ vô thời hạn để phát lại hoàn tất.
Ví dụ về TTS
Chỉ TTS lõi
{messages: {tts: {provider: "openai",providers: { openai: { speakerVoice: "alloy" },},},},}Ghi đè bằng ElevenLabs (chỉ cuộc gọi)
{plugins: {entries: {"voice-call": { config: { tts: { provider: "elevenlabs", providers: { elevenlabs: { apiKey: "elevenlabs_key", speakerVoiceId: "pMsXgVXv3BLzUgSXRplE", modelId: "eleven_multilingual_v2", }, }, }, },},},},}Ghi đè mô hình OpenAI (hợp nhất sâu)
{plugins: {entries: {"voice-call": { config: { tts: { providers: { openai: { model: "gpt-4o-mini-tts", speakerVoice: "marin", }, }, }, },},},},}Cuộc gọi đến
Chính sách cuộc gọi đến mặc định là disabled. Để bật cuộc gọi đến, hãy đặt:
{inboundPolicy: "allowlist",allowFrom: ["+15550001234"],inboundGreeting: "Hello! How can I help?",}Phản hồi tự động sử dụng hệ thống tác tử. Điều chỉnh bằng responseModel,
responseSystemPrompt và responseTimeoutMs.
Định tuyến theo từng số
Sử dụng numbers khi một Plugin Voice Call nhận cuộc gọi cho nhiều số điện thoại
và mỗi số cần hoạt động như một đường dây riêng. Ví dụ,
một số có thể sử dụng trợ lý cá nhân với phong cách thân thiện, còn số khác sử dụng một
hình tượng doanh nghiệp, một tác tử phản hồi khác và một giọng TTS khác.
Tuyến được chọn từ số To đã gọi do nhà cung cấp cung cấp. Các khóa phải
là số E.164. Khi có cuộc gọi đến, Voice Call phân giải tuyến phù hợp
một lần, lưu tuyến đã khớp vào bản ghi cuộc gọi và tái sử dụng
cấu hình hiệu lực đó cho lời chào, luồng phản hồi tự động cổ điển, luồng
tư vấn thời gian thực và phát lại TTS. Nếu không có tuyến nào khớp, cấu hình
Voice Call toàn cục sẽ được sử dụng. Cuộc gọi đi không sử dụng numbers; hãy truyền rõ
đích gọi đi, thông điệp và phiên khi bắt đầu cuộc gọi.
Các giá trị ghi đè tuyến hiện được hỗ trợ:
inboundGreetingttsagentIdresponseModelresponseSystemPromptresponseTimeoutMs
Giá trị tuyến tts được hợp nhất sâu lên trên cấu hình tts Voice Call toàn cục, vì vậy
thông thường bạn chỉ cần ghi đè giọng của nhà cung cấp:
{inboundGreeting: "Hello from the main line.",responseSystemPrompt: "You are the default voice assistant.",tts: { provider: "openai", providers: { openai: { speakerVoice: "coral" }, },},numbers: { "+15550001111": { inboundGreeting: "Silver Fox Cards, how can I help?", responseSystemPrompt: "You are a concise baseball card specialist.", tts: { providers: { openai: { speakerVoice: "alloy" }, }, }, },},}Hợp đồng đầu ra lời nói
Đối với phản hồi tự động, Voice Call nối thêm một hợp đồng đầu ra lời nói nghiêm ngặt vào
lời nhắc hệ thống, yêu cầu phản hồi JSON {"spoken":"..."}. Voice Call
trích xuất văn bản lời nói theo cách phòng vệ:
- Bỏ qua tải dữ liệu được đánh dấu là nội dung lập luận/lỗi.
- Phân tích JSON trực tiếp, JSON có hàng rào mã hoặc khóa
"spoken"nội tuyến. - Chuyển sang văn bản thuần túy khi cần và loại bỏ các đoạn mở đầu có khả năng là nội dung lập kế hoạch/siêu thông tin.
Điều này giúp phần phát lời nói tập trung vào văn bản dành cho người gọi và tránh làm lộ nội dung lập kế hoạch vào âm thanh.
Hành vi khởi đầu cuộc hội thoại
Đối với cuộc gọi đi ở chế độ conversation, việc xử lý thông điệp đầu tiên gắn với trạng thái
phát trực tiếp:
- Việc xóa hàng đợi khi người gọi ngắt lời và phản hồi tự động chỉ bị tạm ngưng trong lúc lời chào ban đầu đang được phát.
- Nếu phát ban đầu thất bại, cuộc gọi trở về trạng thái
listeningvà thông điệp ban đầu vẫn nằm trong hàng đợi để thử lại. - Việc phát ban đầu cho luồng Twilio bắt đầu khi luồng kết nối mà không có độ trễ bổ sung.
- Khi người gọi ngắt lời, quá trình phát đang hoạt động sẽ bị hủy và các mục TTS Twilio đang xếp hàng nhưng chưa phát sẽ bị xóa. Các mục đã xóa được phân giải là bị bỏ qua, nhờ đó logic phản hồi tiếp theo có thể tiếp tục mà không phải chờ âm thanh sẽ không bao giờ được phát.
- Các cuộc hội thoại thoại thời gian thực sử dụng lượt mở đầu riêng của luồng thời gian thực. Voice Call không gửi bản cập nhật TwiML
OPENCLAW_DOCS_MARKER:calloutOpen:U2F5kiểu cũ cho thông điệp ban đầu đó, vì vậy các phiên<Connect><Stream>gọi đi vẫn được duy trì kết nối.
Khoảng đệm khi luồng Twilio ngắt kết nối
Khi một luồng phương tiện Twilio ngắt kết nối, Voice Call chờ 2000 ms trước khi tự động kết thúc cuộc gọi:
- Nếu luồng kết nối lại trong khoảng thời gian đó, việc tự động kết thúc sẽ bị hủy.
- Nếu không có luồng nào đăng ký lại sau khoảng đệm, cuộc gọi sẽ kết thúc để tránh các cuộc gọi đang hoạt động bị treo.
Bộ thu hồi cuộc gọi cũ
Sử dụng staleCallReaperSeconds (mặc định 120) để kết thúc các cuộc gọi không bao giờ
được trả lời và không bao giờ đạt đến trạng thái hội thoại trực tiếp, ví dụ các cuộc gọi ở chế độ
thông báo mà nhà cung cấp không bao giờ gửi Webhook kết thúc. Đặt thành 0 để
tắt.
Bộ thu hồi chạy mỗi 30 giây và chỉ kết thúc các cuộc gọi không có dấu thời gian
answeredAt, đồng thời chưa ở trạng thái kết thúc hoặc trực tiếp
(speaking/listening), vì vậy các cuộc hội thoại đã được trả lời sẽ không bao giờ bị bộ hẹn giờ này
thu hồi; maxDurationSeconds (mặc định 300) là giới hạn riêng để
kết thúc các cuộc gọi đã được trả lời nhưng kéo dài quá lâu.
Đối với các luồng kiểu thông báo mà nhà mạng có thể chậm gửi Webhook
đổ chuông/trả lời, hãy tăng staleCallReaperSeconds cao hơn giá trị mặc định để các cuộc gọi
chậm nhưng bình thường không bị thu hồi sớm; 120-300 giây là khoảng hợp lý
cho môi trường sản xuất.
{plugins: {entries: { "voice-call": { config: { maxDurationSeconds: 300, staleCallReaperSeconds: 120, }, },},},}Bảo mật Webhook
Khi một proxy hoặc đường hầm nằm phía trước Gateway, Plugin sẽ tái tạo URL công khai để xác minh chữ ký. Các tùy chọn này kiểm soát những tiêu đề chuyển tiếp nào được tin cậy:
webhookSecurity.allowedHostsstring[]Danh sách cho phép các máy chủ từ tiêu đề chuyển tiếp.
webhookSecurity.trustForwardingHeadersbooleanTin cậy tiêu đề chuyển tiếp mà không cần danh sách cho phép.
webhookSecurity.trustedProxyIPsstring[]Chỉ tin cậy tiêu đề chuyển tiếp khi IP từ xa của yêu cầu khớp với danh sách.
Các biện pháp bảo vệ bổ sung:
- Tính năng chống phát lại Webhook được bật cho Twilio, Telnyx và Plivo. Các yêu cầu Webhook hợp lệ bị phát lại sẽ được xác nhận nhưng bỏ qua mọi hiệu ứng phụ.
- Các lượt hội thoại Twilio bao gồm một mã thông báo cho từng lượt trong lệnh gọi lại
<Gather>, vì vậy các lệnh gọi lại lời nói cũ/bị phát lại không thể đáp ứng một lượt bản chép lời mới hơn đang chờ. - Các yêu cầu Webhook chưa được xác thực sẽ bị từ chối trước khi đọc phần thân nếu thiếu các tiêu đề chữ ký bắt buộc của nhà cung cấp.
- Webhook voice-call sử dụng hồ sơ đọc phần thân trước xác thực dùng chung (phần thân tối đa 64 KB, thời gian chờ đọc 5 giây), cộng với giới hạn yêu cầu đang xử lý theo từng khóa (mặc định 8 yêu cầu đồng thời cho mỗi khóa) trước khi xác minh chữ ký.
Ví dụ với máy chủ công khai ổn định:
{plugins: {entries: { "voice-call": { config: { publicUrl: "https://voice.example.com/voice/webhook", webhookSecurity: { allowedHosts: ["voice.example.com"], }, }, },},},}CLI
openclaw voicecall call --to "+15555550123" --message "Hello from OpenClaw"openclaw voicecall start --to "+15555550123" # alias for callopenclaw voicecall continue --call-id <id> --message "Any questions?"openclaw voicecall speak --call-id <id> --message "One moment"openclaw voicecall dtmf --call-id <id> --digits "ww123456#"openclaw voicecall end --call-id <id>openclaw voicecall status --call-id <id>openclaw voicecall tailopenclaw voicecall latency # summarize turn latency from logsopenclaw voicecall expose --mode funnelKhi Gateway đang chạy, các lệnh vận hành voicecall
ủy quyền cho thời gian chạy voice-call do Gateway sở hữu để CLI không liên kết với
một máy chủ Webhook thứ hai. Nếu không thể kết nối đến Gateway, các lệnh sẽ chuyển sang
thời gian chạy CLI độc lập.
latency đọc calls.jsonl từ đường dẫn lưu trữ voice-call mặc định. Sử dụng
--file <path> để trỏ đến một nhật ký khác và --last <n> để giới hạn
phân tích ở N bản ghi cuối cùng (mặc định 200). Đầu ra bao gồm giá trị tối thiểu/tối đa/trung bình,
p50 và p95 cho độ trễ lượt và thời gian chờ nghe.
Công cụ tác tử
Tên công cụ: voice_call.
| Hành động | Đối số |
|---|---|
initiate_call |
message, to?, mode?, dtmfSequence? |
continue_call |
callId, message |
speak_to_user |
callId, message |
send_dtmf |
callId, digits |
end_call |
callId |
get_status |
callId |
Plugin voice-call đi kèm một Skills tương ứng cho tác tử.
RPC Gateway
| Phương thức | Đối số | Ghi chú |
|---|---|---|
voicecall.initiate |
to?, message, mode?, sessionKey?, requesterSessionKey? |
Chuyển sang cấu hình toNumber khi bỏ qua to. |
voicecall.start |
to, message?, mode?, dtmfSequence?, sessionKey? |
Giống initiate nhưng cũng chấp nhận dtmfSequence trước khi kết nối. |
voicecall.continue |
callId, message |
Chặn cho đến khi lượt được phân giải; trả về bản chép lời. |
voicecall.continue.start |
callId, message |
Biến thể bất đồng bộ: trả về ngay một operationId. |
voicecall.continue.result |
operationId |
Thăm dò thao tác voicecall.continue.start đang chờ để lấy kết quả. |
voicecall.speak |
callId, message |
Phát lời nói mà không chờ; sử dụng cầu nối thời gian thực khi realtime.enabled. |
voicecall.dtmf |
callId, digits |
|
voicecall.end |
callId |
|
voicecall.status |
callId? |
Bỏ qua callId để liệt kê tất cả cuộc gọi đang hoạt động. |
dtmfSequence chỉ hợp lệ với mode: "conversation"; các cuộc gọi ở chế độ thông báo
nên sử dụng voicecall.dtmf sau khi cuộc gọi đã tồn tại nếu cần gửi các chữ số
sau khi kết nối.
Khắc phục sự cố
Thiết lập không thể công khai Webhook
Chạy thiết lập từ cùng môi trường chạy Gateway:
openclaw voicecall setupopenclaw voicecall setup --jsonĐối với twilio, telnyx và plivo, webhook-exposure phải ở trạng thái xanh. Một
publicUrl đã cấu hình vẫn không hợp lệ khi trỏ đến không gian mạng cục bộ hoặc riêng tư,
vì nhà mạng không thể gọi lại vào các địa chỉ đó.
Không sử dụng localhost, 127.0.0.1, 0.0.0.0, 10.x, 172.16.x-172.31.x,
192.168.x, 169.254.x, fc00::/7, fd00::/8 hoặc các dải NAT cấp nhà mạng
khác làm publicUrl.
Các cuộc gọi đi Twilio ở chế độ thông báo gửi TwiML OPENCLAW_DOCS_MARKER:calloutOpen:U2F5 ban đầu trực tiếp
trong yêu cầu tạo cuộc gọi, vì vậy thông điệp lời nói đầu tiên không phụ thuộc vào
việc Twilio tìm nạp TwiML từ Webhook. Webhook công khai vẫn bắt buộc cho các lệnh gọi lại
trạng thái, cuộc gọi hội thoại, DTMF trước kết nối, luồng thời gian thực và
điều khiển cuộc gọi sau kết nối.
Sử dụng một đường dẫn công khai:
{plugins: {entries: {"voice-call": { config: { publicUrl: "https://voice.example.com/voice/webhook", // or tunnel: { provider: "ngrok" }, // or tailscale: { mode: "funnel", path: "/voice/webhook" }, },},},},}Sau khi thay đổi cấu hình, hãy khởi động lại hoặc tải lại Gateway, rồi chạy:
openclaw voicecall setupopenclaw voicecall smokevoicecall smoke là một lần chạy thử, trừ khi bạn truyền --yes.
Thông tin xác thực của nhà cung cấp không hợp lệ
Kiểm tra nhà cung cấp đã chọn và các trường thông tin xác thực bắt buộc:
- Twilio:
twilio.accountSid,twilio.authTokenvàfromNumber, hoặcTWILIO_ACCOUNT_SID,TWILIO_AUTH_TOKENvàTWILIO_FROM_NUMBER. - Telnyx:
telnyx.apiKey,telnyx.connectionId,telnyx.publicKeyvàfromNumber, hoặcTELNYX_API_KEY,TELNYX_CONNECTION_IDvàTELNYX_PUBLIC_KEY. - Plivo:
plivo.authId,plivo.authTokenvàfromNumber, hoặcPLIVO_AUTH_IDvàPLIVO_AUTH_TOKEN.
Thông tin xác thực phải tồn tại trên máy chủ Gateway. Việc chỉnh sửa hồ sơ shell cục bộ không ảnh hưởng đến Gateway đang chạy cho đến khi Gateway khởi động lại hoặc tải lại môi trường.
Cuộc gọi bắt đầu nhưng Webhook của nhà cung cấp không đến
Xác nhận bảng điều khiển của nhà cung cấp trỏ đến chính xác URL Webhook công khai:
https://voice.example.com/voice/webhookSau đó kiểm tra trạng thái thời gian chạy:
openclaw voicecall status --call-id <id>openclaw voicecall tailopenclaw logs --followCác nguyên nhân thường gặp:
publicUrltrỏ đến đường dẫn khác vớiserve.path.- URL đường hầm đã thay đổi sau khi Gateway khởi động.
- Proxy chuyển tiếp yêu cầu nhưng loại bỏ hoặc ghi lại các tiêu đề máy chủ/giao thức.
- Tường lửa hoặc DNS định tuyến tên máy chủ công khai đến nơi khác thay vì Gateway.
- Gateway đã được khởi động lại mà không bật Plugin Voice Call.
Khi có proxy ngược hoặc đường hầm phía trước Gateway, hãy đặt
webhookSecurity.allowedHosts thành tên máy chủ công khai, hoặc dùng
webhookSecurity.trustedProxyIPs cho địa chỉ proxy đã biết. Chỉ dùng
webhookSecurity.trustForwardingHeaders khi ranh giới proxy
nằm dưới sự kiểm soát của bạn.
Xác minh chữ ký thất bại
Chữ ký của nhà cung cấp được kiểm tra dựa trên URL công khai mà OpenClaw dựng lại từ yêu cầu đến. Nếu xác minh chữ ký thất bại:
- Xác nhận URL Webhook của nhà cung cấp khớp chính xác với
publicUrl, bao gồm giao thức, máy chủ và đường dẫn. - Đối với URL ngrok gói miễn phí, hãy cập nhật
publicUrlkhi tên máy chủ của đường hầm thay đổi. - Đảm bảo proxy giữ nguyên các tiêu đề máy chủ và giao thức ban đầu, hoặc cấu hình
webhookSecurity.allowedHosts. - Không bật
skipSignatureVerificationngoài môi trường kiểm thử cục bộ.
Tham gia Google Meet qua Twilio thất bại
Google Meet dùng Plugin này để tham gia bằng cách quay số qua Twilio. Trước tiên, hãy xác minh Voice Call:
openclaw voicecall setupopenclaw voicecall smoke --to "+15555550123"Sau đó xác minh rõ ràng phương thức truyền tải Google Meet:
openclaw googlemeet setup --transport twilioNếu Voice Call hoạt động bình thường nhưng người tham gia Meet không bao giờ vào được, hãy kiểm tra số
quay vào Meet, mã PIN và --dtmf-sequence. Cuộc gọi điện thoại có thể hoạt động bình thường
trong khi cuộc họp từ chối hoặc bỏ qua chuỗi DTMF không chính xác.
Google Meet khởi động chặng điện thoại Twilio thông qua voicecall.start với
chuỗi DTMF trước khi kết nối. Các chuỗi được tạo từ mã PIN bao gồm
voiceCall.dtmfDelayMs của Plugin Google Meet (mặc định 12000 ms) dưới dạng các chữ số chờ
Twilio ở đầu, vì lời nhắc quay số vào Meet có thể xuất hiện muộn. Sau đó, Voice Call
chuyển hướng trở lại xử lý thời gian thực trước khi yêu cầu lời chào mở đầu.
Dùng openclaw logs --follow để theo dõi trực tiếp các giai đoạn. Một lần tham gia Meet qua Twilio
thành công sẽ ghi nhật ký theo thứ tự sau:
- Google Meet ủy quyền việc tham gia qua Twilio cho Voice Call.
- Voice Call lưu TwiML DTMF trước khi kết nối.
- TwiML ban đầu của Twilio được xử lý và phân phối trước khi xử lý thời gian thực.
- Voice Call phân phối TwiML thời gian thực cho cuộc gọi Twilio.
- Google Meet yêu cầu phát lời giới thiệu bằng
voicecall.speaksau khoảng trễ hậu DTMF.
openclaw voicecall tail vẫn hiển thị các bản ghi cuộc gọi được lưu trữ; hữu ích để xem
trạng thái cuộc gọi và bản chép lời, nhưng không phải mọi chuyển đổi Webhook/thời gian thực
đều xuất hiện ở đó.
Cuộc gọi thời gian thực không có tiếng nói
Xác nhận chỉ bật một chế độ âm thanh: realtime.enabled và
streaming.enabled không thể cùng có giá trị true.
Đối với cuộc gọi Twilio/Telnyx thời gian thực, cũng cần xác minh:
- Một Plugin nhà cung cấp thời gian thực đã được tải và đăng ký.
realtime.providerchưa được đặt hoặc chỉ định một nhà cung cấp đã đăng ký.- Khóa API của nhà cung cấp khả dụng cho tiến trình Gateway.
openclaw logs --followcho thấy TwiML thời gian thực đã được phân phối, cầu nối thời gian thực đã khởi động và lời chào ban đầu đã được đưa vào hàng đợi.