ElevenLabs

OpenClaw ใช้ ElevenLabs สำหรับการแปลงข้อความเป็นเสียง การแปลงเสียงเป็นข้อความแบบแบตช์ด้วย Scribe v2 และ STT แบบสตรีมมิงด้วย Scribe v2 Realtime โดย Plugin นี้รวมมาให้แล้วและ เปิดใช้งานเป็นค่าเริ่มต้น จึงไม่จำเป็นต้องมีขั้นตอน plugins install

การยืนยันตัวตน

ตั้งค่า ELEVENLABS_API_KEY ในสภาพแวดล้อม นอกจากนี้ยังรองรับ XI_API_KEY เพื่อ ให้เข้ากันได้กับเครื่องมือ ElevenLabs ที่มีอยู่

export ELEVENLABS_API_KEY="..."

การแปลงข้อความเป็นเสียง

{  messages: {    tts: {      providers: {        elevenlabs: {          apiKey: "${ELEVENLABS_API_KEY}",          voiceId: "pMsXgVXv3BLzUgSXRplE",          modelId: "eleven_multilingual_v2",        },      },    },  },}

ตั้งค่า modelId เป็น eleven_v3 เพื่อใช้ TTS ของ ElevenLabs v3 โดย OpenClaw ยังคงใช้ eleven_multilingual_v2 เป็นค่าเริ่มต้นสำหรับการติดตั้งที่มีอยู่

ช่องเสียงของ Discord ใช้ปลายทาง TTS แบบสตรีมมิงของ ElevenLabs เมื่อเลือก ElevenLabs เป็นผู้ให้บริการ voice.tts/messages.tts โดยการเล่นจะเริ่มจากสตรีมเสียงที่ส่งกลับมา แทนที่จะรอให้ OpenClaw ดาวน์โหลดไฟล์เสียงทั้งหมดก่อน latencyTier จะเชื่อมโยงกับ พารามิเตอร์คำขอ optimize_streaming_latency ของ ElevenLabs สำหรับโมเดลที่รองรับ โดย OpenClaw จะละพารามิเตอร์ดังกล่าวสำหรับ eleven_v3 ซึ่งไม่ยอมรับพารามิเตอร์นี้

การแปลงเสียงเป็นข้อความ

ใช้ Scribe v2 สำหรับไฟล์เสียงแนบขาเข้าและช่วงเสียงที่บันทึกไว้แบบสั้น:

{  tools: {    media: {      audio: {        enabled: true,        models: [{ provider: "elevenlabs", model: "scribe_v2" }],      },    },  },}

OpenClaw ส่งเสียงแบบหลายส่วนไปยัง /v1/speech-to-text ของ ElevenLabs พร้อม model_id: "scribe_v2" คำใบ้ภาษาจะเชื่อมโยงกับ language_code เมื่อมีการระบุ

STT แบบสตรีมมิง

Plugin elevenlabs ที่รวมมาให้จะลงทะเบียน Scribe v2 Realtime สำหรับ Voice Call และ การถอดเสียงแบบสตรีมมิงในโหมดเอเจนต์ของ Google Meet

{  plugins: {    entries: {      "voice-call": {        config: {          streaming: {            enabled: true,            provider: "elevenlabs",            providers: {              elevenlabs: {                apiKey: "${ELEVENLABS_API_KEY}",                audioFormat: "ulaw_8000",                commitStrategy: "vad",                languageCode: "en",              },            },          },        },      },    },  },}

สำหรับโหมดเอเจนต์ของ Google Meet ให้ตั้งค่า plugins.entries.google-meet.config.realtime.transcriptionProvider เป็น "elevenlabs" และกำหนดค่าบล็อกผู้ให้บริการเดียวกันภายใต้ plugins.entries.google-meet.config.realtime.providers.elevenlabs

เนื้อหาที่เกี่ยวข้อง

• การแปลงข้อความเป็นเสียง
• Google Meet
• การเลือกโมเดล