社区 (Discord) | 文档 | 控制台

  vocode

在几分钟内构建基于语音的 LLM 应用

Vocode 是一个开源库，旨在简化基于语音的 LLM 应用构建过程。使用 Vocode，你可以构建与 LLM 进行实时流式对话的应用，并将其部署到电话呼叫、Zoom 会议等场景中。你还可以构建个人助理或语音驱动的国际象棋等应用。Vocode 提供了便捷的抽象层和集成方式，让你所需的一切功能都能在同一个库中实现。

我们正在积极寻找社区维护者，如果你有兴趣，欢迎联系我们！

⭐️ 功能特性

• 🗣 通过系统音频开启对话
• ➡️ 📞 设置一个由 LLM Agent 响应的电话号码
• 📞 ➡️ 使用 LLM Agent 从你的电话号码发起呼出电话
• 🧑‍💻 拨入 Zoom 会议
• 🤖 在 Langchain Agent 中拨打真实电话号码
• 开箱即用的集成支持：
  • 语音转文字（Transcription）服务，包括：
    • AssemblyAI
    • Deepgram
    • Gladia
    • Google Cloud
    • Microsoft Azure
    • RevAI
    • Whisper
    • Whisper.cpp
  • LLM，包括：
    • OpenAI
    • Anthropic
  • 语音合成（Synthesis）服务，包括：
    • Rime.ai
    • Microsoft Azure
    • Google Cloud
    • Play.ht
    • Eleven Labs
    • Cartesia
    • Coqui (OSS)
    • gTTS
    • StreamElements
    • Bark
    • AWS Polly

查看我们的 React SDK 请点击此处！

🫂 贡献与路线图

我们是一个开源项目，非常欢迎开发者贡献新功能、集成方案和文档！请随时联系我们，一起开始构建吧。

有关贡献的更多信息，请参阅我们的 贡献指南。

同时欢迎查看我们的 路线图。

我们非常期待在 Discord 上与你探讨新想法和贡献事宜！

🚀 快速入门

pip install vocode

import asyncio
import signal

from pydantic_settings import BaseSettings, SettingsConfigDict

from vocode.helpers import create_streaming_microphone_input_and_speaker_output
from vocode.logging import configure_pretty_logging
from vocode.streaming.agent.chat_gpt_agent import ChatGPTAgent
from vocode.streaming.models.agent import ChatGPTAgentConfig
from vocode.streaming.models.message import BaseMessage
from vocode.streaming.models.synthesizer import AzureSynthesizerConfig
from vocode.streaming.models.transcriber import (
    DeepgramTranscriberConfig,
    PunctuationEndpointingConfig,
)
from vocode.streaming.streaming_conversation import StreamingConversation
from vocode.streaming.synthesizer.azure_synthesizer import AzureSynthesizer
from vocode.streaming.transcriber.deepgram_transcriber import DeepgramTranscriber

configure_pretty_logging()


class Settings(BaseSettings):
    """
    Settings for the streaming conversation quickstart.
    These parameters can be configured with environment variables.
    """

    openai_api_key: str = "ENTER_YOUR_OPENAI_API_KEY_HERE"
    azure_speec