ten-framework
開放原始碼的對話式語音AI代理框架
ten-framework 是什麼?
開放原始碼的對話式語音AI代理框架。類別:AI、音訊工具。授權:未聲明。
ten-framework 概覽
這是什麼
TEN 是一個開源的即時多模態對話式 AI 框架,專為建構對話式語音 AI 代理而設計。TEN 生態系統包含 TEN Framework、Agent Examples、VAD、Turn Detection 與 Portal。
主要功能
- 即時多模態對話式 AI 框架
- 支援 RTC 與 WebSocket 連線
- 可透過 Memory、VAD、Turn Detection 等擴充功能延伸
- 內建多種代理範例:多功能語音助理、塗鴉板、說話者辨識、嘴型同步虛擬角色、SIP 通話與語音轉文字
- 可在 Espressif ESP32-S3 Korvo V3 開發板上執行
- 提供 TMAN Designer 自訂代理範例
- 支援 Docker 與其他雲端服務(Vercel、Netlify 等)部署
使用情境
- 建構低延遲、高品質的即時語音助理
- 將語音提示轉換為手繪草圖的互動塗鴉板
- 即時說話者辨識與標記
- 支援多廠商的嘴型同步虛擬角色
- 透過 TEN 驅動的 SIP 電話通話
- 音訊轉文字工具
- 將 LLM 驅動的通訊整合至硬體(ESP32-S3)
快速開始
請參閱儲存庫 README 以取得詳細的先決條件與設定說明。快速開始步驟包含複製儲存庫、設定環境變數(Agora App ID、OpenAI API 金鑰、Deepgram ASR、ElevenLabs TTS),並執行 Docker Compose。
cd ai_agents
cp ./.env.example ./.env
docker compose up -d
docker exec -it ten_agent_dev bash
cd agents/examples/voice-assistant
task install
task run
授權與價格
授權條款未明確說明(NOASSERTION)。此專案標示為開源,定價類型為「open_source」。
內容整理自該專案公開的 README 與儲存庫資訊。