Volcano Engine Speech Services
Volcano Engine Real-Time Conversational AI は、RTC 音声／映像伝送、ASR 音声認識、TTS 音声合成などのコア機能を提供します。開発者は CustomLLM モードを通じて独自の AI バックエンドを統合し、音声駆動のインテリジェントな対話を構築できます。
Volcano Engine Speech Services とは
Volcano Engine Real-Time Conversational AI は、インテリジェントエージェントが「聞く、話す、見る、推論する」ことを可能にするエンドツーエンドの音声対話ソリューションです。AI アシスタント、AI カスタマーサービス、AI コンパニオン、AI 会話学習、インテリジェントハードウェアなどのシナリオに適しています。
コアコンポーネント
RTC（リアルタイム音声・映像）
クライアントとクラウド間の音声および映像伝送を担当します。
- WebRTC プロトコルに基づき、主要ブラウザをサポート
- マルチプラットフォーム SDK：Web（
@volcengine/rtc）、iOS、Android、Windows、Linux、macOS - AI ノイズ抑制（AI-ANS）を内蔵し環境ノイズを除去
- 字幕やステータスなどの構造化データを送信するバイナリメッセージチャネル
- 弱いネットワーク環境でも強いレジリエンスを持ち、複雑な環境下での信頼性の高い伝送を実現
ASR（自動音声認識）
ユーザーの音声をリアルタイムでテキストに変換します。
- ストリーミング認識によるリアルタイム文字起こし
- 中国語、英語、日本語、スペイン語など複数言語対応
- ドメイン固有用語の認識精度向上のためのホットワード設定をサポート
- フレーム単位の Voice Activity Detection（VAD）による正確な発話開始・終了検出
TTS（テキスト読み上げ）
AI が生成したテキスト応答を自然な音声に変換します。
- 低レイテンシのストリーミング合成
- 複数の音声オプション（男性、女性、さまざまなスタイル）
- 話速、ピッチ、音量の調整をサポート
- 感情合成（例：喜び、落ち着き）に対応
LLM（大規模言語モデル）
ユーザーの意図理解と応答生成を担当し、2つの統合モードがあります：
Volcano Ark（ArkV3）
Volcano Engine がホストする大規模言語モデルを利用し、すぐに使用可能です。
- Doubao、Claude、GLM など複数モデルをサポート
- 追加のサービスデプロイ不要
- 自動クラウドスケーリング対応
CustomLLM（カスタムバックエンド）
開発者のカスタムサービスを呼び出して LLM 応答を取得します。
- OpenAI、Qwen、ローカルモデルなど任意の LLM と統合可能
- 対話ロジックを完全に制御可能
- エージェントアーキテクチャやツール呼び出しをサポート
- プライベートナレッジベースの統合も可能
EMQX MCP AI 音声アシスタントは CustomLLM モードを使用し、MCP ツール呼び出しを実現しています。
拡張機能
Volcano Engine Speech Services は以下の拡張機能も提供します：
| 機能 | 説明 |
|---|---|
| インテリジェント割り込み | フルデュプレックス通信により、ユーザーはいつでも AI を割り込み可能で、より自然な対話を実現 |
| ビジュアル理解 | 画像や動画入力をサポートし、AI が視覚コンテンツを「見る」ことと理解を可能にする |
| 関数呼び出し | LLM がユーザーの意図を特定し、外部関数を呼び出すことを可能にする |
| MCP プロトコル対応 | 外部ツールエコシステムへの標準化されたアクセスを提供 |
| リアルタイム字幕 | ASR 結果と LLM 応答をリアルタイムで返却 |
| コンテキスト管理 | ベクトルデータベースを用いた短期・長期メモリをサポート |
詳細な機能説明は Volcano Engine Real-Time Conversational AI ドキュメントをご参照ください。
料金
Volcano Engine Speech Services は使用量に基づいて課金されます。各課金項目には無料トライアル枠が含まれます。詳細は Conversational AI Real-Time Pricingをご覧ください。