音声とスマートデバイス
より自然な人と機械の対話を探る。
ひと言で、人の意図とデバイスの連携した応答をつなぐ。
家庭、オフィス、車載のデバイスはそれぞれ操作方法が異なり、ユーザーはさまざまなコマンドや操作の流れを覚える必要があります。続けての指示、あいまいな表現、複数のデバイスにまたがるタスクでは、従来の操作方法では文脈を十分に理解できず、デバイス間の体験も分断されがちでした。
元鋳は Yuan MetaCore-K3 で自然言語理解と文脈推論の基盤を提供し、YZ MIX-5A で音声対話とデバイス制御のためのインテリジェントアプリを構成し、Yuan Agent-Turbo のタスク計画とエージェント協働の力で、ユーザーの意図から多段階のタスク実行までをつなぐ対話のかたちを探ります。
音声認識、音声合成、デバイスのインターフェース、シーンのルールを接続すると、システムはユーザーの指示を解釈し、タスクの手順を判断して、適切な操作リクエストを対応するデバイスに送ります。ドアロック、車両、産業機器などの高リスクな操作では、本人確認、権限チェック、再確認を行います。
ユーザーはより自然な言葉で要望を伝え、システムは文脈とデバイスの能力に応じて応答を組み立てます。接続済みで許可されたデバイスでは、複数の操作を設定したルールに従って連携して完了でき、対話がより途切れのないものになります。
ひとつのシナリオを最初から最後まで
- 音声入力音声認識でユーザーの指示を取得し、周囲の雑音や音声入力を処理します。
- 意図の理解Yuan MetaCore-K3 が自然言語、文脈、タスクの目標の理解を助け、ユーザーが行いたい操作を明確にします。
- 計画と割り当てYuan Agent-Turbo が多段階のタスクを組み立て、YZ MIX-5A の入り口とデバイスのインターフェースを通じて実行手順を配置します。
- デバイスの応答とフィードバック権限と安全のルールの範囲内でデバイスの機能を呼び出し、音声などで実行結果を伝えます。