Microsoft Researchは、その状況に応じたインタラクションプロジェクトを使用してスマートバーチャルアシスタントを構築しています

読書時間アイコン 3分。読んだ

カレンダーアイコン上で公開 2014 年 4 月 9 日

上の公表 2014 年 4 月 9 日

読者は MSpoweruser のサポートを支援します。私たちのリンクを通じて購入すると、手数料が発生する場合があります。

Windows Phone 8.1でCortanaデジタルアシスタントを試すのを待っている間、Microsoft Researchは、他の人とのやり取りなど、実際の作業を処理できる仮想アシスタントに取り組んでいます。 MicrosoftResearchの長期的な目標 状況に応じた相互作用 プロジェクトは、日常のタスク、アクティビティ、コラボレーションの自然な流れに相互作用と計算を深く組み込む新世代のインタラクティブシステムを可能にすることです。シナリオの例には、人間とロボットの相互作用、e-home、インタラクティブな看板、複雑なタスクや手順を通じて専門家のチームを監視、支援、調整するシステムなどが含まれます。

このようなアシスタントは、他の人のアシスタントと調整して、社会的関与、仕事への取り組み、および旅行のスケジュールを立てるのに役立ちます。食事を楽しんだ場所など、過去の活動に基づいてニーズを予測し、特別な取引を提供する企業と調整することができます。それはあなたがあなたの友人が好きなものに基づいて映画を選ぶのを助けるかもしれません。

「人々を支援し補完するインテリジェントで支援的なアシスタントは、コンピューターサイエンスの重要な願望です」と、Horvitz氏は言います。この役割を果たすことができるシステムを開発します。」

Microsoftの現在のMonicaVirtual Assistantには、次の対話機能があります。

基本的な相互作用：システムとの基本的な単一参加者の相互作用を示しています。シーン分析のさまざまなレイヤー（システムはユーザーの顔とポーズを追跡し、衣服、所属、タスクの目標などに関する情報を推測します）と自然なエンゲージメントモデル（ユーザーが近づくとシステムがエンゲージします）に注目してください。

シーンの推論と接地：システムはシーン分析からユーザーの目標を推測します（ユーザーはフォーマルな服装をしているため、外部にいる可能性が高いため、登録が必要です）が、ダイアログを通じてこの情報を根拠としています。建物番号の接地にも注意してください。

注意のモデリングとエンゲージメント：システムは（顔検出器とポーズトラッカーからの情報を使用して）ユーザーの注意を監視し、それに応じてユーザーを引き付けます。

並んで待っている人の扱い：システムはシーン内の複数のユーザーを監視し、待機中のユーザーの存在を一目で確認し（赤い点はシステムの視線を示します）、会話の終わりに向かって一時的にユーザーを関与させます

リエンゲージメント：上記と同じですが、システムが元に戻ったときに最初のユーザーが注意を払っていないということだけです。人が並んで待っていることを知って、システムはユーザーの注意を引き、「すみません！」と言って再エンゲージします。

複数参加者ダイアログ：システムは、XNUMX人の参加者が一緒にグループに属していることをシーンから推測します（そしてダイアログを通じて確認します）。その後、システムは複数の参加者による会話を続けます。話している参加者が誰であるかによる情報である視線モデル（赤い点）と、談話構造の特定の要素に注目してください。

サイドカンバセーションを伴う複数参加者ダイアログ：前のインタラクションと同様。最後に、ユーザーはサイドカンバセーションを行います。システムは、発話がそれに宛てられていないことを理解し、しばらくすると、XNUMX人のユーザーがシャトル情報を伝達するのを中断します。音声認識が失敗した場合のフォールバックとして使用されるタッチスクリーンの相互作用にも注意してください。

待機している第三者との複数参加者ダイアログ：これは、XNUMX人のユーザーのグループと対話しているときに、システムが待機中の参加者をどのように処理するかも示しています。

このプロジェクトの詳細については、マイクロソフトリサーチ.

トピックの詳細: マイクロソフト, 研究, ロボット, 状況に応じた相互作用, スマート, 仮想アシスタント

プラディープ・ヴィスワフ

ソフトウェアおよびサービスの専門家

Pradeep はコンピュータサイエンスとエンジニアリングの卒業生です。彼はマイクロソフトの学生パートナーでもありました。現在は大手IT企業に勤務。

コメントを残す