AI Lab

Research

  Interactive Agent

Interactive Agent

研究テーマ

対話エージェント 自動対話技術 HCI

チームミッション

HCI（ヒューマン・コンピュータ・インタラクション）の実応用を目指した研究開発に取り組んでいます。その中でも特に、デジタルマーケティングにおける次世代の広告媒体として、「ヒトが信頼したくなる対話エージェント」による接客対話技術に関する応用研究を中心に進めています。自律型・遠隔型の接客対話エージェントの研究、マルチモーダル対話基盤の開発、ユーザの状態推定、新しい広告・接客メディアの発明、AIと人間のインタラクションの理解・設計・評価、などの複合的な領域の研究に挑戦しています。実際の店舗などのフィールドでの実証実験を通して、人々のリアルな反応やフィードバックから、ヒトが心から信頼したくなる・ヒトが行動を変えてしまうインタラクションの本質的な要素について研究しています。
Interactive Agentでは、2017年4月に開設した大阪大学との先端知能システム共同研究講座を中心に、学術貢献を主目的とするAgent Researchと、社会実装を主目的とするAgent Developmentの2チームによって構成されています。2つのチームが密にコミュニケーションを取りながら研究開発を進めることで、社会に価値をもたらす研究成果を創出することを目指しています。

研究チームでは現在、大きく3つの方針に沿った研究開発を実施しています。
・自律対話エージェントを用いた社会実装のための技術発明
・新しい広告・接客メディアの発明
・AIと人間のインタラクションの理解・設計・評価
 

 

研究プロジェクト例

 

 

顧客対話AI：EscortAI

企業が顧客との対話で使える顧客対話AIの研究開発を進めています。店舗やSNSなどサービス空間で顧客が従業員との対話を強く求めるのは「顧客が不安定な心理状況に置かれている時」です。どう進めればよいか分からない、自分で解決しようとするができない、よくわからないので利用しない、という状況こそ、「その人の事情の理解・配慮」と「その事情に適した手続きの提供」が必要です。そのために、映像や音声から様々な方々の事情を高速にセンシングする技術、不安でいっぱいの顧客を待たせないように高速に応答する技術、大量センシング情報から今行うべき行動の決定をする技術に取り組み、そうした技術を入れた「Escort AI」 プラットフォーム開発に取り組んでいます。
 

 

 

 

接客インタラクションデータ基盤：EscortAI Dataset

実世界の接客・案内シーンを対象に、接客AIの学習・評価に使えるインタラクションデータ基盤「EscortAI Dataset」の構築を進めています。実空間では、雑音、複数話者、割り込み、無視、離脱などの想定外が重なるため、統制環境のデータだけでは現場で頼れる接客AIの実現は困難です。そこで、人と対話エージェント（ロボット／端末／アバター等）のやりとりを、映像・音声・操作ログなどを含む形で整備し、音声認識、感情・状態理解、非言語行動認識、対話戦略学習など、接客AIを支える幅広い研究開発に活用できるデータセットづくりに取り組んでいます。 


 

 

自己推薦ロボット

自己推薦ロボットは、販売促進や商品認知に繋がる全く新しいプロモーション手法として開発されました。当社はこれまで、デジタルサイネージやアプリを活用したリテールメディアの構築をはじめ、小売企業のDXを支援し、デジタルマーケティングの知見を活かした店舗集客や販売促進施策に注力してまいりました。
実証実験では、スーパーマーケット、ドラッグストア、コンビニエンスストア、大型雑貨店など、さまざまな店舗で実施され、幅広い種類の商品を対象に行われました。その結果、来店客の立ち止まり率が2.14倍、販売率が6.67倍増加した事例や、棚前の滞在時間が1.22倍、商品の手に取り率が1.81倍増加し、販売率が2.37倍に増加した事例が確認され、効果と有効性が証明されています。

 

 

新しい広告・接客メディアの発明

広告メディアの課題を解決するためには、消費者の購買行動を理解し、それに基づいた最適なメディアを開発することが求められます。この課題に取り組むため、私たちは新しい広告メディアの研究を進めています。 これまでに、エージェントを搭載したショッピングカートや、文字やイラストが物理的に消滅・出現する「Popping Up Poster」といったシステムを提案し、実店舗での検証も行ってきました。また、2024年から商品棚の値札部分に設置するシェルフサイネージにエージェントを登場させ、様々な商品を推薦する「Tag Beans」の開発にも取り組んでいます。今後は、これらの消費者行動データの蓄積・分析を進めながら、さらに新しい広告メディアの可能性を探求していきます。

 

 

 

AIと人間のインタラクション理解・設計・評価

AIとユーザがインタラクションを行う状況の理解、設計、および評価の研究を行います。具体的には、AIが実社会において持続的に・人間中心的に活用されることに焦点を置き、そのための幅広い現象の理解・評価と、理解に基づく応用提案の研究に取り組んでいます。特に、対話エージェントや、LLMを含む生成AIを活用したUIなどのインタラクティブなシステムを対象とし、技術をより有用で・使いやすく・望ましいものにするためのユーザ中心設計の提案から、既存のインタラクティブシステムを対象としたユーザ体験の多角的な評価、インタラクションのコンテクストやユーザを理解することに主眼を置いた質的研究まで、幅広い対象・アプローチの研究に取り組んでいます。

研究領域

HCI / HRI / インタラクション / 対話システム / 機械学習 / 画像処理 / 自然言語処理

所属メンバー

馬場 惇

Jun Baba

研究領域: Human Computer Interaction

詳細を見る

岡藤 勇希

Yuki Okafuji

研究領域: Human Robot Interaction、ヒューマンモデリング

詳細を見る

岩本 拓也

Takuya Iwamoto

研究領域: Human Computer Interaction

詳細を見る

宋 思超

Song Sichao

研究領域: Human Computer Interaction、Human Robot Interaction

詳細を見る

兵頭 亮哉

Hyodo Katsuya

研究領域: MLモデルチューニング、EdgeAI

詳細を見る

小川 奈美

Nami Ogawa

研究領域: Virtual Reality, Human Computer Interaction

詳細を見る

髙橋 茂樹

Shigeki Takahashi

研究領域: Computer Vision

詳細を見る

大平 義輝

Ohira Yoshiki

研究領域: Human Computer Interaction

詳細を見る

星牟禮 健也

Kenya Hoshimure

研究領域: Human Computer Interaction、Human Interface

詳細を見る

三好 遼

Ryo Miyoshi

研究領域: Computer Vision、Human Sensing

詳細を見る

田中 康二郎

Tanaka Kojiro

研究領域: Human-Computer Interaction

詳細を見る

論文一覧

Contact