Research
Activity Understanding
研究テーマ
実世界AIサービスのための人物行動理解とロボティクス
チームミッション
Activity Understandingチームでは、実世界においてAIサービスを実現するための基盤研究に取り組みます。
小売や調剤など実世界が現場となる領域でAIを活用するためには、複雑に変化する環境の中で人々の多様な行動を計測・理解し、AIによって生成された情報を適切に伝達する技術が必要です。また、人々の日常生活と密接に関わる技術は、個人とそのプライバシーを尊重し、社会的に受け入れられる形であることが不可欠です。本チームは機械学習やコンピュータビジョン、ロボティクス、ユビキタスコンピューティングなど複数分野からの多角的なアプローチによって、このような技術の創出と実世界AIサービスへの還元を目指します。
プロジェクト
マルチモーダルセンシングによる人物行動理解と支援
動画や音声、テキストといったデータだけでなく、スマートフォンIMUやBLEビーコンといった各種デバイス・センサ、さらにはオンライン上での行動ログやシミュレーションを活用し、実世界における複雑な人物の行動を計測、理解、支援できる技術を研究しています。
- AI Lab、「ACM ISWC」に小売実店舗向け動線推定システムに関する論文が採択
- AI Labの米谷竜らが、ISWC2024 Notes and Briefsにて「Best Paper Honorable Mention」を受賞
- AI Lab、「INLG」に小売実店舗向け動線文章化システムに関する論文が採択
- AILab、データマイニング分野におけるトップカンファレンス「CIKM 2024」にて主著論文採択
センシング技術とLLMを活用した自律移動ロボット
LLMを活用した自律移動ロボットによる情報提示・インタラクション技術、販促活動に適した環境理解・ナビゲーション技術を研究しています。
研究領域
機械学習 / コンピュータビジョン / ロボティクス / ユビキタスコンピューティング / ハプティクス
所属メンバー
論文一覧
-
SkeletonChain: 時系列骨格情報を通じたモダリティ共通文埋め込みのマルチモーダル学習
ヒューマンセンシング
MIRU 2024
-
オプトインカメラ:UWBデバイスを用いた位置推定に基づく映像中の人物同定とオプトインシステムへの応用
ヒューマンセンシング
MIRU 2024
-
Flashback機構を用いたTransformersとMambaのメモリ効率化と高速化
自然言語処理
MIRU 2024
-
Text2Traj2Text: Learning-by-Synthesis Framework for Contextual Captioning of Human Movement Trajectories
大規模言語モデル
INLG 2024
-
CXSimulator: A User Behavior Simulation using Large Language Models for Web-Marketing Campaign Assessment
大規模言語モデル
CIKM 2024
-
RetailOpt: Opt-In, Easy-to-Deploy Trajectory Estimation from Smartphone Motion Data and Retail Facility Information
ヒューマンセンシング
ISWC 2024
-
Path Planning using Language-Guided Probabilistic Roadmaps
ロボティクス
MIRU 2024
-
Text2Traj2Text: 大規模言語モデルを活用した段階的データ生成に基づく人物移動軌跡の言語化
自然言語処理
言語処理学会 第30回年次大会
-
フロアプラン情報を手掛かりとした最適化に基づくNeural Inertial Localization
ヒューマンセンシング
MIRU 2023