Research
Computer Graphics
研究テーマ
CGコンテンツ制作パイプラインの革新
チームのミッション
Computer Graphics (CG)チームでは、多彩な広告コンテンツの効率的な制作支援やメタバース空間での店舗開発・運営等に資する研究開発を進めています。最新のCG技術を用いることにより、実写と区別がつかないレベルの画像・映像コンテンツを作成することが可能となっています。一方で、広告コンテンツの制作では、映像業界と異なり短い制作期間で多くのバリエーションのコンテンツを作成することが求められます。これを実現するためには、一般的なCGパイプラインの改善のみならず、機械学習を用いた新たなワークフローの構築が必要となります。CGチームでは、モデリング、アニメーション、画像・映像生成などのタスクに深層学習による支援を加えることで、コンテンツの作り方そのものに変革を起こすことにチャレンジしています。
プロジェクト
日本人顔の3次元パラメトリックモデルの構築と応用
フォトリアルな3次元顔モデルを効率的に生成することを目的に、独自にスキャンした日本人の3次元顔データからパラメトリックモデル(3D Morphable Model; 3DMM)を作成し、単一画像からの3D顔モデルの復元の研究を行っています。また、3DMMを利用した人物映像の生成などにも取り組んでいます。
研究領域
Computer Graphics / NeRF / 3D Morphable Model
所属メンバー
論文一覧
-
深層学習による二次元・三次元化粧表現の研究と応用
コンピュータビジョン
JFACE Annual Conference (Forum Kaogaku) 2025
-
動画におけるアイデンティティを保持したメイク転写手法
コンピュータビジョン
JFACE Annual Conference (Forum Kaogaku) 2025
-
A Diffusion-Based Framework for Human-Object Interaction Synthesis via Pose-Grasp Decoupling
コンピュータビジョン
VC2025
-
Neural Multi-View Self-Calibrated Photometric Stereo without Photometric Stereo Cues
コンピュータビジョン
ICCV2025
-
FreeUV: Ground-Truth-Free Realistic Facial UV Texture Recovery via Cross-Assembly Inference Strategy
コンピュータビジョン
CVPR2025
-
V-PartSwap: Motion-Consistent Facial Part Transfer in Videos via Alignment-Aware Diffusion
コンピュータビジョン
CVPRW 2026
-
KaoLRM: Repurposing Pre-trained Large Reconstruction Models for Parametric 3D Face Reconstruction
コンピュータビジョン
3DV2026
-
DeMapGS: Simultaneous Mesh Deformation and Surface Attribute Mapping via Gaussian Splatting
コンピュータビジョン
SIGGRAPH Asia 2025
-
Structured Gaussian Splatting via Surface Deformation
コンピュータビジョン
MIRU2025
-
FreeEyeglass: Training-free and Mask-free Eyeglass Transfer for Facial Videos
コンピュータビジョン
MIRU2025
-
TANGO: Co-Speech Gesture Video Reenactment with Hierarchical Audio Motion Embedding and Diffusion Interpolation
コンピュータビジョン
ICLR2025
-
ShadowSG: Spherical Gaussian Illumination from Shadows
コンピュータビジョン
3DV2025
-
BeautyBank: Encoding Facial Makeup in Latent Space
コンピュータビジョン
WACV2025
-
BeautyBank: Encoding Facial Makeup in a Latent Space for Enhanced Makeup Applications
コンピュータビジョン
VC2024
-
多視点動画からの一貫した三次元顔メッシュ生成手法の検証と性能改善の検討
コンピュータビジョン
MIRU2024
-
SynthMakeup: A Large-Scale Photo-Realistic Synthetic Makeup Dataset
コンピュータビジョン
MIRU2024
-
Spherical Gaussian Illumination from a Single Image via Shadow Clues
コンピュータビジョン
MIRU2024
-
VideoMotionGraph++: Co-Speech Gesture Video Reenactment with Blending Diffusion Model and Neural Rhythm Embedding
コンピュータビジョン
MIRU2024
-
Makeup Prior Models for 3D Facial Makeup Estimation and Applications
コンピュータビジョン
CVPR 2024
-
SuperNormal: Neural Surface Reconstruction via Multi-View Normal Integration
コンピュータビジョン
CVPR 2024
-
Refinement of Hair Geometry by Strand Integration
Graphics
Computer Graphics Forum (PG2023)
-
Mode-Decomposed Neural Radiance Field for Motion Synthesis
Graphics
Visual Computing 2023
-
連続的パラメータによる顔画像の化粧制御
Graphics
Visual Computing 2023
-
BlendFace: Re-designing Identity Encoders for Face-Swapping
Graphics
ICCV 2023
-
Refinement of Hair Geometry by Strand Integration
コンピュータグラフィックス
MIRU 2023
-
顔交換のためのアイデンティティエンコーダの再考
コンピュータグラフィックス
MIRU 2023
-
Garment Model Extraction from Clothed Mannequin Scan
コンピュータグラフィックス
Computer Graphics Forum
-
Makeup Extraction of 3D Representation via Illumination-Aware Image Decomposition
コンピュータグラフィックス
Computer Graphics Forum (Eurographics2023)
-
BareSkinNet: De-makeup and De-lighting via 3D Face Reconstruction
Graphics
Computer Graphics Forum (PG2022)
-
Context-based style transfer of tokenized gestures
Graphics
Computer Graphics Forum (SCA2022)
-
Compatible intrinsic triangulations
Graphics
ACM Transactions on Graphics (SIGGRAPH2022), Vol. 41, No. 4, July 2022.
-
Specular, Roughness, Normalを含めた3DMMの構築と顔画像へのフィッティングの試み
Graphics
VC+VCC2021 Poster
-
高精細な三次元顔モデル生成のためのメイクおよび照明の除去
Graphics
VC+VCC2021 Poster
-
動画生成のための三次元顔変形モデル
Graphics
Visual Computing 2020, Short Paper