実画像をベースとした表情を伴う３次元顔画像生成
著者
向川康博…岡山大学工学部情報工学科
中村裕一…筑波大学電子情報工学系
大田友一…筑波大学電子情報工学系
アブストラクト
本稿では，様々な表情を伴う顔を対象とし，３次元的な見え方の変化を再現す
る画像生成法について提案する．頭部の３次元形状や表情変化のモデル化を行
うことなく，任意方向・任意表情における顔表面上の特徴点座標を算出し，複
数の入力画像から得られるテクスチャを適切にマッピングすることで画像を生
成する．モデルを利用せず，実画像をベースとすることで，画像から得られる
情報を活用し，自然な顔画像が生成できる．また，顔の３次元的な見え方の変
化と表情変化は，それぞれ剛体の回転と非剛体の変形という全く異なる要因か
ら起こるため，従来は別々に扱われてきた．しかし，本手法では，両者を同じ
枠組みで統一的に扱うことが可能となる．
キーワード：顔画像、３次元画像生成、表情生成、実画像ベース
Image-Based 3-D Facial View Synthesis with Facial Expressions
Author
Yasuhiro MUKAIGAWA (Okayama University)
Yuichi NAKAMURA (University of Tsukuba)
Yuichi OHTA (University of Tsukuba)
Abstract
We propose a method for facial view synthesis which can reproduce 3-D
rotation accompanied by the facial expression. In this method, the
coordinates of the feature points in an arbitrary facial pose and
expression can be calculated without the 3-D model of facial shape and
expression. Facial images are synthesized by mapping the blended
texture from multiple input images. The image-based rendering makes
full use of actual images, so very natural facial images can be
synthesized. Because the 3-D rotation and the facial expression are
respectiely due to the rotation of rigid body and the deformation of
non-rigid body, they have been treated separately. But both poses and
expressions can be treated in a same way together by our method.
Keywords: facial image, 3-D image synthesis, facial expression,
image based rendering
論文構成