본 논문에서는 실감 있는 얼굴 표정 생성을 위하여 얼굴 영상 기반의 3차원 모델링 방법을 제안한다. 3차원 얼굴 모델을 각각의 얼굴 영상 평면에 사영하고 사영된 모델을 다시 각각의 영상에 맞도록 변형함으로써 원 모델을 텍스처 매핑에 사용하는 실제 얼굴 구조에 근사한 모델로 변형하여 사용한다. 실감 있는 얼굴 표정 애니메이션 방법으로 근육기반 모델을 사용하는 방법과 Spring-mass-damping (SMD) 모델을 사용하는 방법을 제안한다. SMD 모델 기반의 방법은 얼굴의 피부가 떨리는 모양 등 세밀한 표정의 변화까지 나타낼 수 있다.