earticle

영어

This research proposes a technique for real-time face replacement of a 3D avatar based on a 2D profile picture. By utilizing Blender, a 3D authoring tool, we map the facial mesh of an existing avatar to the feature points of a 2D image and perform rigging to implement natural changes according to facial expression variations. Afterward, the model is exported in FBX format and imported into the Unity game engine to establish a real-time rendering environment. Particularly, we apply a material matching technique to accurately represent the texture and color of the facial skin, resulting in a realistic avatar. This research suggests the possibility of generating avatars with a wider variety of facial features through integration with image generation models and is expected to contribute to the advancement of personalized avatar generation technology in metaverse environments.

한국어

본 연구는 2차원 증명사진을 기반으로 3차원 아바타의 얼굴을 실시간으로 교체하는 기술을 제안한다. 3D 저작 도구인 블렌더를 활용하여 기존 아바타의 얼굴 메쉬를 2차원 이미지의 특징점과 매핑하고, 얼굴 표정 변형에 따른 자연스러운 변화를 구현하기 위해 리깅(rigging) 작업을 수행한다. 이후 FBX 형식으로 모델을 export하여 유니티 게임 엔진으로 가져와 실시간 렌더링 환경을 구축한다. 특히, 얼굴 피부의 질감과 색상을 정확하게 표현하 기 위해 머티리얼 매칭 기법을 적용하여 현실감 있는 아바타를 생성한다. 본 연구는 이미지 생성 모델과의 연동을 통해 더욱 다양한 얼굴 특징을 가진 아바타 생성 가능성을 제시하며, 메타버스 환경에서의 개인 맞춤형 아바타 생성 기술의 발전에 기여할 것으로 기대된다.