깊은 3차원 CNN을 위한 채널, 공간, 시간 차원 분리 3차원 컨볼루션

Abstract

최근 영상 처리 분야에서도, 이미지 처리 분야에서와 마찬가지로, 딥러닝을 활발히 활용하고 있다. 2D 컨볼 루션 기반의 CNN을 주로 활용하는 이미지 처리 분야와 달리, 영상 처리에서는 추가적인 시간 차원 정보를 추출하기 위해, 3D 컨볼루션 기반의 CNN이 요구된다. 하지만 3D 컨볼루션의 큰 연산양과 많은 학습 파라 미터 수로 인해, 영상 처리 분야에서는 3D 컨볼루션에 기반한 단일 스트림 CNN을 활용한 연구가 드물다. 하여 본 연구에서는 영상 처리를 위한 새로운 구조의 3D 컨볼루션을 제안한다. 제안하는 3D 컨볼루션을 통해 일반적인 3D 컨볼루션 보다 연산양 및 학습 파라미터의 수를 줄일 수 있을 뿐만 아니라, 기존에 제안된 3D 컨볼루션 보다 더 좋은 성능을 괴할 수 있다. 본 연구에서는 사람 행동 인지, 영상 객체 세그멘테이션 그리고 영상 회화의 세가지 영상 처리 태스크에 대해 제안하는 3D 컨볼루션의 성능 검증을 수행할 것이다.