본 발명은 소실점뿐 만 아니라 영상 내에 세부적인 선들도 함께 고려함으로써 영상의 깊이 감을 보다 세부적으로 표현할 수 있도록 하는 입체 영상의 깊이 맵 생성 방법 및 장치에 관한 것으로, 상기 방법은 입력 영상내 다수의 에지 픽셀을 밀도 경사 방향 기반으로 그룹화하여 다수의 라인 세그먼트를 생성하는 라인 세그먼트 그룹핑 단계; 상기 다수의 라인 세그먼트를 유사도 기반으로 병합한 후, 병합 결과를 고려하여 적어도 하나의 소실점을 검출하는 소실점 검출 단계; 및 라인 세그먼트와 소실점간 상관 관계를 반영한 에너지 최소화 함수를 생성하고, 상기 에너지 최소화 함수를 해독하여 깊이 맵을 생성하는 깊이 맵 생성 단계를 포함할 수 있다.