본 발명은 주파수 변환 및 필터링 절차가 포함된 행렬 기반의 움직임 검출 시스템 및 방법에 관한 것으로, 본 발명의 일 실시예에 따르면 연속된 N개 프레임의 동화상에서, 픽셀값의 변화에 대응하는 벡터를 원소(element)로 하는 시간 영역 행렬을 생성하는 단계; 상기 시간 영역 행렬에 연산 행렬을 곱하여 저주파 영역이 제거된 움직임 행렬을 생성하는 단계; 상기 움직임 행렬의 원소인 벡터들을 픽셀값의 변화로 하는 연속된 프레임의 화상을 생성하는 단계;를 포함하는 이루어진 움직임 검출 방법이 제공된다.