(x, y) 좌표에서 마스크 연산을 통해 결과 영상의 픽셀 값 g(x, y)를 구했으면, 다음에는 마스크를 한 픽셀 옆으로 이동하여 (x+1, y) 좌표에 다시 마스크 연산을 수행하고 그 결과를 g(x+1, y)에 저장합니다. 이 과정을 영상 전체 픽셀에 대해 수행하면 필터링이 완료됩니다.

그런데 영상의 맨 바깥쪽, 가장자리 픽셀에서는 앞서 설명한 수식을 그대로 적용하기 어렵습니다. 영상의 가장자리 픽셀이란 영상에서 가장 왼쪽 또는 오른쪽 열, 가장 위쪽 또는 아래쪽 행에 있는 픽셀을 의미합니다. 예를 들어 (x, y)=(0,1) 위치에서 3×3 크기의 마스크 연산을 수행하는 경우, 결과 영상의 픽셀 값 g(0,1)은 다음과 같이 계산됩니다.

그러나 앞 수식에서 x=-1인 위치에서의 픽셀 값, 즉 f(−1,0), f(−1,1), f(−1, 2) 세 픽셀은 실제 영상에 존재하지 않습니다. 그러므로 이 수식은 적용할 수 없으며, 영상의 가장자리 픽셀에 대해 필터링을 수행할 때에는 특별한 처리를 해야 합니다.