Phương pháp loại bỏ Background được dựa trên cách mà Horpasert sử dụng. Backgound được tính toán một các thống kê tại từng điểm ảnh một. Qua trình ước lượng (estimation) tính toán sự biến dạng của các điểm sang hoặc màu sắc trong RGB.
Bằng việc so sánh sự khác nhau giữa Background và bức ảnh hiện tại một điểm ảnh được phân loại vào trong 4 nhóm sau: Original Backgound, Shaded Background, Highlighted background và foreground objects. Những điểm ảnh trong foreground objects được xử lý trong phần 4.
Ngoài ra, Một active background được phát triển dựa trên phương pháp ước lương để cho phép xử lý các đối tượng di chuyển trong một tập hợp các ảnh (trừ bức ảnh đầu tiên). Khung hình đầu tiên được lưu trữ như một background mẫu và những bức ảnh sau đó khi đã được xử lý sẽ khác với background dựa trên các đối tượng đang di chuyển. Khi mà background sau khi thống kê được xây dựng, những đối tượng di chuyển sẽ được loại trừ. Để làm được điều này, ngoài sử dụng phương pháp loại bỏ Background, 2 quy trình tính toán được đưa vào: Quy trình đầu tiên sẽ tính toán một hệ số mở rộng toàn cục được áp dụng trên cường độ các điểm ảnh trước khi đem so sánh chúng với background. Hệ số này được tính toán trên các vùng mà không tồn tại các đối tượng di chuyển, có nghĩa là những vùng mà gần như có sự thay đổi rất nhỏ giữa các khung hình liền kề của các mật độ của điểm ảnh trước khi đem đi so sánh. Thứ 2 là đưa ra một background khác mà dựa trên việc pha trộn với các bức hình khác nhưng chỉ pha trộn trên các vùng mà không có các đối tượng di chuyển. Khi đó, những quá trình này sẽ giảm được độ nhạy của thuật toán khi có sự thay đổi rất nhẹ giữa cách khung hình mà các thuật toán trước đây từng gặp phải.