Việc chọn kiểm định thống kê để sử dụng khi so sánh dữ liệu được quyết định bởi loại biến và loại thiết kế nghiên cứu. Trong khi các phép tính toán cho mỗi kiểm định là khác nhau thì mối quan hệ giữa chúng là luôn luôn giống nhau. Số liệu được thu thập và
được tính ra các đại lượng thống kê mô tả (trung bình, trung vị, tỷ lệ). Các đại lượng đó
được so sánh để tóm tắt cho một bộ số liệu giả thuyết trong đó giả thuyết không được giả định là đúng. Từ thống kê mô tả và quan sát được, các đại lượng thống kê khác cũng
được tính toán gọi là giá trị kiểm định (chúng ta ký hiệu là T). Đó là sự không thống nhất giữa các giá trị thống kê quan sát được và các giá trị kỳ vọng (ví dụ: sự khác nhau của trung bình quan sát và trung bình kỳ vọng), thông thường được chuẩn hóa thông qua một vài cách (chia cho một vài giá trị nào đó, chặng hạn như là sai số chuẩn) để tạo ra một giá trị cuối cùng duy nhất. Các số liệu biến thiên, cũng như các kiểm định thống kê, phụ thuộc vào quá trình chọn mẫu. Thường thì chúng ta không đoán trước được cá nhân nào được chọn vào mẫu trên quần thể. Do đó chúng ta không thể biết được T nào là phù hợp nhưng những nhà thống kê đã thực hiện rất nhiều phép tính toán phức tạp để mang lại cho chúng ta một khoảng (khoảng điều kiện) của giá trị T có khả năng xảy ra nếu giả
thuyết không đúng. Nếu T rơi vào ngoài cùng khoảng của chúng ta, thì chúng ta chỉ ra rằng giả thuyết không không đúng và kết luận rằng giả thuyết đối là hợp lý (mặc dù chúng ta không bao giờđảm bảo được điều đó).