Các biện pháp khoa học: Độ tin cậy và tính hợp lệ
Độ tin cậy là thước đo tính nhất quán và ổn định bên trong của thiết bị đo.
Tính hợp lệ cho chúng ta biết liệu thiết bị đo có đo lường những gì nó tuyên bố hay không.
Tính nhất quán bên trong là mức độ mà các mục hoặc câu hỏi trên thước đo đánh giá một cách nhất quán cùng một cấu trúc. Mỗi câu hỏi nên nhằm mục đích đo lường cùng một thứ. Tính nhất quán nội bộ thường được đo lường bằng cách sử dụng Cronbach’s Alpha - một siêu tương quan của tất cả các mục trên thang đo. Nếu điểm là 0,70 hoặc cao hơn thì phép đo có thể chấp nhận được. Tuy nhiên, nên chọn .80 hoặc cao hơn. Cũng cần xem xét bối cảnh khi xem xét điểm số phản ánh tính nhất quán nội bộ.
Độ ổn định thường được đo bằng độ tin cậy kiểm tra / thử lại. Cùng một người làm cùng một bài kiểm tra hai lần và điểm của mỗi bài kiểm tra được so sánh với nhau. Mối tương quan cao giữa hai điểm kiểm tra cho thấy bài kiểm tra là đáng tin cậy. Trong hầu hết các trường hợp, mối tương quan ít nhất là 0,70 được coi là chấp nhận được. Tuy nhiên, đây là một hướng dẫn chung và không phải là một bài kiểm tra thống kê.
Độ tin cậy interrater là một hệ số tin cậy khác đôi khi được sử dụng để đánh giá độ tin cậy. Với độ tin cậy xen kẽ các thẩm phán hoặc người đánh giá khác nhau (hai hoặc nhiều hơn) thực hiện các quan sát, ghi lại các phát hiện của họ và sau đó so sánh các quan sát của họ. Nếu người đánh giá đáng tin cậy thì tỷ lệ đồng ý sẽ cao.
Khi hỏi liệu một biện pháp có hợp lệ hay không, chúng tôi đang hỏi liệu nó có đo lường những gì được cho là phải không. Tính hợp lệ là phán đoán dựa trên dữ liệu thu thập được, không phải là một bài kiểm tra thống kê. Có hai cách chính để xác định tính hợp lệ: các biện pháp hiện có và sự khác biệt của nhóm đã biết.
Kiểm tra các biện pháp hiện có xác định xem biện pháp mới có tương quan với các biện pháp hợp lệ có liên quan hiện có hay không. Biện pháp mới phải tương tự như các biện pháp đã được ghi lại với các thiết bị đo hợp lệ đã được thiết lập.
Sự khác biệt nhóm đã biết xác định liệu thước đo mới có phân biệt được sự khác biệt giữa các nhóm đã biết hay không. Minh họa về sự khác biệt của các nhóm đã biết được nhìn thấy khi các nhóm khác nhau được đưa ra cùng một cách đo lường và dự kiến sẽ cho điểm khác nhau. Ví dụ: nếu bạn cho đảng Dân chủ và đảng Cộng hòa một bài kiểm tra đánh giá sức mạnh của các quan điểm chính trị nhất định, bạn sẽ mong đợi họ cho điểm khác. Quan điểm của họ về cơ bản là khác nhau về nhiều vấn đề. Nếu hai nhóm này cho điểm khác nhau, như mong đợi, chúng ta có thể nói rằng thước đo chỉ ra tính hợp lệ - đo lường những gì nó tuyên bố đo lường.
Khi thiết kế các thiết bị đo mới, bắt buộc phải xem xét độ tin cậy và tính hợp lệ của chúng. Một biện pháp có thể đáng tin cậy và không hợp lệ. Nhưng một thước đo hợp lệ luôn là một thước đo đáng tin cậy.
