Cơ khí Turk để giải cứu nghiên cứu tâm lý học?
Đó là một vấn đề thực sự, bởi vì như tôi đã lưu ý vào tháng 8 năm 2010, có hàng nghìn nghiên cứu tâm lý học thực sự chỉ dựa trên một nhóm sinh viên đại học từ một khuôn viên duy nhất tại một trường đại học ở Hoa Kỳ Trong khi những người trẻ tuổi đang theo học đại học có thể thực sự giúp chúng tôi hiểu một số khía cạnh của hành vi con người, bạn không thể chỉ cho rằng những hành vi bạn quan sát được trong các nghiên cứu đó áp dụng cho phụ nữ và nam giới 60 tuổi.
Hãy sử dụng dịch vụ Mechanical Turk của Amazon.com để giải cứu. Liệu công nghệ có thể giúp giải quyết vấn đề khó khăn trong việc tìm kiếm đủ những người đại diện cho dân số hơn và làm như vậy theo cách tiết kiệm chi phí không?
Để bắt đầu, có thể hiểu được Mechanical Turk là gì. Đó là một thị trường trực tuyến cho phép người bán mua sức lao động của con người với chi phí rất rẻ cho một số loại nhiệm vụ trực tuyến. Các nhà nghiên cứu lưu ý: “Trang web tự hào có một lực lượng lao động lớn, đa dạng bao gồm hơn 100.000 người dùng từ hơn 100 quốc gia, những người hoàn thành hàng chục nghìn nhiệm vụ hàng ngày. Những người lao động này được trả lương từng phần cho mỗi công việc, đôi khi thấp nhất là 1 xu. Các nhiệm vụ khác nhau và có thể làm bất cứ điều gì, từ duyệt trang web tìm lỗi, đến điền vào bản khảo sát.
À vâng, điền vào các cuộc khảo sát. Rất nhiều nghiên cứu tâm lý học dựa trên việc mọi người điền vào các cuộc khảo sát. Sẽ thật tuyệt nếu chúng ta có thể kêu gọi mọi người - những người không phải là sinh viên đại học - làm điều này với mức giá dưới 10 đô la cho mỗi cuộc khảo sát… Giả sử, 10 xu?
Buhrmester và cộng sự. (2011) thiết lập để tìm hiểu xem những người thuộc nhóm Cơ khí như vậy có điền vào các cuộc khảo sát theo cách phù hợp với những người mà bạn có thể yêu cầu làm điều gì đó tương tự trực tiếp hay không.
Đầu tiên, các nhà nghiên cứu đã khảo sát nhân khẩu học của 3.006 người tham gia Mechanical Turk và so sánh chúng với một mẫu Internet lớn không thu được từ Mechanical Turk. Họ nhận thấy những người tham gia Cơ khí (MTurk) đa dạng hơn cả mẫu Internet và mẫu dân số sinh viên đại học tiêu chuẩn.
Sau đó, họ kiểm tra các mức giá khác nhau (2, 10 và 50 xu) để điền vào một tập hợp các cuộc khảo sát mất nhiều thời gian khác nhau (5, 10 và 30 phút). Những gì họ tìm thấy sẽ không gây ngạc nhiên cho bất kỳ ai đã sử dụng MTurk:
Những phân tích này cho thấy rằng những người tham gia có thể được tuyển dụng nhanh chóng và không tốn kém. Tỷ lệ tham gia nhạy cảm với số tiền bồi thường và cam kết thời gian, nhưng phát hiện của chúng tôi chứng minh rằng có thể thu thập các mẫu có kích thước phù hợp thông qua MTurk chỉ với đô la. Ngay cả khi chỉ cung cấp 2 xu cho một nhiệm vụ 30 phút, chúng tôi đã tích lũy được 25 người tham gia (trong khoảng 5 giờ sau khi đăng bài). Hơn nữa, bằng cách chỉ tăng mức bồi thường lên một chút (ví dụ: lên 50 xu), chúng tôi đã có thể thu được cùng một số lượng người tham gia trong thời gian đăng bài chưa đầy 2 giờ.
Tuy nhiên, lao động rẻ thì tốt là gì, nếu chất lượng không tốt và không đáp ứng các tiêu chuẩn đo lường tâm lý mà các nhà nghiên cứu tâm lý học cần?
Các nhà nghiên cứu phát hiện ra rằng ngay cả ở mức bồi thường thấp nhất là 2 xu, mức thanh toán dường như không ảnh hưởng đến chất lượng dữ liệu. Các nhà nghiên cứu có thể trả một xu để hoàn thành các cuộc khảo sát và nhận được dữ liệu chất lượng tốt được trả về một cách đáng tin cậy.
Các nhà nghiên cứu đã tính toán điểm trung bình về độ tin cậy alpha trên tất cả các mức bồi thường cho sáu bảng câu hỏi tính cách mà họ quản lý trực tuyến. Họ phát hiện ra rằng điểm số alpha của MTurk nằm trong khoảng hai phần trăm so với điểm alpha của mẫu truyền thống. Họ cũng đã kiểm tra điểm tin cậy của bài kiểm tra-kiểm tra lại và nhận thấy giá trị trung bình r = 0,88 với tỷ lệ hoàn thành kiểm tra lại là 60%. Đây đều là những con số rất đẹp và so sánh thuận lợi với các phương pháp truyền thống.
Kết quả của nghiên cứu này cho thấy rằng Mechanical Turk là một giải pháp thay thế đáng tin cậy cho việc sử dụng dân số đại học để lấy dữ liệu khảo sát - và thậm chí có thể là một lựa chọn thay thế tốt hơn các cuộc khảo sát Internet truyền thống. Chỉ với một xu, mọi người sẽ hoàn thành các bảng câu hỏi thậm chí dài dòng trong nỗ lực giúp đỡ người khác trong các dự án và nghiên cứu của họ. Trong khi nhiều nghiên cứu cần được thực hiện để xác nhận những phát hiện này, MTurk dường như là một thị trường mà nhiều nhà nghiên cứu tâm lý học nên xem xét khi họ chuẩn bị nghiên cứu tiếp theo của mình.
Tài liệu tham khảo
Buhrmester, M., Kwang, T., & Gosling, S.D. (2011). Amazon’s Mechanical Turk: Nguồn dữ liệu mới, không tốn kém nhưng chất lượng cao? Quan điểm về Khoa học Tâm lý, 6 (1), 3-5.
Bài viết này có các liên kết liên kết đến Amazon.com, nơi một khoản hoa hồng nhỏ được trả cho Psych Central nếu sách được mua. Cảm ơn bạn đã ủng hộ Psych Central!
