Các phương pháp đo độ tin cậy của bài kiểm tra: Tổng hợp và phân tích

MỘT SỐ PHƯƠNG PHÁP ĐO ĐỘ TIN CẬY

CỦA MỘT BÀI KIỂM TRA

ThS. VŨ THANH HIỀN

Bộ môn Anh văn

Khoa Khoa học cơ bản

Trường Đại học Giao thông Vận tải

Tóm tắt: Độ tin cậy là một trong những tiêu chí thiết yếu nhất của một bài kiểm tra tốt.

Do vậy, việc đánh giá một bài kiểm tra chính là đánh giá độ tin cậy của bài kiểm tra đó. Báo

cáo xin giới thiệu một số phương pháp để đo độ tin cậy của một bài kiểm tra.

Summary: The reliability is one of the most essential criteria of a good test. Therefore,

evaluating a test is to evaluate the reliability of the test. The report will present some methods

of reliability computation of a test.

I. ĐẶT VẤN ĐỀ

Theo Bachman (1990:3), kiểm tra đóng

một vai trò hết sức quan trọng trong quá trình

giảng dạy. Thông qua kiểm tra, giáo viên có

thể (i) đánh giá được sự tiếp thu của người

học trong những giai đoạn nhất định; (ii) tự

đánh giá được các phương pháp giảng dạy

khác nhau; (iii) điều chỉnh kiến thức đầu vào

cho phù hợp trong quá trình giảng dạy. Chính

vì vậy, việc thiết kế được những bài kiểm tra

tốt với bốn tiêu chí chính: tính giá trị, độ tin

cậy, tính khả thi, và độ phân biệt là một điều

rất cần thiết.

Có thể nói độ tin cậy được coi là một

trong những tiêu chí thiết yếu nhất của một

bài kiểm tra tốt. Harrison (1983) coi độ tin cậy

là tính nhất quán mà một bài kiểm tra luôn

đánh giá chính xác một đối tượng tại các thời

điểm khác nhau. Ví dụ một sinh viên đạt kết

quả thấp đối với một bài kiểm tra ở lần làm

bài đầu tiên, nhưng hai hôm sau với vẫn bài

kiểm tra đó, người sinh viên này lại đạt kết

quả cao. Có thể nói bài kiểm tra này không

đạt được độ tin cậy và kết quả bài kiểm tra

không được coi là kết quả tin cậy để đánh giá

năng lực của người làm bài.Chính vì vậy, có

rất nhiều phương pháp để đo độ tin cậy của

một bài kiểm tra. Tuy nhiên, báo cáo này xin

giới thiệu một số phương pháp có thể áp dụng

được để đo độ tin cậy của một bài kiểm tra.

CNTT-CB

II. NỘI DUNG

* Phương pháp kiểm tra – kiểm tra lại

(Test-Retest Method)

Theo Henning (1987) và Shohamy

(1985) đây là phương pháp tính độ tin cậy đơn

giản nhất. Cùng một bài kiểm tra sẽ được tiến

hành kiểm tra hai lần cho cùng một đối tượng

với khoảng thời gian giữa hai lần kiểm tra

không được quá hai tuần. Và cả hai ông đều

nhất trí rằng giữa hai lần kiểm tra người làm

bài không được ôn tập lại. Tuy nhiên, để tiến

hành kiểm tra – kiểm tra lại sẽ không dễ dàng

vì không ai có thể chắc chắn liệu người làm

bài có ôn tập lại hay không. Về mặt tâm lý,

người làm bài bao giờ cũng muốn đạt kết quả

cao hơn trong lần làm bài thứ hai này, nên có

thể họ sẽ dành thời gian để ôn tập lại.

Để đo độ tin cậy theo hình thức này

Henning (1987:81) đã đưa ra công thức sau:

rtt = r1,2

trong đó: rtt là hệ số đo độ tin cậy

r1,2 là sự tương quan giữa kết

quả hai lần làm bài kiểm tra của cùng đối tượng

* Phương pháp chia đôi bài kiểm tra

(Split Half)

Để sử dụng phương pháp này, trước hết

bài kiểm tra phải được chia đôi thành hai phần

tương đương nhau và được tiến hành cùng cho

một đối tượng sinh viên. Để chia bài kiểm tra

thành hai phần tưương đương, người ta có thể

sử dụng một số cách khác nhau. Nếu bài kiểm

tra bao gồm các câu riêng lẻ, cách thông

thường nhất để chia bài kiểm tra thành hai

phần tương đương đó là một phần gồm các

câu số chẵn, phần kia gồm các câu số lẻ. Điểm

số của hai phần này sẽ được tính riêng biệt và

được tính tương quan với nhau. Điểm số của

hai phần này càng giống nhau tức là bài kiểm

tra càng có độ tin cậy cao. Có nghĩa là hệ số

tin cậy lý tưởng giữa hai phần của bài kiểm tra

sẽ là 1. Bài kiểm tra có hệ số tin cậy là 1 là bài

kiểm tra có độ tin cậy cao. Trong khi đó bài

kiểm tra có hệ số tin cậy là 0 tức là bài kiểm

tra đó không có độ tin cậy.

CNTT-

Để tính hệ số tin cậy theo phương pháp

này, người ta sẽ dùng công thức Spearman-

Brown Prophecy như sau:

B,A

tt R1

R+

trong đó

Rtt: là hệ số tin cậy theo phương pháp

Split Half.

RA,B: là hệ số tương quan giữa hai điểm

số của hai phần của bài kiểm tra

Để tính hệ số tương quan giữa hai phần

của bài kiểm tra (RA,B ), người ta có thể dùng

công thức sau:

)1n(n

1R 2

B,A −

−=

∑

trong đó: RA,B: là hệ số tương quan

Spearman

D: sự chênh lệch điểm của hai

phần bài kiểm tra

n: số lượng bài kiểm tra

Nếu RA,B: 0,8 – 1,0 sự tương quan tốt (độ

tin cậy cao)

0,6 – 0,8 sự tương quan trung bình (độ

tin cậy trung bình)

0,4 – 0,6 sự tương quan kém

(độ tin cậy thấp)

0,2 – 0,4 sự tương quan rất kém

(độ tin cậy rất thấp)

Tuy nhiên, Theo cả Bachman (1990) và

Henning (1987) đều cho rằng độ tin cậy tính

theo phương pháp Split Half có thể không

mang lại kết quả chính xác vì độ tin cậy có thể

thay đổi tùy theo bố cục của bài kiểm tra.

Để khắc phục nhược điểm trên Henning

(1987:84) đã đưa ra một số công thức tính độ

tin cậy sau đây:

* Công thức 20 của Kuder-

Richardson (Kuder-Richardson Formula

20)

⎟

⎠

⎞

⎜

⎝

⎛−

−

=∑

tt S

trong đó: Rtt: độ tin cậy tính theo công

thức 20 của Kuder-Richardson

n: số câu hỏi trong bài kiểm tra

S2t: bình phương của độ lệch chuẩn (SD)

∑S2i: tổng số sự chênh lệch điểm của tất

cả các câu hỏi

Tuy nhiên công thức này rất khó tính

toán. Trong trường hợp không tính được sự

chênh lệch điểm của từng câu hỏi, người ta

khuyên nên dùng công thức 21 của Kuder-

Richardson

* Công thức 21 của Kuder-Richardson

(Kuder-Richardson Formula 21)

⎟

⎠

⎞

⎜

⎝

⎛−

−

tt S

trong đó: Rtt: độ tin cậy tính theo công

thúc 21 của Kuder-Richardson

CNTT-CB

n: số câu hỏi trong bài kiểm tra

: điểm trung bình chung (Mean)

S2t: sự chênh lệch của điểm số

Tuy nhiên Shohamy (1985) cũng giới

thiệu công thức 21 của Kuder-Richardson

theo một cách tính khác như sau:

tt )SD(K

)xK(x

1R −−

−=

trong đó: x: điểm trung bình chung

(Mean)

(SD)2: bình phương của độ lệch chuẩn

(SD)

K: số câu hỏi trong bài kiểm tra

Về mặt cơ bản, mặc dù hai công thức trên

được tính khác nhau nhưng chúng đều cho

những kết quả như nhau vì sự chênh lệch

điểm số bằng với độ lệch chuẩn.(Theo

Bachman 1990: 166).

Hệ số tin cậy đạt yêu cầu sẽ trải dài từ 0

đến 1 (hHenning 1987:80). Thep Lado (1961),

đối với một bài kiểm tra đọc hiểu môn tiếng

Anh (Reading test) có hệ số tin cậy từ 0,9 đến

0,99 tức là bài kiểm tra có độ tin cậy cao,

trong khi đó để một bài kiểm tra viết môn

tiếng Anh (Writing test) có độ tin cậy cao, tức

là hệ số tin cậy phải dao động từ 0,7 đến 0,79.

III. KẾT LUẬN

Báo cáo đã giới thiệu bốn phương pháp

có thể áp dụng được để đo độ tin cậy – một

trong những tiêu chí cần thiết của một bài

kiểm tra tốt. Hy vọng báo cáo này sẽ là một

tài liệu tham khảo bổ ích cho những người

thiết kế bài kiểm tra để có được những bài

kiểm tra ngày càng chất lượng.

Tài liệu tham khảo

[1]. Bachman, L.F (1990). Fundemental

Considerations in Language Testing. Oxford:

Oxford University Press.

[2]. Harrison, A. (1983). A Language Testing

Handbook. London: Mcmillian Press.

[3]. Heaton, J.B. (1988). Writing English

Language Tests. London: Long man

[4]. Henning, G. (1987). A Guide to Language

Testing. Cambridge: Newbury House Publishers

[5]. Hughes, A. (1989). Testing for Language

Teachers. Cambridge: Cambridge University

Press.

[6]. Lado, R. (1961). Language Testing. London:

Longman.

[7]. Shohamy, E. (1985). A Practical Hanbook in

Language Testing for the Second Language

Teachers. Tel-Aviv: Tel-Aviv University Press♦

CÁC YẾU TỐ ẢNH HƯỞNG ĐẾN ĐỘ TIN CẬY

CỦA MỘT BÀI THI NGOẠI NGỮ

ThS. BẠCH THỊ THANH

Bộ môn Anh văn

Khoa Khoa học cơ bản

Trường Đại học Giao thông Vận tải

Tóm tắt: Đi đôi với dạy và học ngoại ngữ, khâu kiểm tra đánh giá cũng luôn là mối quan

tâm của giáo viên và học viên. Thông qua quá trình này giáo viên có thể đánh giá được kết

quả học tập của người học, đánh giá được cách dạy của mình và từ đó tìm ra phương pháp

phù hợp. Còn đối với học viên quá trình kiểm tra đánh giá sẽ giúp họ biết được khả năng của

mình và sẽ cố gắng hơn. Tuy nhiên để có được một bài thi hay một bài kiểm tra đáng tin cậy

không phải là một việc dẽ dàng. Bài báo này sẽ đề cập các yếu tố tác động đến độ tin cậy của

một bài thi phần nào giúp cho việc thiết kế đề thi và tổ chức thi môn ngoại ngữ được tốt hơn.

Summary: Along with the need of teaching and learning foreign languages, the need of

testing has gained much concern from teachers and learners as well. Through testing,

teachers can evaluate learners’ achievements, self-assess their teaching methods and find out

the better way to teach their students. Thanks to testing, learners can know their ability and

then try to learn better. However, it is not easy to have a reliable test. This article will mention

some factors affecting the reliability of a foreign language test, which can help to have a

better test design and administration.

CNTT

I. ĐẶT VẤN ĐỀ

Chúng ta ai cũng biết đi đôi với quá trình

giảng dạy và học tập thì khâu kiểm tra đánh giá

là vô cùng quan trọng. Vì vậy kiểm tra đánh

giá trong dạy và học ngoại ngữ là một việc tất

yếu. Đề cập đến vấn đề này Arthur Hughes

trong cuốn Testing for Language Teachers đã

khẳng định “ kiểm tra đánh giá là rất cần thiết

nhằm cung cấp thông tin về những gì mà người

học đạt được, nếu thiếu khâu này sẽ khó có thể

đưa ra các quyết định giảng dạy phù hợp” ([1]

trang 4). Bàn về tầm quan trọng của kiểm tra

đánh giá Madsen (1988 : 4) cũng cho rằng các

bài kiểm tra tiếng Anh phù hợp có thể giúp

sinh viên học tốt ngôn ngữ này vì họ phải học

để kiểm tra, sau đó bài của họ lại được giáo

viên trả và chữa. Theo Heaton việc kiểm tra

cũng rất có ích cho giáo viên, giúp họ đánh giá

được công việc, sự nỗ lực của họ và từ đó có sự

điều chỉnh phù hợp trong giảng dạy để tăng

tính hiệu quả.

Rõ ràng kiểm tra đánh giá là việc làm

không thể thiếu trong giảng dạy nói chung và

trong giảng dạy ngoại ngữ nói riêng.Tuy

nhiên việc này chỉ phát huy được tính tích cực

của nó khi các bài kiểm tra, bài thi có độ tin

cậy cao. Bài báo sẽ đề cập đến những yếu tố

làm tăng độ tin cậy của một bài thi ngoại ngữ.

II. MỘT SỐ YẾU TỐ ẢNH HƯỞNG TỚI ĐỘ

TIN CẬY CỦA MỘT BÀI THI NGOẠI NGỮ

Độ tin cậy là gì?

Theo Harrison, độ tin cậy của một bài thi

là tính nhất quán (consistency), còn Cyril

Weir lại diễn giải như sau: Một bài thi có độ

tin cậy là bài thi mà kết quả bài làm của thí

sinh phản ánh đúng trình độ của họ, nếu bạn

cho họ làm lại thì bạn vẫn nhận được kết quả

tương tự ([2] trang 20). Điều này cũng được

đề cập trong trang web về kiểm tra đánh giá:

một bài thi được thực hiện với cùng một đối

tượng ở những thời điểm khác nhau cho ta

những kết quả tương tự nhau là bài thi đáng

tin cậy ([5]). Theo Bachman, 1990, độ tin cậy

của bài thi chính là khả năng đánh giá trình độ

của thí sinh của bài thi đó chính xác đến mức

độ nào ([3] trang 195).

Tuy nhiên để bài thi đạt được độ tin cậy

cũng cần lưu ý nhiều yếu tố.

1. Bài thi nên gồm có nhiều phần,

nhiều dạng bài

Bài thi với nhiều dạng bài sẽ đánh giá

chính xác hơn khả năng của người học. Theo

Arthur Hughes thì một bài thi càng có nhiều

câu hỏi đa dạng thì độ tin cậy càng cao và

theo ông điều này đã được chứng minh qua

thực tế ([1] trang36).

Tuy nhiên cần lưu ý rằng các câu hỏi sau

không nên liên quan đến kết quả của câu trước

đó. Ví dụ trong một bài kiểm tra đọc ta có câu

hỏi trước là “Where did the child find her

mother?” và câu hỏi tiếp theo là “What was

unusual about the place ?”. Như vậy câu hỏi

thứ hai sẽ không làm tăng độ tin cậy của bài thi

vì nếu thí sinh trả lời sai câu thứ nhất thì sẽ dẫn

đến trả lời câu hỏi thứ hai cũng sai. Các câu hỏi

trong bài thi nên càng khác biệt càng tốt, khi đó

bài thi sẽ kiểm tra được nhiều kiến thức đa

dạng của người học và độ tin cậy của bài thi sẽ

càng cao. Điều này đã được Hughes và Cyril

Weir khẳng định “...các câu trong đề thi nên là

các câu không phụ thuộc nhau...” ([1] trang37);

“Nhìn chung cần tránh sự phụ thuộc nhau của

các câu hỏi, tức là việc trả lời một câu hỏi này

không nên liên quan đến khả năng trả lời một

câu hỏi khác ([2] trang 24). Độ dài của bài thi

cũng quyết định độ tin cậy của nó, bài thi càng

dài thì độ tin cậy càng cao ([5]). Tuy nhiên

theo cả Arthur Hughes và Cyril Weir thì bài thi

cũng không nên quá dài vì như vậy sẽ làm cho

thí sinh quá mệt mỏi, khi đó câu trả lời của họ

sẽ không còn phản ánh đúng khả năng của họ

nữa. Độ dài của bài thi nên tuỳ thuộc vào tầm

quan trọng của kết quả bài thi đó. Kết quả của

bài thi được sử dụng vào mục đích quan trọng

hơn thì bài thi nên dài hơn.

2. Yêu cầu các phần của bài thi cần cụ thể

Yêu cầu của câu hỏi càng cụ thể thì việc

đánh giá câu trả lời của các thí sinh sẽ càng

chính xác hơn. Ví dụ trong một bài thi viết, thí

sinh được cung cấp một loạt các chủ đề và họ

có thể viết về một trong những chủ đề này, khi

đó đề bài sẽ thiếu độ tin cậy vì thí sinh sẽ làm

bài rất khác nhau và tiêu chí đánh giá sẽ rất

khó chính xác.

Theo Hughes, đề bài không nên cho mở

quá, các yêu cầu cụ thể cần được nêu rõ trong

đề. Hãy so sánh các đề kiểm tra viết sau để

thấy rõ hơn điều này.

a. Write a composition on education.

b. Write a composition on education in

Vietnam.

c. Write a composition on how we might

improve education in Vietnam.

d. Discuss the following measures to

improve education in Vietnam: CNTT_C

- Improve the facilities (rooms,

equipment, …)

- Improve the programs

- Provide training for teachers

Như vậy đề thi dạng thứ tư sẽ cho ta độ tin

cậy cao hơn cả vì các yêu cầu đưa ra cụ thể hơn.

3. Các câu hỏi trong bài thi không nên

bị mơ hồ

Các câu hỏi phải thật rõ ý, tránh tình trạng

thí sinh đưa ra câu trả lời mà người ra đề không

lường trước được. Ví dụ trong một bài đọc của đề

thi tuyển sinh cao học của trường Giao thông có

đoạn mở đầu như sau “Three people jumped out

of a car on a busy Oxford Road after a fire started

under the bonnet this morning…”, và người ra đề

đã đặt câu hỏi “Where did the fire break out?” với

đáp án là “Oxford Road”, nhưng khi chấm chúng

tôi đã nhận được một câu trả lời rất khác nhưng

cũng đúng từ phía thí sinh là “under the bonnet”.

Như vậy, nếu không đọc bài đọc mà giáo viên cứ

MỘT SỐ PHƯƠNG PHÁP ĐO ĐỘ TIN CẬY CỦA MỘT BÀI KIỂM TRA

Chủ đề:

Tài liệu liên quan

Tài liêu mới

AI tóm tắt

Giới thiệu tài liệu

Đối tượng sử dụng

Từ khoá chính

Nội dung tóm tắt

Hỗ trợ

Phương thức thanh toán

Theo dõi chúng tôi