Rater Agreement Index (RAI) : Surachai Meechan
Rater Agreement Index (RAI) : Surachai Meechan
Rater Agreement Index (RAI) : Surachai Meechan
Abstract
We can use Rater Agreement Index (RAI) as an index of agreement level of scores gained from two or
more raters. This index has a value from 0 to 1. If its value is nearly to 1, it means the raters have a strong
agreement in scoring. On the other hand, if its value is nearly to 0, it means that that agreement is not strong.
Thus, if the raters are trained and have a good knowledge of scoring, this index can indicate the standard of those
scoring rubrics.
Keywords : performance assessment, rater agreement index, scoring rubrics
Songklanakarin Journal of Social Sciences and Humanities 10(1) Jan - Apr 2004 : 113-126
√—∫µâπ©∫—∫ 1 ‡¡…“¬π 2546 ª√—∫ª√ÿß-·°â‰¢µ“¡¢âÕ‡ πÕ·π–¢ÕߺŸâ∑√ߧÿ≥«ÿ≤‘ 7 惻®‘°“¬π 2546
√—∫≈ßµ’æ‘¡æå 23 °ÿ¡¿“æ—π∏å 2547
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 114 Surachai Meechan
∫∑§«“¡
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π
ÿ√™—¬ ¡’™“≠
°».¥. (°“√∑¥ Õ∫·≈–«—¥º≈°“√»÷°…“), Õ“®“√¬å
¿“§«‘™“ª√–‡¡‘πº≈·≈–«‘®—¬∑“ß°“√»÷°…“ §≥–»÷°…“»“ µ√å ¡À“«‘∑¬“≈—¬ ߢ≈“π§√‘π∑√å
E- mail : [email protected]
∫∑§—¥¬àÕ
∫∑π”
∑ÿ°§√—ßÈ ∑’®Ë ¥— „Àâ¡°’ “√«—¥º≈°“√‡√’¬π√Ÿ„â πÀâÕ߇√’¬π ‡¡◊ÕË ®–«—¥§«“¡ “¡“√∂„π°“√ªØ‘∫µ— °‘ ®Á ”‡ªìπµâÕ߇°’¬Ë «¢âÕß
§«√¡’‡ªÑ“À¡“¬À≈—°‡æ◊ÕË §âπÀ“®ÿ¥‡¥àπ ·≈–¢âÕ∫°æ√àÕß„π °—∫∑—°…–„π°√–∫«π°“√ (process) ·≈–§ÿ≥¿“æ¢Õß
°“√‡√’¬π√Ÿ¢â Õßπ—°‡√’¬π·µà≈–§π ‡æ◊ÕË ∑’§Ë √Ÿ®–‰¥âÀ“·π«∑“ß º≈ß“π (product) ∑’Ëπ—°‡√’¬π‰¥â®—¥°√–∑”¢÷Èπ ´÷Ëß®”‡ªìπ
à߇ √‘¡·≈–ª√—∫ª√ÿß·°â‰¢‰¥âÕ¬à“ß∂Ÿ°µâÕß·≈– Õ¥§≈âÕß µâÕßÕ“»—¬¥ÿ≈¬æ‘π‘®¢ÕߺŸâª√–‡¡‘π∑—Èß ‘Èπ
‡À¡“– ¡°—∫ ¿“æ¢Õß·µà≈–∫ÿ§§≈¡“°∑’Ë ÿ¥ ¥—ßπ—Èπ ·µàª≠í À“∑’§Ë √Ÿ·≈– ∂“π»÷°…“µà“ß Ê ª√– ∫Õ¬Ÿà
‘Ëß ”§—≠Õ¬à“ß¡“°∑’˧√Ÿ§«√¥”‡π‘π°“√°Á§◊Õ°“√ √â“ß ‡ ¡Õ°Á§◊Õ°“√¢“¥‡§√◊ËÕß¡◊Õ«—¥¿“§ªØ‘∫—µ‘∑’Ë¡’§ÿ≥¿“æ
‡§√◊ÕË ß¡◊Õ«—¥º≈°“√‡√’¬π√Ÿ∑â ¡’Ë §’ ≥ÿ ¿“æ·≈–°“√𔇧√◊ÕË ß¡◊Õ ‚¥¬‡©æ“–‡§√◊ËÕß¡◊Õ∑’Ë¡’‡°≥±å°“√„À⧖·ππ (scoring
«—¥π—Èπ‰ª„™âÕ¬à“ß∂Ÿ°µâÕß ‚¥¬‡©æ“–¬ÿ§ªí®®ÿ∫—π∑’Ë°“√ rubrics) ∑’‡Ë À¡“– ¡·≈–‡ªìπ∑’¬Ë Õ¡√—∫®“°∑ÿ°ΩÉ“¬∑’‡Ë °’¬Ë «
«—¥º≈°“√‡√’¬π√Ÿ‰â ¥â‡πâπÀπ—°‰ª∑’°Ë “√«—¥¿“§ªØ‘∫µ— ‘ (per- ¢âÕß ·≈–∂÷ß·¡â®–¡’ °Áæ∫«à“ à«π„À≠à‰¡à‰¥âµ√«® Õ∫
formance assessment) ´÷Ëß¡ÿà߇πâπ‰ª∑’Ë°“√°√–∑”À√◊Õ §ÿ≥¿“æÕ¬à“߇µÁ¡°√–∫«π°“√¡“°π—° ‚¥¬‡©æ“–°“√
°“√ªØ‘∫—µ‘‰¥â¢Õßπ—°‡√’¬π·µà≈–§π¡“°¬‘Ëߢ÷Èπ ¥â«¬‡Àµÿ µ√«® Õ∫«à“‡§√◊ËÕß¡◊Õπ—Èπ®– “¡“√∂𔉪„™â‰¥âÕ¬à“ß
π’ȇÕߪ√– ‘∑∏‘¿“æ¢Õß°“√«—¥º≈°“√‡√’¬π√Ÿâ®÷ߢ÷ÈπÕ¬Ÿà°—∫ ‡∑’ˬߵ√ß·≈–¬ÿµ‘∏√√¡°—∫π—°‡√’¬π∑ÿ°§πÀ√◊Õ‰¡à ∑—Èßπ’È
§ÿ≥¿“æ¢Õß·∫∫ —߇°µÀ√◊Õ‡§√◊ËÕß¡◊Õ«—¥Õ◊Ëπ Ê ∑’˵âÕß à«πÀπ÷ßË §ß‡ªìπ‡æ√“–‰¡à∑√“∫«‘∏°’ “√ ¢≥–∑’∫Ë “ß à«πÕ“®
„™â¥≈ÿ ¬æ‘π®‘ ¢ÕߺŸªâ √–‡¡‘π (rater) ¡“°¬‘ßË ¢÷πÈ ¥â«¬ ‡æ√“– ‰¡à‡ÀÁ𧫓¡®”‡ªìπ ·µàÀ“°‡√“¡ÿàßÀ«—ß„Àâ°“√«—¥·≈–
«. ߢ≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. - .§. 2547 115 ÿ√™—¬ ¡’™“≠
ª√–‡¡‘ π º≈°“√‡√’ ¬ π√Ÿâ „ π∑ÿ ° §√—È ß ¡’ ¡ “µ√∞“π‡ªì π ∑’Ë ·≈–ª√–‡¡‘πº≈°“√»÷°…“∑’Ëæ‘¡æ出¬·æ√àÕ¬Ÿà∑—Ë«‰ª ·≈–
¬Õ¡√—∫®“°∑ÿ°ΩÉ“¬ °Á¡’§«“¡®”‡ªìπÕ¬à“߬‘Ëß∑’ˇ§√◊ËÕß¡◊Õ µ“¡·π«∑“ß∑’ªË Ø‘∫µ— °‘ π— ‚¥¬∑—«Ë ‰ªπ—πÈ ºŸ â √â“߇§√◊ÕË ß¡◊Õ«—¥
«—¥µà“ß Ê §«√®–‰¥â√—∫°“√µ√«® Õ∫§ÿ≥¿“æÕ¬à“ߥ’ °Á¡’Õ‘ √–∑’Ë®–°”Àπ¥√Ÿª≈—°…≥å¢Õß·∫∫∫—°∑÷°§–·ππ
∑’Ë ÿ¥‡∑à“∑’Ë®–∑”‰¥â°àÕπ𔉪„™â®√‘ß ∑—Èßπ’È°Á‡æ◊ËÕ„À≥âº≈ ‰¥âÕ¬à“ßÀ≈“°À≈“¬ ¢÷ÈπÕ¬Ÿà°—∫§«“¡æ÷ßæÕ„®·≈–§«“¡
°“√«—¥∑’Ë∂Ÿ°µâÕß·≈–πà“‡™◊ËÕ∂◊Õ¡“°∑’Ë ÿ¥ –¥«°„π°“√𔉪„™â‡ªì𠔧—≠
§ÿ≥¿“æª√–°“√Àπ÷Ëß∑’Ë ”§—≠¬‘ËߢÕ߇§√◊ËÕß¡◊Õ √ÿâß»‘√‘π∑√å ®—π∑√åÀÕ¡ (2545, 26) ‰¥â𔇠πÕ
«—¥¿“§ªØ‘∫—µ‘ §◊Õ §«“¡™—¥‡®π·≈– ◊ËÕ§«“¡‰¥âµ√ß°—π µ—«Õ¬à“߇°≥±å°“√„À⧖·ππ ”À√—∫„™â„π°“√«—¥¿“§
´÷Ë߇√’¬°°—π«à“ §«“¡‡ªìπª√π—¬ (objectivity) ‚¥¬ ªØ‘∫—µ‘ ∑—Èß„π à«π¢Õß°“√°”À𥇰≥±å°“√„À⧖·ππ
‡©æ“–„π à«π¢Õ߇°≥±å°“√„À⧖·ππ ´÷Ëß®”‡ªìπµâÕß¡’ ·∫∫¿“æ√«¡ (holistic scoring rubrics) Õ—πÀ¡“¬∂÷ß
¡“µ√∞“πÕ¬à“ß¡“° π—Ëπ§◊Õ ‰¡à«à“®–𔉪„™â‡¡◊ËÕ„¥À√◊Õ °“√„À⧖·ππ‚¥¬æ‘®“√≥“§ÿ≥¿“æ¢Õߺ≈ß“πÀ√◊Õ°“√
§√Ÿ§π„¥®–‡ªìπºŸâ„™â°Áµ“¡ §–·ππ‡À≈à“π—Èπ§«√®–§ß∑’Ë °√–∑”„π¿“æ√«¡∑—ßÈ À¡¥ ·≈–°“√°”À𥇰≥±å°“√„Àâ
À√◊Õ„°≈⇧’¬ß°—π¡“°∑’Ë ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â ´÷Ëߧÿ≥¿“æ §–·ππ·∫∫·¬°Õß§å ª √–°Õ∫ (analytic scoring
¥—ß°≈à“«π’Èπ—∫«à“‡ªìπ ‘Ëß∑’ËÕàÕπ¥âÕ¬Õ¬à“ß¡“°„π‡§√◊ËÕß¡◊Õ rubrics) ´÷Ë߇ªìπ°“√„À⧖·ππ‚¥¬°“√·∫à߬àÕ¬°√–∫«π
«—¥∑ÿ°ª√–‡¿∑∑’˵âÕß„™â¥ÿ≈¬æ‘π‘®„π°“√µ—¥ ‘π„®¢Õߧ√Ÿ °“√À√◊Õº≈ß“ππ—ÈπÕÕ°‡ªìπ à«π Ê ·≈â«®÷ßæ‘®“√≥“„Àâ
À√◊ÕºŸªâ √–‡¡‘π ·¡â·µà¢Õâ Õ∫™π‘¥∫√√¬“¬À√◊Õ§«“¡‡√’¬ß §–·ππ„π·µà≈– à«ππ—Èπ ¥—ßª√“°Ø„πµ—«Õ¬à“ß∑’Ë 1 ·≈–
(essay item) °Á‰¡àæâπ∑’Ë®–ª√– ∫ªí≠À“π’ȇ™àπ‡¥’¬«°—π 2 ¥—ßπ’È
‚¥¬‡©æ“–„π à«π¢Õß°“√«—¥¿“§ªØ‘∫—µ‘π—Èπ‰¡à«à“®–¡ÿàß µ—«Õ¬à“ß∑’Ë 1
‡πâπ‰ª∑’Ë°√–∫«π°“√À√◊Õº≈ß“π°Á≈â«π¡’®ÿ¥ÕàÕππ’È∑—Èß ‘Èπ ‡°≥±å°“√„À⧖·ππ·∫∫¿“æ√«¡ ”À√—∫ß“π
´÷Ë ß ‰¡à «à “ ®–‡°‘ ¥ ¢÷È π ®“°Õ§µ‘ À √◊ Õ §«“¡‰¡à √Ÿâ ® √‘ ß ¢ÕߺŸâ ª√–¥‘…∞å„∫µÕß°≈’∫∫—«À≈«ß
ª√–‡¡‘πÀ√◊Õ‡°‘¥®“°§«“¡‰¡à™—¥‡®π¢Õ߇°≥±å°“√„Àâ 4 (¥’¡“°) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å
§–·ππ∑’Ë°”À𥉫â°Áµ“¡ ®ÿ¥ÕàÕππ’ȧ«√®–‰¥â√—∫°“√ §√∫∂â«π ‡À¡“– ¡ ©’°„∫µÕ߇∑à“°—π∑ÿ°™‘Èπ ‰¡à™È” æ—∫
·°â‰¢„ÀâÀ¡¥‰ªÀ√◊Õ‡À≈◊ÕπâÕ¬∑’ Ë ¥ÿ ‡∑à“∑’§Ë √Ÿ®–æ÷ß°√–∑”‰¥â °≈’∫ª≈“¬·À≈¡ ¡∫Ÿ√≥å∑ÿ°°≈’∫ °“√ àß°≈’∫‡ ¡Õ°—π
∑ÿ°°≈’∫ √Õ¬‡¬Á∫‡√’¬∫·¢Áß·√ß·≈– “¡“√∂𔉪„™â‰¥â
°“√°”À𥇰≥±å°“√„À⧖·π𠵓¡«—µ∂ÿª√– ߧå
‚¥¬∑—«Ë ‰ª ‡§√◊ÕË ß¡◊Õ«—¥¿“§ªØ‘∫µ— ®‘ –ª√–°Õ∫¥â«¬ 3 (¥’) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å§√∫∂â«π
2 à«π„À≠à Ê §◊Õ à«π∑’ˇªìπ·∫∫∫—π∑÷°§–·ππ ´÷Ëß ‡À¡“– ¡ ©’°„∫µÕ߇∑à“°—π∑ÿ°™‘Èπ ‰¡à™È” æ—∫°≈’∫
§√Ÿ®–µâÕß„™â„π°“√®¥∫—π∑÷°§–·ππ·≈–¢âÕ —߇°µµà“ß Ê ª≈“¬·À≈¡ ¡∫Ÿ√≥å∫“ß°≈’∫ °“√ àß°≈’∫‡ ¡Õ°—π‡°◊Õ∫
°—∫ à«π∑’ˇªìπ‡°≥±å°“√„À⧖·ππ ‡æ◊ËÕÕ∏‘∫“¬„Àâ§√Ÿ ∑ÿ°°≈’∫ √Õ¬‡¬Á∫‡√’¬∫ ·¢Áß·√ßæÕ„™â “¡“√∂𔉪
∑√“∫«à“®–µâÕßæ‘®“√≥“ª√–‡¥Áπ„¥∫â“ß·≈–„À⧖·ππ „™â‰¥âµ“¡«—µ∂ÿª√– ߧå
„π·µà ≈ –ª√–‡¥Á π Õ¬à “ ߉√ ´÷Ë ß Õß à « ππ’È Õ “®æ‘ ¡ æå ‰ «â 2 (æÕ„™â) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å¡“
§π≈–¥â “ πÀ√◊ Õ Õ“®®— ¥ æ‘ ¡ æå · ¬°‰«â µà “ ßÀ“°°Á · ≈â « ·µà ∫“ß à«π ©’°„∫µÕ߉¡à™È”·µà¬—߉¡à‡∑à“°—π∑ÿ°™‘Èπ æ—∫°≈’∫
§«“¡‡À¡“– ¡ „π∑’Ëπ’È®–¢Õ°≈à“«∂÷߇©æ“–≈—°…≥–·≈– ª≈“¬‰¡à·À≈¡ °“√ àß°≈’∫‰¡à‡ ¡Õ°—π √Õ¬‡¬Á∫‰¡à‡√’¬∫
µ—«Õ¬à“ߢÕ߇°≥±å°“√„À⧖·ππ∑’Ë¡’ºŸâ𔇠πÕ‰«â·≈â« π”‰ª„™âß“π¬—߉¡à‡ªìπ∑’Ëπà“æÕ„®π—°
Õ¬à“ߧ√à“« Ê ‡æ◊ËÕ‡ªìπ°“√‡°√‘Ëππ”‡¢â“ Ÿà¢—ÈπµÕπ°“√ 1 (§«√ª√—∫ª√ÿß) À¡“¬∂÷ß ¬◊¡«— ¥ÿÕÿª°√≥å
µ√«® Õ∫§ÿ≥¿“æ¢Õ߇°≥±å¥—ß°≈à“«Õ’°µàÕÀπ÷Ë߇∑à“π—Èπ ®“°‡æ◊ËÕπ ªØ‘∫—µ‘ß“π‰¡àµ≈Õ¥‡«≈“ º≈ß“π‰¡à ”‡√Á®
‚¥¬®–‰¡à°≈à“«∂÷ß≈—°…≥–·≈–µ—«Õ¬à“ߢÕß·∫∫∫—π∑÷° µ—«Õ¬à“ß∑’Ë 2
§–·ππ·µàª√–°“√„¥ ∑—Èßπ’ȇæ√“– “¡“√∂»÷°…“§âπ§«â“ ‡°≥±å ° “√„Àâ § –·ππ·∫∫·¬°Õß§å ª √–°Õ∫
„πª√–‡¥Áπ‡À≈à“π’ȉ¥â®“°‡Õ° “√µ”√“∑“ߥâ“π°“√«—¥ ”À√—∫ß“πª√–¥‘…∞å ‘ËߢÕß®“°«— ¥ÿ‡À≈◊Õ„™â
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 116 Surachai Meechan
√–¥—∫§ÿ≥¿“æ
√“¬°“√ 3 2 1
(¥’) (æÕ„™â) (§«√ª√—∫ª√ÿß)
°“√‡µ√’¬¡ß“π – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥âæÕ – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥âæÕ – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥â‰¡à
‡æ’¬ß·≈–‡À¡“– ¡ ‡æ’¬ß·≈–‡À¡“– ¡∫“ß æՇ撬ß
à«π
§«“¡§‘¥√‘‡√‘Ë¡ √â“ß √√§å §«“¡§‘¥ º≈ß“π ºŸâ‡√’¬π§‘¥ §«“¡§‘¥ º≈ß“π ºŸâ‡√’¬π §«“¡§‘¥ º≈ß“π ≈Õ°
¢÷Èπ‡Õß §âπ§«â“ ≈Õ°‡≈’¬π·∫∫ ‡≈’¬π·∫∫®“°‡æ◊ÕË π
®“°Àπ—ß ◊Õ
2. §«“¡µàÕ‡π◊ËÕߢÕß°“√查
°“√查¥”‡π‘π‰ªÕ¬à“ß√“∫√◊ËπÀ√◊Õ‰¡à ?
3. §«“¡∂Ÿ°µâÕß„π°“√„™â¿“…“
„™â¿“…“‰¥â∂Ÿ°µâÕßÀ√◊Õ‰¡à ?
4. §«“¡‡À¡“– ¡¢ÕßπÈ”‡ ’¬ß
„™âπÈ”‡ ’¬ß‡À¡“– ¡À√◊Õ‰¡à ?
ºŸªâ √–‡¡‘π´÷ßË π”‡ πÕ‰«â‚¥¬ Judith A. Burry-Stock ·≈– 0-1-2-3, 1-2-3-4 À√◊ÕÕ◊Ëπ Ê ´÷Ëß„π°“√§”π«≥À“
§≥– (Burry-Stock & other, 1996) ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π∑’®Ë –°≈à“«∂÷ßµàÕ‰ªπ’È
ºŸ‡â ¢’¬π®–‰¥â𔇠πÕ·¬°‡ªìπª√–‡¥Áπ¬àÕ¬ Ê µ“¡®”π«π
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ¢Õß惵‘°√√¡∫àß™’À È √◊ÕÕߧåª√–°Õ∫∑’¡Ë ßÿà «—¥ ®”π«π¢Õß
‡√“ “¡“√∂„™â¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâ π—°‡√’¬πÀ√◊Õº≈ß“π(„π°√≥’∑’˵âÕß°“√ª√–‡¡‘πº≈ß“π)
ª√–‡¡‘π ‡æ◊ÕË µ√«® Õ∫§ÿ≥¿“æ¢Õ߇§√◊ÕË ß¡◊Õ«—¥∑’°Ë ”Àπ¥ ·≈–®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥ ‚¥¬¡’°“√‡æ‘Ë¡‡µ‘¡
§–·ππ‰«â‡ªìπ™à«ß Ê ‰¥âÕ¬à“ßÀ≈“°À≈“¬ ∑—Èß∑’Ë„Àâ µ—«·ª√·≈– —≠≈—°…≥å„π Ÿµ√§”π«≥‡¥‘¡∫â“߇≈Á°πâÕ¬
§–·ππ·∫∫ 0-1 À√◊Õ·∫∫À≈“¬§à“µà“ß Ê ‡™àπ „Àâ ∑—Èßπ’ȥ⫬§«“¡§“¥À«—ß«à“®–™à«¬„Àâ ◊ËÕ§«“¡‡¢â“„®‰¥â¥’
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 118 Surachai Meechan
¬‘Ëߢ÷Èπ ·≈–∑ÿ°§√—Èß∑’Ë¡’°“√°≈à“«∂÷ߥ—™π’§«“¡ Õ¥§≈âÕß R1-R2
√–À«à“ߺŸâª√–‡¡‘π∑’˧”π«≥¡“‰¥â®–À¡“¬∂÷߇©æ“–°√≥’ RAI = 1- ................ 1
∑’˺Ÿâª√–‡¡‘π∑ÿ°§π‰¥â√—∫§”™’È·®ß·≈–Ωñ°Ωπ°“√„™â‡§√◊ËÕß I-1
¡◊Õ«—¥Õ¬à“ߥ’∑ ’Ë ¥ÿ ·≈â« ∑—ßÈ π’‡È æ◊ÕË „À⥙— π’¥ß— °≈à“« “¡“√∂ ‚¥¬∑’Ë
∫àß™’ȉª∂÷ߧÿ≥¿“æ¢Õ߇§√◊ËÕß¡◊Õ«—¥Õ¬à“ß·∑â®√‘ß ‡æ√“– RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
∂Ⓣ¡à„™à ¥—™π’π’ÈÕ“®®–∫àß™’È°≈—∫‰ª¬—ß¡“µ√∞“π¢ÕߺŸâ R1 ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 1
ª√–‡¡‘π·∑π (·µà°Á§ß‰¡à„™à‡√◊ËÕ߬“°π—° À“°®–≈Õß R2 ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 2
‡™◊ÕË ¡‚¬ß§«“¡§‘¥®“°ª√–‡¥Áπ·√°‰ª Ÿªà √–‡¥Áπ∑’ Ë ÕßÀ√◊Õ I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
ª√–‡¥ÁπÕ◊Ëπ Ê µàÕ‰ªÕ’°) ¥—ß√“¬≈–‡Õ’¬¥µàÕ‰ªπ’È (µ“¡‡°≥±å°“√„À⧖·ππ)
1. °√≥’∑¡’Ë æ’ ƒµ‘°√√¡∫àß™’‡È æ’¬ßÀπ÷ßË µ—« π—°‡√’¬π ∑—Èßπ’È¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®–¡’
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘π 2 §π §à“ Ÿß ÿ¥‡∑à“°—∫ 1 ‡¡◊ËÕºŸâª√–‡¡‘π∑—Èß Õߧπ„À⧖·ππ
„π°√≥’∑∑’Ë ¥≈Õß„™â‡§√◊ÕË ß¡◊Õ«—¥π—πÈ °—∫π—°‡√’¬π ‡∑à“°—π ·≈–¡’§à“µË” ÿ¥‡∑à“°—∫ 0 ‡¡◊ËÕºŸâª√–‡¡‘π 2 §π
‡æ’¬ß§π‡¥’¬«‚¥¬¡’惵‘°√√¡∫àß™’ȇ撬ßÀπ÷Ëßµ—«·≈–¡’ºŸâ π—Èπ„À⧖·ππµà“ß°—π ÿ¥‚µàßÀ√◊Õ «π∑“ß°—πÕ¬à“ß ‘Èπ‡™‘ß
ª√–‡¡‘π 2 §π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π·µà≈–§π®÷ß¡’ °≈à“«§◊ÕÀ“°§πÀπ÷Ëß„À⧖·ππ Ÿß ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â
‡æ’¬ß 1 §à“‡™àπ‡¥’¬«°—π ¥—ßπ—πÈ „π°“√§”π«≥À“¥—™π’§«“¡ Õ’°§πÀπ÷Ëß®–„À⧖·ππµË” ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â ´÷Ëß®–
Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π 2 §π„¥ Ê ®÷ß “¡“√∂„™â ∑”„Àâ º ≈µà “ ߢÕߧ–·ππ∑’Ë ‰ ¥â ® “°ºŸâ ª √–‡¡‘ π ∑—È ß Õß
·π«§‘¥æ◊Èπ∞“πÕ¬à“ßßà“¬‰¥â«à“ À“°ºŸâª√–‡¡‘π∑—Èß Õß„Àâ (§à“ —¡∫Ÿ√≥å¢Õß R1-R2 : R1-R2) ¡’§à“‡∑à“°—∫ I - 1
§–·ππ‡∑à“°—π·≈â« çº≈µà“ߢÕߧ–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π Õ—π®– àߺ≈„Àâ RAI ¡’§à“‡∑à“°—∫ 0 ¥—ß°≈à“«·≈â«
∑—Èß Õßé ®–¡’§à“‡∑à“°—∫ 0 ´÷Ëß®– àߺ≈„Àâ —¥ à«π (pro- Õ¬à“߉√°Áµ“¡„π°“√𔉪ª√–¬ÿ°µå„™â°‰Á ¡à‰¥â¡°’ “√
portion) ¢Õß çº≈µà“ߢÕߧ–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π °”À𥇰≥±å ‰ «â Õ ¬à “ ߇¥à π ™— ¥ «à “ ¥— ™ π’ § «“¡ Õ¥§≈â Õ ß
∑—Èß Õßé °—∫ çº≈µà“ß Ÿß ÿ¥¢Õߧ–·ππ∑’ˇªìπ‰ª‰¥âé ¡’ √–À«à“ߺŸâª√–‡¡‘π∑’˧”π«≥‰¥â§«√¡’§à“‡∑à“„¥®÷ß®–∂◊Õ«à“
§à“‡∑à“°—∫ 0 ¥â«¬ (¡’§«“¡ Õ¥§≈âÕß°—πÕ¬à“ß ¡∫Ÿ√≥å) ¡’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π¡“°æÕ∑’Ë®–¬Õ¡√—∫
·µà‡¡◊ËÕ„¥∑’˺Ÿâª√–‡¡‘π∑—Èß Õß„À⧖·ππµà“ß°—π¡“°¢÷Èπ ‡æ√“–¿“¬„µâ‡ß◊ËÕπ‰¢¢Õß°“√ªØ‘∫—µ‘®√‘ß ‡√“®”‡ªìπµâÕß
—¥ à«π¥—ß°≈à“«°Á®–¡’§à“ Ÿß¢÷Èπµ“¡‰ª¥â«¬ ‚¥¬®–¡’§à“ æ‘ ® “√≥“µ— ¥ ‘ π „®¥â « ¬«à “ ®“°®ÿ ¥ ª√– ß§å ¢ Õß°“√„™â
‡∑à“°—∫ 1 ‡¡◊ËÕ§–·ππ∑—Èß Õßµà“ß°—π ÿ¥¢—È« ¥—ßπ—ÈπÀ“° ‡§√◊ËÕß¡◊Õ«—¥„π§√—Èßπ—Èπ Ê ®”‡ªìπµâÕß„™â‡§√◊ËÕß¡◊Õ∑’Ë¡’
°”Àπ¥„Àâ I ·∑π ®”π«π¢Õߧ–·ππ∑’‡Ë ªìπ‰ª‰¥â∑ß—È À¡¥ §ÿ≥¿“æ¡“°πâÕ¬‡æ’¬ß„¥ ¥—ßπ—Èπ°“√·ª≈§«“¡À¡“¬
‡™àπ ‡¡◊ÕË °”À𥧖·ππ‰«â‡ªìπ ç0-1-2-3 §–·ππé °√≥’ ¢Õß§à“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π∑’ªË √“°Ø„π
π’È®–¡’®”π«π¢Õߧ–·ππ∑’ˇªìπ‰ª‰¥â ‡∑à“°—∫ 4 §à“ (I = ∫∑§«“¡π’®È ß÷ ‡ªìπ°“√„™â§”µ“¡§«“¡À¡“¬Õ¬à“ß°«â“ß Ê
4) ¥—ßπ—πÈ º≈µà“ß Ÿß ÿ¥¢Õߧ–·ππ∑’‡Ë ªìπ‰ª‰¥â®“°ºŸªâ √–‡¡‘π ‡æ’¬ß‡æ◊ËÕ„Àâ ◊ËÕ§«“¡°—π‚¥¬∑—Ë«‰ª‰¥â‡∑à“π—Èπ
2 §π„¥ Ê ®÷ß¡’§à“‡∑à“°—∫ I - 1 À√◊Õ 4 - 1 À√◊Õ 3 µ—«Õ¬à“ß
§–·ππ¥—ßπ—πÈ À“°ºŸªâ √–‡¡‘π∑—ßÈ Õß„À⧖·ππµà“ß°—π ÿ¥¢—«È ®“°°“√ª√–‡¡‘πß“πª√–¥‘…∞å„∫µÕß°≈’∫∫—«À≈«ß
§◊Õ ç0 °—∫ 3é ¬àÕ¡ –∑âÕπ„Àâ‡ÀÁπ«à“‰¡à¡§’ «“¡ Õ¥§≈âÕß ¢Õßπ—°‡√’¬π§πÀπ÷Ëß‚¥¬ºŸâª√–‡¡‘π 2 §π ¥â«¬‡§√◊ËÕß¡◊Õ
√–À«à“ߺŸªâ √–‡¡‘π∑—ßÈ Õߧππ—πÈ „π∑”πÕß°≈—∫°—πÀ“°ºŸâ «—¥∑’Ë¡’‡°≥±å°“√„À⧖·ππ √«¡ 4 §à“ §◊Õ 1-2-3-4
ª√–‡¡‘π∑—Èß Õß„À⧖·ππ‡∑à“°—π°Á· ¥ß«à“¡’§«“¡ Õ¥- §–·ππ (®“°µ—«Õ¬à“ß∑’Ë 1)
§≈âÕß√–À«à“ߺŸªâ √–‡¡‘πÕ¬à“ß ¡∫Ÿ√≥å ®“°À≈—°°“√æ◊πÈ ∞“π ¡¡µ‘«à“ ºŸâª√–‡¡‘π§π·√°„Àâ 4 §–·ππ ·≈–ºŸâ
π’È®÷ßÕ“®°≈à“«Õ¬à“ß√«∫√—¥∂÷ß Ÿµ√∑’Ë„™â„π°“√§”π«≥À“ ª√–‡¡‘ π §π∑’Ë Õß„Àâ ‡ æ’ ¬ ß 2 §–·ππ º≈µà “ ߢÕß
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π (2 §π) ‰¥â¥—ßπ’È §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π∑—Èß Õß À√◊Õ R1-R2 ®–¡’
«. ߢ≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. - .§. 2547 119 ÿ√™—¬ ¡’™“≠
§à“‡∑à“°—∫ 2 §–·ππ ¢≥–∑’˺≈µà“ß Ÿ¥ ÿ¥∑’ˇªìπ‰ª‰¥â M
‡∑à“°—∫ I - 1 À√◊Õ 4 - 1 À√◊Õ 3 §–·ππ ¥—ßπ—Èπ RAI ΣR
m=1 m
R=
®–¡’ §à “ ‡∑à “ °— ∫ 0.33 ´÷Ë ß §à “ ¥— ß °≈à “ «π’È · ¥ß„Àâ ‡ ÀÁ π M
«à“°“√µ—¥ ‘π§√—ßÈ π’‰È ¡à¡¡’ “µ√∞“πæÕ∑’®Ë –¬Õ¡√—∫‰¥â ‡æ√“–
·¡â®–¡’‡°≥±å°“√„À⧖·ππ∑’Ë°”À𥉫â√à«¡°—π·≈â« ·µà M ·∑π ®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥
ºŸâª√–‡¡‘π∑—Èß Õß°Á¬—߉¡à “¡“√∂„À⧖·ππÕ¬à“ß Õ¥ I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
§≈âÕß°—π‰¥â ∑—Èßπ’È®÷ß¡’§«“¡®”‡ªìπµâÕßæ‘®“√≥“·°â‰¢ (µ“¡‡°≥±å°“√„À⧖·ππ)
‡°≥±å°“√„À⧖·ππ„Àâ¡’§ÿ≥¿“æµàÕ‰ª ∑—Èßπ’ÈÀ“°æ‘®“√≥“‚¥¬Õ“»—¬À≈—° ∂‘µ‘®–‡ÀÁπ‰¥â
„π°√≥’∑’Ë°”À𥧖·ππ‰«â‡æ’¬ß 2 §à“ (I = 2) «à“º≈≈—æ∑å¢Õߧ–·ππ·µà≈–µ—«≈∫¥â«¬§à“‡©≈’ˬ (Rm-R)
‡™àπ ‡¡◊ËÕ„Àâ 0-1 À√◊Õ 1-2 §–·ππ ®–∑”„Àâ I - 1 ¡’ °Á§◊Õ §–·ππ‡∫’ˬ߇∫π (deviate score) π—Ëπ‡Õß ´÷ËßÀ“°
§à“‡∑à“°—∫ 1 ®÷ß “¡“√∂‡¢’¬π Ÿµ√„À¡à„Àâßà“¬¢÷Èπ°«à“ º≈√«¡¢Õß§à“ —¡∫Ÿ√≥å¢Õߧ–·ππ‡∫’ˬ߇∫π∑—ÈßÀ¡¥¡’§à“
‡¥‘¡‰¥â¥ß— π’È ¡“°¬àÕ¡· ¥ß«à“ºŸªâ √–‡¡‘π·µà≈–§π„À⧖·ππ∑’·Ë µ°µà“ß
RAI = 1 - R1-R2 ................ 2 °—π¡“° „π∑“ßµ√ß°—π¢â“¡∂⓺≈√«¡¥—ß°≈à“«¡’§à“≈¥µË”
≈ß°Á· ¥ß«à“ºŸªâ √–‡¡‘π„À⧖·ππ‰¥âÕ¬à“ß Õ¥§≈âÕß°—π¡“°
·¡â«à“‚Õ°“ ∑’Ë®–‰¥â„™â Ÿµ√∑’Ë 1 ·≈– 2 §ß¡’‰¡à ¢÷Èπ¥â«¬ ‚¥¬‡¡◊ËÕ„¥∑’˺Ÿâª√–‡¡‘π∑ÿ°§π “¡“√∂„À⧖·ππ
∫àÕ¬π—° ‡æ√“–‡§√◊ËÕß¡◊Õ«—¥∑’ˇ√“ √â“ߢ÷Èπ¡—°®–∂Ÿ°π”‰ª ‰¥â‡∑à“°—π §–·ππ‡∫’ˬ߇∫π∑ÿ°µ—«°Á®–¡’§à“‡∑à“°—∫ 0 ´÷Ëß
∑¥≈Õß„™â°—∫π—°‡√’¬π®”π«π¡“° ·≈–‚¥¬∑—Ë«‰ª°Á¡—°®– ®–∑”„Àâ RAI ¡’§à“‡∑à“°—∫ 1 ¥—ßπ—ÈπÀ“°‡√“¬âÕπ°≈—∫‰ª
¡’惵‘°√√¡∫àß™’ÈÀ≈“¬ Ê µ—« ·µà “‡Àµÿ∑’Ëπ” Ÿµ√π’È¡“ æ‘®“√≥“ Ÿµ√∑’Ë 1 Õ’°§√—ßÈ ®–æ∫«à“‡ªìπ Ÿµ√‡¥’¬«°—∫ Ÿµ√∑’Ë
°≈à“«∂÷߉«â¥â«¬°Á‡æ◊ËÕ„Àâ∑√“∫·π«§‘¥æ◊Èπ∞“π¢Õß°“√ 3 π—πË ‡Õß ‡æ’¬ß·µà¡°’ “√ª√—∫‡ª≈’¬Ë π√Ÿª ¡°“√„À¡à ‡æ√“–
æ—≤π“ Ÿµ√µà“ß Ê ∑’Ë´—∫´âÕπ¢÷Èπ¥—ß∑’Ë®–‰¥â°≈à“«∂÷ßµàÕ‰ª „π°√≥’∑’Ë¡’ºŸâª√–‡¡‘π 2 §π (M = 2) §à“¢Õß M - 1 ®–
2. °√≥’∑¡’Ë æ’ ƒµ‘°√√¡∫àß™’‡È æ’¬ßÀπ÷ßË µ—« π—°‡√’¬π ‡∑à“°—∫ 1 ®÷߉¡àª√“°Ø M - 1 Õ¬Ÿà„π Ÿµ√¥—ß°≈à“« ·≈–
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘πÀ≈“¬§π 2
„π°√≥’∑’Ë𔇧√◊ËÕß¡◊Õ«—¥∑’Ë¡’惵‘°√√¡∫àß™’È „π∑“ß ∂‘µ‘π—Èπ Σ Rm-R ¬àÕ¡¡’§à“‡∑à“°—∫R1-R2
m=1
‡æ’¬ßÀπ÷Ëßµ—«‰ª∑¥≈Õß„™â°—∫π—°‡√’¬π‡æ’¬ß§π‡¥’¬« ·µà
°”Àπ¥„Àâ¡’ºŸâª√–‡¡‘πÀ≈“¬§π ‡√“ “¡“√∂§”π«≥ ®÷ß “¡“√∂„™â·∑π°—π‰¥â‡ ¡Õ ´÷Ëß„π°√≥’π’È∑à“π “¡“√∂
À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π‰¥â¥â«¬ Ÿµ√¥—ß æ‘ ® “√≥“∂÷ ß §«“¡‡∑à “ °— π ¢Õß∑—È ß §Ÿà ‰ ¥â ¥â « ¬‡ â π °√“ø
µàÕ‰ªπ’È µàÕ‰ªπ’È
M
Σ R -R
m=1 m
RAI = 1- ................ 3 R1 R R2
(M-1) (I-1)
‚¥¬∑’Ë
RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π µ—«Õ¬à“ß
Rm ·∑π §–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π§π∑’Ë m (m ¡¡µ‘«à“§–·ππß“πª√–¥‘…∞å∂“¥„∫µÕß°≈’∫∫—«
= 1, 2, 3,......,M) À≈«ß¢Õßπ—°‡√’¬π§πÀπ÷Ëß∑’ˉ¥â®“°ºŸâª√–‡¡‘π 3 §π ¡’
R ·∑π §–·ππ‡©≈’ˬ À√◊Õ§à“‡©≈’ˬ‡≈¢§≥‘µ §à“‡∑à“°—∫ 3, 3 ·≈– 2 §–·π𠵓¡≈”¥—∫ ‡√“
(arithmetic mean) ¢Õߧ–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π∑ÿ°§π “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
´÷Ëߧ”π«≥‰¥â®“° Ÿµ√ ‰¥â¥ß— π’È
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 120 Surachai Meechan
3
Σ Rm-R= 1.33
m=1
§–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π
√“¬°“√ª√–‡¡‘π
§π∑’Ë 1 §π∑’Ë 2
1. §«“¡µ√ߢÕ߇π◊ÈÕÀ“ 2 3
2. §«“¡µàÕ‡π◊ËÕߢÕß°“√查 1 1
3. §«“¡∂Ÿ°µâÕß„π°“√„™â¿“…“ 3 2
4. §«“¡‡À¡“– ¡¢ÕßπÈ”‡ ’¬ß 2 2
«. ߢ≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. - .§. 2547 121 ÿ√™—¬ ¡’™“≠
®“°§–·ππ∑’˪√“°Æ “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ‰¥â¥—ßπ’È
4
Σ R -R = 2
k=1 1k 2k
3
k R1k R2k R3k Rk R1k-Rk R2k-Rk R3k-Rk Σ R -R
m=1 mk k
1 2 3 2 2.33 0.33 0.67 0.33 1.33
2 1 1 1 1 0 0 0 0
3 3 2 3 2.67 0.33 0.67 0.33 1.33
4 2 2 2 2 0 0 0 0
4 3
Σ Σ R -R = 2.66
k=1 m=1 mk k
·∑π§à“µà“ß Ê ≈ß„π Ÿµ√§”π«≥ ®–‰¥â ‡¢’ ¬ π®÷ ß ¡’ § «“¡‡™◊Ë Õ «à “ ·¡â · µà ºŸâ ∑’Ë ‰ ¡à §à Õ ¬™◊Ë π ™Õ∫À√◊ Õ
—π∑—¥∑“ߥâ“π§≥‘µ»“ µ√å¡“°π—° À“°‰¥â≈Õß∑”§«“¡
K N M
Σ Σ Σ Rmnk-Rnk
k=1 n=1 m=1
‡¢â“„®¢—ÈπµÕπ°“√§”π«≥¥—ß°≈à“«Õ¬à“ß≈–‡Õ’¬¥ —°Àπ÷Ëß
RAI = 1- À√◊ Õ Õߧ√—È ß °Á πà “ ®–™à « ¬„Àâ ‡ °‘ ¥ §«“¡‡¢â “ „®„π·µà ≈ –
KN(M-1)(I-1) ª√–‡¥Á π ‰¥â ‚ ¥¬‰¡à ¬ “°π— ° ·≈–‡π◊Ë Õ ß®“°„π‚≈°¬ÿ §
20.63 ªí®®ÿ∫π— ‡√“¡’‡§√◊ÕË ß™à«¬§”π«≥µà“ß Ê Õ¬Ÿ‡à ªìπ®”π«π¡“°
= 1- ®÷߇™◊ËÕÕ’°«à“∂â“ “¡“√∂∑”§«“¡‡¢â“„®À≈—°°“√æ◊Èπ∞“π
(4)(5)(3-1)(4-1)
®π∑√“∫∂÷ ß ∑’Ë ¡ “∑’Ë ‰ ª¢Õß Ÿ µ √‡À≈à “ π’È ‰ ¥â · ≈â « °“√
= 0.83 §”π«≥§à“µà“ß Ê ∑’Ë®–‡°‘¥¢÷Èπ∂—¥®“°π’ȧ߉¡à„™à‡√◊ËÕ߬ÿàß
¬“°·µàª√–°“√„¥ ¥—ßπ—Èπ®÷߇ªìπ ‘Ëß ¡§«√Õ¬à“߬‘Ëß∑’˧√Ÿ
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“ ®–‰¥â„™â§«“¡Õÿµ “À–¢Õßµπ„π°“√ √â“ß·≈–æ—≤π“
‡∑à“°—∫ 0.83 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“·∫∫«—¥∑—°…–°“√查 ‡§√◊ÕË ß¡◊Õ«—¥„À⡧’ ≥ ÿ ¿“æ Ÿß ÿ¥‡∑à“∑’æ Ë ß÷ ®–°√–∑”‰¥â ∑—ßÈ π’È
Àπâ“™—Èπ©∫—∫π’È¡’§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µàÀ“°ª√—∫ª√ÿß ‡æ◊Ë Õ ™à « ¬°— π ‡æ‘Ë ¡ §«“¡πà “ ‡™◊Ë Õ ∂◊ Õ „Àâ °— ∫ °√–∫«π°“√
‡°≥±å ° “√„Àâ § –·ππ„π∫“ß惵‘ ° √√¡„Àâ ™— ¥ ‡®π®π «—¥º≈°“√‡√’¬π√Ÿâ ´÷Ëß®– àߺ≈ ◊∫‡π◊ËÕ߉ª∂÷ß¡“µ√∞“π
“¡“√∂ ◊ËÕ§«“¡‰¥âµ√ß°—π¡“°°«à“π’È°Á®–¥’¡“° ‚¥¬ ¢Õß°“√®—¥°“√»÷°…“‚¥¬√«¡‰¥â„πÕ𓧵
‡©æ“–惵‘°√√¡∑’Ë 1 ´÷Ëß¡’º≈√«¡¢Õß§à“ —¡∫Ÿ√≥å¢Õß
§–·ππ‡∫’ˬ߇∫π Ÿß∑’Ë ÿ¥ ‡Õ° “√Õâ“ßÕ‘ß
®“° Ÿµ√§”π«≥∑—ÈßÀ¡¥∑’Ë°≈à“«¡“®÷߇ÀÁπ‰¥â«à“ √ÿâß»‘√‘π∑√å ®—π∑√åÀÕ¡. (2545). °“√ √â“߇°≥±å°“√ª√–‡¡‘π
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π‰¡à‰¥âÕ“»—¬À≈—° º≈ß“π∑“ߧÀ°√√¡»“ µ√å¥â«¬√Ÿ∫√‘§ (Rubrics
°“√·≈–¢—ÈπµÕπ°“√§”π«≥∑’ˬÿà߬“°·µàª√–°“√„¥ ºŸâ Assessment). «“√ “√»÷°…“»“ µ√å, 14(1), 23-29.
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 126 Surachai Meechan
ÿ«‘¡≈ «àÕß«“≥‘™. (2535). Àπ૬∑’Ë 12 °“√ √â“߇§√◊ËÕß Burry-Stock, Judith A. and other. (1996). Rater
¡◊Õ«—¥º≈¥â“π∑—°…–æ‘ —¬. ‡Õ° “√ª√–°Õ∫°“√ Õπ Agreement Indexes for Performance Assess-
™ÿ¥«‘™“°“√æ—≤π“·∫∫∑¥ Õ∫«—¥º≈ —¡ƒ∑∏‘∑Ï “ß°“√ ment. Educational and Psychological
‡√’¬π (Àπâ“ 481-558). °√ÿ߇∑æœ : ¡À“«‘∑¬“≈—¬ Measurement, 56(2), 251-262.
ÿ‚¢∑—¬∏√√¡“∏‘√“™.