Rater Agreement Index (RAI) : Surachai Meechan

Download as pdf or txt
Download as pdf or txt
You are on page 1of 14

ARTICLE

Rater Agreement Index (RAI)


Surachai Meechan
Ed.D. (Testing and Measurement), Lecturer,
Department of Educational Evaluation and Research, Faculty of Education,
Prince of Songkla University
E-mail : [email protected]

Abstract
We can use Rater Agreement Index (RAI) as an index of agreement level of scores gained from two or
more raters. This index has a value from 0 to 1. If its value is nearly to 1, it means the raters have a strong
agreement in scoring. On the other hand, if its value is nearly to 0, it means that that agreement is not strong.
Thus, if the raters are trained and have a good knowledge of scoring, this index can indicate the standard of those
scoring rubrics.
Keywords : performance assessment, rater agreement index, scoring rubrics

Songklanakarin Journal of Social Sciences and Humanities 10(1) Jan - Apr 2004 : 113-126
√—∫µâπ©∫—∫ 1 ‡¡…“¬π 2546 ª√—∫ª√ÿß-·°â‰¢µ“¡¢âÕ‡ πÕ·π–¢ÕߺŸâ∑√ߧÿ≥«ÿ≤‘ 7 惻®‘°“¬π 2546
√—∫≈ßµ’æ‘¡æå 23 °ÿ¡¿“æ—π∏å 2547
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 114 Surachai Meechan

∫∑§«“¡

¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π
 ÿ√™—¬ ¡’™“≠
°».¥. (°“√∑¥ Õ∫·≈–«—¥º≈°“√»÷°…“), Õ“®“√¬å
¿“§«‘™“ª√–‡¡‘πº≈·≈–«‘®—¬∑“ß°“√»÷°…“ §≥–»÷°…“»“ µ√å ¡À“«‘∑¬“≈—¬ ß¢≈“π§√‘π∑√å
E- mail : [email protected]

∫∑§—¥¬àÕ

¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π (Rater Agreement Index : RAI) ‡ªìπµ—«∫àß™’È∂÷ß√–¥—∫§«“¡


 Õ¥§≈âÕß°—π¢Õߧ–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π 2 §π À√◊Õ¡“°°«à“ ‚¥¬¥—™π’π’È®–¡’§à“µ—Èß·µà 0-1 ‡¡◊ËÕ„¥∑’Ë¡’§à“‡¢â“„°≈â 1
· ¥ß«à“ºŸâª√–‡¡‘π “¡“√∂„À⧖·ππ‰¥âÕ¬à“ß Õ¥§≈âÕß°—π Ÿß¡“° ·µà∂â“¡’§à“‡¢â“„°≈â 0 °Á· ¥ß«à“¡’§«“¡ Õ¥§≈âÕß°—π‰¡à
¡“°π—° ¥—ßπ—πÈ À“°ºŸªâ √–‡¡‘π§◊ÕºŸ∑â ‰’Ë ¥â√∫— °“√Ωñ°Ωπ ·≈–¡’§«“¡√Ÿ§â «“¡‡¢â“„®‡°’¬Ë «°—∫‡°≥±å°“√„À⧖·ππÕ¬à“ߥ’·≈â« ¥—™π’
π’È®–™à«¬∫àß™’È∂÷ß¡“µ√∞“π¢Õ߇°≥±å°“√„À⧖·ππ¥—ß°≈à“«‰¥â

§” ”§—≠ : °“√«—¥¿“§ªØ‘∫—µ‘, ‡°≥±å°“√„À⧖·ππ, ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π

∫∑π”
∑ÿ°§√—ßÈ ∑’®Ë ¥— „Àâ¡°’ “√«—¥º≈°“√‡√’¬π√Ÿ„â πÀâÕ߇√’¬π ‡¡◊ÕË ®–«—¥§«“¡ “¡“√∂„π°“√ªØ‘∫µ— °‘ ®Á ”‡ªìπµâÕ߇°’¬Ë «¢âÕß
§«√¡’‡ªÑ“À¡“¬À≈—°‡æ◊ÕË §âπÀ“®ÿ¥‡¥àπ ·≈–¢âÕ∫°æ√àÕß„π °—∫∑—°…–„π°√–∫«π°“√ (process) ·≈–§ÿ≥¿“æ¢Õß
°“√‡√’¬π√Ÿ¢â Õßπ—°‡√’¬π·µà≈–§π ‡æ◊ÕË ∑’§Ë √Ÿ®–‰¥âÀ“·π«∑“ß º≈ß“π (product) ∑’Ëπ—°‡√’¬π‰¥â®—¥°√–∑”¢÷Èπ ´÷Ëß®”‡ªìπ
 à߇ √‘¡·≈–ª√—∫ª√ÿß·°â‰¢‰¥âÕ¬à“ß∂Ÿ°µâÕß·≈– Õ¥§≈âÕß µâÕßÕ“»—¬¥ÿ≈¬æ‘π‘®¢ÕߺŸâª√–‡¡‘π∑—Èß ‘Èπ
‡À¡“– ¡°—∫ ¿“æ¢Õß·µà≈–∫ÿ§§≈¡“°∑’Ë ÿ¥ ¥—ßπ—Èπ ·µàª≠í À“∑’§Ë √Ÿ·≈– ∂“π»÷°…“µà“ß Ê ª√– ∫Õ¬Ÿà
 ‘Ëß ”§—≠Õ¬à“ß¡“°∑’˧√Ÿ§«√¥”‡π‘π°“√°Á§◊Õ°“√ √â“ß ‡ ¡Õ°Á§◊Õ°“√¢“¥‡§√◊ËÕß¡◊Õ«—¥¿“§ªØ‘∫—µ‘∑’Ë¡’§ÿ≥¿“æ
‡§√◊ÕË ß¡◊Õ«—¥º≈°“√‡√’¬π√Ÿ∑â ¡’Ë §’ ≥ÿ ¿“æ·≈–°“√𔇧√◊ÕË ß¡◊Õ ‚¥¬‡©æ“–‡§√◊ËÕß¡◊Õ∑’Ë¡’‡°≥±å°“√„À⧖·ππ (scoring
«—¥π—Èπ‰ª„™âÕ¬à“ß∂Ÿ°µâÕß ‚¥¬‡©æ“–¬ÿ§ªí®®ÿ∫—π∑’Ë°“√ rubrics) ∑’‡Ë À¡“– ¡·≈–‡ªìπ∑’¬Ë Õ¡√—∫®“°∑ÿ°ΩÉ“¬∑’‡Ë °’¬Ë «
«—¥º≈°“√‡√’¬π√Ÿ‰â ¥â‡πâπÀπ—°‰ª∑’°Ë “√«—¥¿“§ªØ‘∫µ— ‘ (per- ¢âÕß ·≈–∂÷ß·¡â®–¡’ °Áæ∫«à“ à«π„À≠à‰¡à‰¥âµ√«® Õ∫
formance assessment) ´÷Ëß¡ÿà߇πâπ‰ª∑’Ë°“√°√–∑”À√◊Õ §ÿ≥¿“æÕ¬à“߇µÁ¡°√–∫«π°“√¡“°π—° ‚¥¬‡©æ“–°“√
°“√ªØ‘∫—µ‘‰¥â¢Õßπ—°‡√’¬π·µà≈–§π¡“°¬‘Ëߢ÷Èπ ¥â«¬‡Àµÿ µ√«® Õ∫«à“‡§√◊ËÕß¡◊Õπ—Èπ®– “¡“√∂𔉪„™â‰¥âÕ¬à“ß
π’ȇÕߪ√– ‘∑∏‘¿“æ¢Õß°“√«—¥º≈°“√‡√’¬π√Ÿâ®÷ߢ÷ÈπÕ¬Ÿà°—∫ ‡∑’ˬߵ√ß·≈–¬ÿµ‘∏√√¡°—∫π—°‡√’¬π∑ÿ°§πÀ√◊Õ‰¡à ∑—Èßπ’È
§ÿ≥¿“æ¢Õß·∫∫ —߇°µÀ√◊Õ‡§√◊ËÕß¡◊Õ«—¥Õ◊Ëπ Ê ∑’˵âÕß  à«πÀπ÷ßË §ß‡ªìπ‡æ√“–‰¡à∑√“∫«‘∏°’ “√ ¢≥–∑’∫Ë “ß à«πÕ“®
„™â¥≈ÿ ¬æ‘π®‘ ¢ÕߺŸªâ √–‡¡‘π (rater) ¡“°¬‘ßË ¢÷πÈ ¥â«¬ ‡æ√“– ‰¡à‡ÀÁ𧫓¡®”‡ªìπ ·µàÀ“°‡√“¡ÿàßÀ«—ß„Àâ°“√«—¥·≈–
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 115  ÿ√™—¬ ¡’™“≠
ª√–‡¡‘ π º≈°“√‡√’ ¬ π√Ÿâ „ π∑ÿ ° §√—È ß ¡’ ¡ “µ√∞“π‡ªì π ∑’Ë ·≈–ª√–‡¡‘πº≈°“√»÷°…“∑’Ëæ‘¡æ出¬·æ√àÕ¬Ÿà∑—Ë«‰ª ·≈–
¬Õ¡√—∫®“°∑ÿ°ΩÉ“¬ °Á¡’§«“¡®”‡ªìπÕ¬à“߬‘Ëß∑’ˇ§√◊ËÕß¡◊Õ µ“¡·π«∑“ß∑’ªË Ø‘∫µ— °‘ π— ‚¥¬∑—«Ë ‰ªπ—πÈ ºŸ â √â“߇§√◊ÕË ß¡◊Õ«—¥
«—¥µà“ß Ê §«√®–‰¥â√—∫°“√µ√«® Õ∫§ÿ≥¿“æÕ¬à“ߥ’ °Á¡’Õ‘ √–∑’Ë®–°”Àπ¥√Ÿª≈—°…≥å¢Õß·∫∫∫—°∑÷°§–·ππ
∑’Ë ÿ¥‡∑à“∑’Ë®–∑”‰¥â°àÕπ𔉪„™â®√‘ß ∑—Èßπ’È°Á‡æ◊ËÕ„À≥âº≈ ‰¥âÕ¬à“ßÀ≈“°À≈“¬ ¢÷ÈπÕ¬Ÿà°—∫§«“¡æ÷ßæÕ„®·≈–§«“¡
°“√«—¥∑’Ë∂Ÿ°µâÕß·≈–πà“‡™◊ËÕ∂◊Õ¡“°∑’Ë ÿ¥  –¥«°„π°“√𔉪„™â‡ªì𠔧—≠
§ÿ≥¿“æª√–°“√Àπ÷Ëß∑’Ë ”§—≠¬‘ËߢÕ߇§√◊ËÕß¡◊Õ √ÿâß»‘√‘π∑√å ®—π∑√åÀÕ¡ (2545, 26) ‰¥â𔇠πÕ
«—¥¿“§ªØ‘∫—µ‘ §◊Õ §«“¡™—¥‡®π·≈– ◊ËÕ§«“¡‰¥âµ√ß°—π µ—«Õ¬à“߇°≥±å°“√„À⧖·ππ  ”À√—∫„™â„π°“√«—¥¿“§
´÷Ë߇√’¬°°—π«à“ §«“¡‡ªìπª√π—¬ (objectivity) ‚¥¬ ªØ‘∫—µ‘ ∑—Èß„π à«π¢Õß°“√°”À𥇰≥±å°“√„À⧖·ππ
‡©æ“–„π à«π¢Õ߇°≥±å°“√„À⧖·ππ ´÷Ëß®”‡ªìπµâÕß¡’ ·∫∫¿“æ√«¡ (holistic scoring rubrics) Õ—πÀ¡“¬∂÷ß
¡“µ√∞“πÕ¬à“ß¡“° π—Ëπ§◊Õ ‰¡à«à“®–𔉪„™â‡¡◊ËÕ„¥À√◊Õ °“√„À⧖·ππ‚¥¬æ‘®“√≥“§ÿ≥¿“æ¢Õߺ≈ß“πÀ√◊Õ°“√
§√Ÿ§π„¥®–‡ªìπºŸâ„™â°Áµ“¡ §–·ππ‡À≈à“π—Èπ§«√®–§ß∑’Ë °√–∑”„π¿“æ√«¡∑—ßÈ À¡¥ ·≈–°“√°”À𥇰≥±å°“√„Àâ
À√◊Õ„°≈⇧’¬ß°—π¡“°∑’Ë ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â ´÷Ëߧÿ≥¿“æ §–·ππ·∫∫·¬°Õß§å ª √–°Õ∫ (analytic scoring
¥—ß°≈à“«π’Èπ—∫«à“‡ªìπ ‘Ëß∑’ËÕàÕπ¥âÕ¬Õ¬à“ß¡“°„π‡§√◊ËÕß¡◊Õ rubrics) ´÷Ë߇ªìπ°“√„À⧖·ππ‚¥¬°“√·∫à߬àÕ¬°√–∫«π
«—¥∑ÿ°ª√–‡¿∑∑’˵âÕß„™â¥ÿ≈¬æ‘π‘®„π°“√µ—¥ ‘π„®¢Õߧ√Ÿ °“√À√◊Õº≈ß“ππ—ÈπÕÕ°‡ªìπ à«π Ê ·≈â«®÷ßæ‘®“√≥“„Àâ
À√◊ÕºŸªâ √–‡¡‘π ·¡â·µà¢Õâ  Õ∫™π‘¥∫√√¬“¬À√◊Õ§«“¡‡√’¬ß §–·ππ„π·µà≈– à«ππ—Èπ ¥—ßª√“°Ø„πµ—«Õ¬à“ß∑’Ë 1 ·≈–
(essay item) °Á‰¡àæâπ∑’Ë®–ª√– ∫ªí≠À“π’ȇ™àπ‡¥’¬«°—π 2 ¥—ßπ’È
‚¥¬‡©æ“–„π à«π¢Õß°“√«—¥¿“§ªØ‘∫—µ‘π—Èπ‰¡à«à“®–¡ÿàß µ—«Õ¬à“ß∑’Ë 1
‡πâπ‰ª∑’Ë°√–∫«π°“√À√◊Õº≈ß“π°Á≈â«π¡’®ÿ¥ÕàÕππ’È∑—Èß ‘Èπ ‡°≥±å°“√„À⧖·ππ·∫∫¿“æ√«¡  ”À√—∫ß“π
´÷Ë ß ‰¡à «à “ ®–‡°‘ ¥ ¢÷È π ®“°Õ§µ‘ À √◊ Õ §«“¡‰¡à √Ÿâ ® √‘ ß ¢ÕߺŸâ ª√–¥‘…∞å„∫µÕß°≈’∫∫—«À≈«ß
ª√–‡¡‘πÀ√◊Õ‡°‘¥®“°§«“¡‰¡à™—¥‡®π¢Õ߇°≥±å°“√„Àâ 4 (¥’¡“°) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å
§–·ππ∑’Ë°”À𥉫â°Áµ“¡ ®ÿ¥ÕàÕππ’ȧ«√®–‰¥â√—∫°“√ §√∫∂â«π ‡À¡“– ¡ ©’°„∫µÕ߇∑à“°—π∑ÿ°™‘Èπ ‰¡à™È” æ—∫
·°â‰¢„ÀâÀ¡¥‰ªÀ√◊Õ‡À≈◊ÕπâÕ¬∑’ Ë ¥ÿ ‡∑à“∑’§Ë √Ÿ®–æ÷ß°√–∑”‰¥â °≈’∫ª≈“¬·À≈¡ ¡∫Ÿ√≥å∑ÿ°°≈’∫ °“√ àß°≈’∫‡ ¡Õ°—π
∑ÿ°°≈’∫ √Õ¬‡¬Á∫‡√’¬∫·¢Áß·√ß·≈– “¡“√∂𔉪„™â‰¥â
°“√°”À𥇰≥±å°“√„À⧖·π𠵓¡«—µ∂ÿª√– ß§å
‚¥¬∑—«Ë ‰ª ‡§√◊ÕË ß¡◊Õ«—¥¿“§ªØ‘∫µ— ®‘ –ª√–°Õ∫¥â«¬ 3 (¥’) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å§√∫∂â«π
2  à«π„À≠à Ê §◊Õ  à«π∑’ˇªìπ·∫∫∫—π∑÷°§–·ππ ´÷Ëß ‡À¡“– ¡ ©’°„∫µÕ߇∑à“°—π∑ÿ°™‘Èπ ‰¡à™È” æ—∫°≈’∫
§√Ÿ®–µâÕß„™â„π°“√®¥∫—π∑÷°§–·ππ·≈–¢âÕ —߇°µµà“ß Ê ª≈“¬·À≈¡ ¡∫Ÿ√≥å∫“ß°≈’∫ °“√ àß°≈’∫‡ ¡Õ°—π‡°◊Õ∫
°—∫ à«π∑’ˇªìπ‡°≥±å°“√„À⧖·ππ ‡æ◊ËÕÕ∏‘∫“¬„Àâ§√Ÿ ∑ÿ°°≈’∫ √Õ¬‡¬Á∫‡√’¬∫ ·¢Áß·√ßæÕ„™â  “¡“√∂𔉪
∑√“∫«à“®–µâÕßæ‘®“√≥“ª√–‡¥Áπ„¥∫â“ß·≈–„À⧖·ππ „™â‰¥âµ“¡«—µ∂ÿª√– ß§å
„π·µà ≈ –ª√–‡¥Á π Õ¬à “ ߉√ ´÷Ë ß  Õß à « ππ’È Õ “®æ‘ ¡ æå ‰ «â 2 (æÕ„™â) À¡“¬∂÷ß ‡µ√’¬¡«— ¥ÿÕÿª°√≥å¡“
§π≈–¥â “ πÀ√◊ Õ Õ“®®— ¥ æ‘ ¡ æå · ¬°‰«â µà “ ßÀ“°°Á · ≈â « ·µà ∫“ß à«π ©’°„∫µÕ߉¡à™È”·µà¬—߉¡à‡∑à“°—π∑ÿ°™‘Èπ æ—∫°≈’∫
§«“¡‡À¡“– ¡ „π∑’Ëπ’È®–¢Õ°≈à“«∂÷߇©æ“–≈—°…≥–·≈– ª≈“¬‰¡à·À≈¡ °“√ àß°≈’∫‰¡à‡ ¡Õ°—π √Õ¬‡¬Á∫‰¡à‡√’¬∫
µ—«Õ¬à“ߢÕ߇°≥±å°“√„À⧖·ππ∑’Ë¡’ºŸâ𔇠πÕ‰«â·≈â« π”‰ª„™âß“π¬—߉¡à‡ªìπ∑’Ëπà“æÕ„®π—°
Õ¬à“ߧ√à“« Ê ‡æ◊ËÕ‡ªìπ°“√‡°√‘Ëππ”‡¢â“ Ÿà¢—ÈπµÕπ°“√ 1 (§«√ª√—∫ª√ÿß) À¡“¬∂÷ß ¬◊¡«— ¥ÿÕÿª°√≥å
µ√«® Õ∫§ÿ≥¿“æ¢Õ߇°≥±å¥—ß°≈à“«Õ’°µàÕÀπ÷Ë߇∑à“π—Èπ ®“°‡æ◊ËÕπ ªØ‘∫—µ‘ß“π‰¡àµ≈Õ¥‡«≈“ º≈ß“π‰¡à ”‡√Á®
‚¥¬®–‰¡à°≈à“«∂÷ß≈—°…≥–·≈–µ—«Õ¬à“ߢÕß·∫∫∫—π∑÷° µ—«Õ¬à“ß∑’Ë 2
§–·ππ·µàª√–°“√„¥ ∑—Èßπ’ȇæ√“– “¡“√∂»÷°…“§âπ§«â“ ‡°≥±å ° “√„Àâ § –·ππ·∫∫·¬°Õß§å ª √–°Õ∫
„πª√–‡¥Áπ‡À≈à“π’ȉ¥â®“°‡Õ° “√µ”√“∑“ߥâ“π°“√«—¥  ”À√—∫ß“πª√–¥‘…∞å ‘ËߢÕß®“°«— ¥ÿ‡À≈◊Õ„™â
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 116 Surachai Meechan
√–¥—∫§ÿ≥¿“æ
√“¬°“√ 3 2 1
(¥’) (æÕ„™â) (§«√ª√—∫ª√ÿß)
°“√‡µ√’¬¡ß“π  – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥âæÕ  – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥âæÕ  – ¡«— ¥ÿ‡À≈◊Õ„™â‰¥â‰¡à
‡æ’¬ß·≈–‡À¡“– ¡ ‡æ’¬ß·≈–‡À¡“– ¡∫“ß æՇ撬ß
 à«π

≈”¥—∫¢—Èπ„π°“√∑”ß“π ªØ‘∫—µ‘ß“π‰¥âµ“¡≈”¥—∫¢—Èπ ªØ‘∫—µ‘ß“π‡ªìπ‰ªµ“¡¢—Èπ ªØ‘∫µ— ‘ß“π‰¡à‡ªìπ‰ªµ“¡


µÕπ µÕπ∫“ß à«π ¢—ÈπµÕπ

§«“¡§‘¥√‘‡√‘Ë¡ √â“ß √√§å §«“¡§‘¥ º≈ß“π ºŸâ‡√’¬π§‘¥ §«“¡§‘¥ º≈ß“π ºŸâ‡√’¬π §«“¡§‘¥ º≈ß“π ≈Õ°
¢÷Èπ‡Õß §âπ§«â“ ≈Õ°‡≈’¬π·∫∫ ‡≈’¬π·∫∫®“°‡æ◊ÕË π
®“°Àπ—ß ◊Õ

„™âß“π‰¥âµ“¡«—µ∂ÿª√– ß§å º≈ß“π𔉪„™â‰¥âµ“¡ º≈ß“π𔉪„™â¬—߉¡à‡ªìπ∑’Ë º≈ß“π‰¡à‡ √Á® ¡∫Ÿ√≥å


«—µ∂ÿª√– ß§å πà“æÕ„®π—°

§«“¡√—∫º‘¥™Õ∫ ∑”ß“π∑’ˉ¥â√—∫¡Õ∫À¡“¬ ∑”ß“π∑’ˉ¥â√—∫¡Õ∫À¡“¬ ∑”ß“π∑’ˉ¥â√—∫¡Õ∫À¡“¬


§√∫∂â«π ·≈– àßß“πµ“¡ §√∫∂â«π ·µà àßß“π™â“ ∫“ߧ√—Èß ·≈– àßß“π∑’ˉ¡à
°”À𥇫≈“ °«à“°”À𥇫≈“ ‡ √Á® ¡∫Ÿ√≥å

§«“¡ª√–≥’µ ‡√’¬∫√âÕ¬ º≈ß“π¡’§«“¡ª√–≥’µ º≈ß“π‡√’¬∫√âÕ¬æÕ„™â º≈ß“π¢“¥§«“¡ª√–≥’µ


‡√’¬∫√âÕ¬¥’ ‡√’¬∫√âÕ¬

§«“¡¡’πÈ”„® ™à«¬‡À≈◊ÕºŸâÕ◊Ëπ ¡Ë”‡ ¡Õ ™à«¬‡À≈◊ÕºŸâÕ◊Ëπ∫â“ß„π∫“ß À≈’°‡≈’ˬ߰“√™à«¬‡À≈◊ÕºŸâ


§√—ßÈ Õ◊πË

µ—«Õ¬à“ß∑’Ë 3 ©∫— ∫ π—È π ®– “¡“√∂𔉪„™â ‰ ¥â Õ ¬à “ ß¡’ ¡ “µ√∞“π¡“°


·∫∫«—¥©∫—∫Àπ÷Ëß∂Ÿ° √â“ߢ÷Èπ‡æ◊ËÕ«—¥∑—°…–¢Õß πâÕ¬‡æ’¬ß„¥ ∑—Èßπ’È‚¥¬°“√¡Õ∫À¡“¬„À⺟âª√–‡¡‘πÕ¬à“ß
π—°‡√’¬π„π°“√查 ◊ËÕ “√∑’ËÀπâ“™—Èπ‡√’¬π ‚¥¬∑—°…–¥—ß πâÕ¬ 2 §π‰¥â∑¥≈Õߪ√–‡¡‘π°“√∑”ß“πÀ√◊Õº≈ß“π
°≈à“«ª√–°Õ∫¥â«¬æƒµ‘°√√¡∫àß™’ÈÀ√◊ÕÕߧåª√–°Õ∫∑’Ë ¢Õßπ— ° ‡√’ ¬ πÀπ÷Ë ß §πÀ√◊ Õ ¡“°°«à “ ·≈â « ®÷ ß „™â
 ”§— ≠ √«¡ 4 ª√–°“√ ·≈–°”À𥇰≥±å ° “√„Àâ °√–∫«π°“√∑“ß ∂‘µ‘¡“™à«¬µ√«® Õ∫§«“¡ Õ¥§≈âÕß
§–·ππ‰«â¥—ßµàÕ‰ªπ’È (¥—¥·ª≈ß®“°  ÿ«‘¡≈ «àÕß«“≥‘™, ¢Õߧ–·ππ∑’Ë ‰ ¥â ® “°ºŸâ ª √–‡¡‘ π ‡À≈à “ π—È π «à “ ¡’ ¡ “°πâ Õ ¬
2535, 516) ‡æ’¬ß„¥ ∂â“æ∫«à“¡’§«“¡ Õ¥§≈âÕß°—πÕ¬à“ß¡“° ¬àÕ¡
®“°µ— « Õ¬à “ ߇°≥±å ° “√„Àâ § –·ππ·≈–ªí ≠ À“ ∫àß™’È«à“‡§√◊ËÕß¡◊Õ«—¥©∫—∫π—Èπ¡’¡“µ√∞“π‡æ’¬ßæÕ∑’Ë®–π”
¥â“π§ÿ≥¿“浓¡∑’ˉ¥â°≈à“«¡“·≈â«π—Èπ ·π«∑“ßÀπ÷Ëß∑’Ë ‰ª„™âµàÕ‰ª ·≈–Àπ÷Ëß„π«‘∏’°“√∑“ß ∂‘µ‘∑’Ëπà“®–π”¡“
§√Ÿ § «√¥”‡π‘ π °“√°Á §◊ Õ °“√µ√«® Õ∫«à “ ‡§√◊Ë Õ ß¡◊ Õ «— ¥ ª√—∫„™â‰¥âÕ¬à“ߥ’¬‘Ëß°Á§◊Õ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ß
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 117  ÿ√™—¬ ¡’™“≠
‡°≥±å°“√„À⧖·ππ
1. §«“¡µ√ߢÕ߇π◊ÈÕÀ“
‡π◊ÈÕÀ“∑’Ë查µ√ß°—∫À—«¢âÕÀ√◊Õ‰¡à ?

0 §–·ππ 1 §–·ππ 2 §–·ππ 3 §–·ππ

 à«π„À≠à‰¡àµ√ß°—∫À—«¢âÕ ª√–¡“≥ 50% ∑’˵√ß  à«π„À≠àµ√ß ·µà¡’∫â“ß∑’ˉ¡àµ√ß ‡π◊ÕÈ À“∑’æ


Ë Ÿ¥∑—ßÈ À¡¥
°—∫À—«¢âÕ∑’æ
Ë ¥Ÿ µ√ßÀ—«¢âÕ

2. §«“¡µàÕ‡π◊ËÕߢÕß°“√查
°“√查¥”‡π‘π‰ªÕ¬à“ß√“∫√◊ËπÀ√◊Õ‰¡à ?

0 §–·ππ 1 §–·ππ 2 §–·ππ 3 §–·ππ

查·≈â«À¬ÿ¥‡ªìπ‡«≈“π“π À¬ÿ¥·≈–§‘¥À“§” ¡’°“√∑‘ßÈ ™à«ßÀ¬ÿ¥æŸ¥∫â“ß æŸ¥Õ¬à“ß√“∫√◊Ëπ


·≈–§‘¥À“§”‡°◊Õ∫∑ÿ°ª√–‚¬§ ª√–¡“≥ 50% ¢Õß ‰¡à¡’°“√ –¥ÿ¥
ª√–‚¬§∑’Ë查

3. §«“¡∂Ÿ°µâÕß„π°“√„™â¿“…“
„™â¿“…“‰¥â∂Ÿ°µâÕßÀ√◊Õ‰¡à ?

0 §–·ππ 1 §–·ππ 2 §–·ππ 3 §–·ππ

 à«π„À≠à„™â¿“…“º‘¥ „™â¿“…“º‘¥ª√–¡“≥ 50% „™â¿“…“º‘¥ª√–¡“≥ 1 „π 3 „™â¿“…“∂Ÿ°µâÕß

4. §«“¡‡À¡“– ¡¢ÕßπÈ”‡ ’¬ß
„™âπÈ”‡ ’¬ß‡À¡“– ¡À√◊Õ‰¡à ?

0 §–·ππ 1 §–·ππ 2 §–·ππ 3 §–·ππ

„™âπÈ”‡ ’¬ß‰¡à‡À¡“– ¡°—∫ „™âπÈ”‡ ’¬ß‰¡à‡À¡“– ¡  à«π„À≠à‡À¡“– ¡ ·µà¡’∫â“ß ‡≈◊Õ°„™âπÈ”‡ ’¬ß‰¥âÕ¬à“ß


‡π◊ÕÈ À“∑’æ
Ë ¥Ÿ ‡ªìπ à«π„À≠à ª√–¡“≥ 50% ¢Õß°“√查 ∑’Ë„™âπÈ”‡ ’¬ß‰¡à§àÕ¬‡À¡“– ¡ ‡À¡“– ¡°—∫‡π◊ÈÕÀ“∑’Ë查

ºŸªâ √–‡¡‘π´÷ßË π”‡ πÕ‰«â‚¥¬ Judith A. Burry-Stock ·≈– 0-1-2-3, 1-2-3-4 À√◊ÕÕ◊Ëπ Ê ´÷Ëß„π°“√§”π«≥À“
§≥– (Burry-Stock & other, 1996) ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π∑’®Ë –°≈à“«∂÷ßµàÕ‰ªπ’È
ºŸ‡â ¢’¬π®–‰¥â𔇠πÕ·¬°‡ªìπª√–‡¥Áπ¬àÕ¬ Ê µ“¡®”π«π
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ¢Õß惵‘°√√¡∫àß™’À È √◊ÕÕߧåª√–°Õ∫∑’¡Ë ßÿà «—¥ ®”π«π¢Õß
‡√“ “¡“√∂„™â¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâ π—°‡√’¬πÀ√◊Õº≈ß“π(„π°√≥’∑’˵âÕß°“√ª√–‡¡‘πº≈ß“π)
ª√–‡¡‘π ‡æ◊ÕË µ√«® Õ∫§ÿ≥¿“æ¢Õ߇§√◊ÕË ß¡◊Õ«—¥∑’°Ë ”Àπ¥ ·≈–®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥ ‚¥¬¡’°“√‡æ‘Ë¡‡µ‘¡
§–·ππ‰«â‡ªìπ™à«ß Ê ‰¥âÕ¬à“ßÀ≈“°À≈“¬ ∑—Èß∑’Ë„Àâ µ—«·ª√·≈– —≠≈—°…≥å„π Ÿµ√§”π«≥‡¥‘¡∫â“߇≈Á°πâÕ¬
§–·ππ·∫∫ 0-1 À√◊Õ·∫∫À≈“¬§à“µà“ß Ê ‡™àπ „Àâ ∑—Èßπ’ȥ⫬§«“¡§“¥À«—ß«à“®–™à«¬„Àâ ◊ËÕ§«“¡‡¢â“„®‰¥â¥’
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 118 Surachai Meechan
¬‘Ëߢ÷Èπ ·≈–∑ÿ°§√—Èß∑’Ë¡’°“√°≈à“«∂÷ߥ—™π’§«“¡ Õ¥§≈âÕß R1-R2
√–À«à“ߺŸâª√–‡¡‘π∑’˧”π«≥¡“‰¥â®–À¡“¬∂÷߇©æ“–°√≥’ RAI = 1- ................ 1
∑’˺Ÿâª√–‡¡‘π∑ÿ°§π‰¥â√—∫§”™’È·®ß·≈–Ωñ°Ωπ°“√„™â‡§√◊ËÕß I-1
¡◊Õ«—¥Õ¬à“ߥ’∑ ’Ë ¥ÿ ·≈â« ∑—ßÈ π’‡È æ◊ÕË „À⥙— π’¥ß— °≈à“« “¡“√∂ ‚¥¬∑’Ë
∫àß™’ȉª∂÷ߧÿ≥¿“æ¢Õ߇§√◊ËÕß¡◊Õ«—¥Õ¬à“ß·∑â®√‘ß ‡æ√“– RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
∂Ⓣ¡à„™à ¥—™π’π’ÈÕ“®®–∫àß™’È°≈—∫‰ª¬—ß¡“µ√∞“π¢ÕߺŸâ R1 ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 1
ª√–‡¡‘π·∑π (·µà°Á§ß‰¡à„™à‡√◊ËÕ߬“°π—° À“°®–≈Õß R2 ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 2
‡™◊ÕË ¡‚¬ß§«“¡§‘¥®“°ª√–‡¥Áπ·√°‰ª Ÿªà √–‡¥Áπ∑’ Ë ÕßÀ√◊Õ I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
ª√–‡¥ÁπÕ◊Ëπ Ê µàÕ‰ªÕ’°) ¥—ß√“¬≈–‡Õ’¬¥µàÕ‰ªπ’È (µ“¡‡°≥±å°“√„À⧖·ππ)
1. °√≥’∑¡’Ë æ’ ƒµ‘°√√¡∫àß™’‡È æ’¬ßÀπ÷ßË µ—« π—°‡√’¬π ∑—Èßπ’È¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®–¡’
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘π 2 §π §à“ Ÿß ÿ¥‡∑à“°—∫ 1 ‡¡◊ËÕºŸâª√–‡¡‘π∑—Èß Õߧπ„À⧖·ππ
„π°√≥’∑∑’Ë ¥≈Õß„™â‡§√◊ÕË ß¡◊Õ«—¥π—πÈ °—∫π—°‡√’¬π ‡∑à“°—π ·≈–¡’§à“µË” ÿ¥‡∑à“°—∫ 0 ‡¡◊ËÕºŸâª√–‡¡‘π 2 §π
‡æ’¬ß§π‡¥’¬«‚¥¬¡’惵‘°√√¡∫àß™’ȇ撬ßÀπ÷Ëßµ—«·≈–¡’ºŸâ π—Èπ„À⧖·ππµà“ß°—π ÿ¥‚µàßÀ√◊Õ «π∑“ß°—πÕ¬à“ß ‘Èπ‡™‘ß
ª√–‡¡‘π 2 §π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π·µà≈–§π®÷ß¡’ °≈à“«§◊ÕÀ“°§πÀπ÷Ëß„À⧖·ππ Ÿß ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â
‡æ’¬ß 1 §à“‡™àπ‡¥’¬«°—π ¥—ßπ—πÈ „π°“√§”π«≥À“¥—™π’§«“¡ Õ’°§πÀπ÷Ëß®–„À⧖·ππµË” ÿ¥‡∑à“∑’Ë®–‡ªìπ‰ª‰¥â ´÷Ëß®–
 Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π 2 §π„¥ Ê ®÷ß “¡“√∂„™â ∑”„Àâ º ≈µà “ ߢÕߧ–·ππ∑’Ë ‰ ¥â ® “°ºŸâ ª √–‡¡‘ π ∑—È ß  Õß
·π«§‘¥æ◊Èπ∞“πÕ¬à“ßßà“¬‰¥â«à“ À“°ºŸâª√–‡¡‘π∑—Èß Õß„Àâ (§à“ —¡∫Ÿ√≥å¢Õß R1-R2 : R1-R2) ¡’§à“‡∑à“°—∫ I - 1
§–·ππ‡∑à“°—π·≈â« çº≈µà“ߢÕߧ–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π Õ—π®– àߺ≈„Àâ RAI ¡’§à“‡∑à“°—∫ 0 ¥—ß°≈à“«·≈â«
∑—Èß Õßé ®–¡’§à“‡∑à“°—∫ 0 ´÷Ëß®– àߺ≈„Àâ —¥ à«π (pro- Õ¬à“߉√°Áµ“¡„π°“√𔉪ª√–¬ÿ°µå„™â°‰Á ¡à‰¥â¡°’ “√
portion) ¢Õß çº≈µà“ߢÕߧ–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π °”À𥇰≥±å ‰ «â Õ ¬à “ ߇¥à π ™— ¥ «à “ ¥— ™ π’ § «“¡ Õ¥§≈â Õ ß
∑—Èß Õßé °—∫ çº≈µà“ß Ÿß ÿ¥¢Õߧ–·ππ∑’ˇªìπ‰ª‰¥âé ¡’ √–À«à“ߺŸâª√–‡¡‘π∑’˧”π«≥‰¥â§«√¡’§à“‡∑à“„¥®÷ß®–∂◊Õ«à“
§à“‡∑à“°—∫ 0 ¥â«¬ (¡’§«“¡ Õ¥§≈âÕß°—πÕ¬à“ß ¡∫Ÿ√≥å) ¡’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π¡“°æÕ∑’Ë®–¬Õ¡√—∫
·µà‡¡◊ËÕ„¥∑’˺Ÿâª√–‡¡‘π∑—Èß Õß„À⧖·ππµà“ß°—π¡“°¢÷Èπ ‡æ√“–¿“¬„µâ‡ß◊ËÕπ‰¢¢Õß°“√ªØ‘∫—µ‘®√‘ß ‡√“®”‡ªìπµâÕß
 —¥ à«π¥—ß°≈à“«°Á®–¡’§à“ Ÿß¢÷Èπµ“¡‰ª¥â«¬ ‚¥¬®–¡’§à“ æ‘ ® “√≥“µ— ¥  ‘ π „®¥â « ¬«à “ ®“°®ÿ ¥ ª√– ß§å ¢ Õß°“√„™â
‡∑à“°—∫ 1 ‡¡◊ËÕ§–·ππ∑—Èß Õßµà“ß°—π ÿ¥¢—È« ¥—ßπ—ÈπÀ“° ‡§√◊ËÕß¡◊Õ«—¥„π§√—Èßπ—Èπ Ê ®”‡ªìπµâÕß„™â‡§√◊ËÕß¡◊Õ∑’Ë¡’
°”Àπ¥„Àâ I ·∑π ®”π«π¢Õߧ–·ππ∑’‡Ë ªìπ‰ª‰¥â∑ß—È À¡¥ §ÿ≥¿“æ¡“°πâÕ¬‡æ’¬ß„¥ ¥—ßπ—Èπ°“√·ª≈§«“¡À¡“¬
‡™àπ ‡¡◊ÕË °”À𥧖·ππ‰«â‡ªìπ ç0-1-2-3 §–·ππé °√≥’ ¢Õß§à“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π∑’ªË √“°Ø„π
π’È®–¡’®”π«π¢Õߧ–·ππ∑’ˇªìπ‰ª‰¥â ‡∑à“°—∫ 4 §à“ (I = ∫∑§«“¡π’®È ß÷ ‡ªìπ°“√„™â§”µ“¡§«“¡À¡“¬Õ¬à“ß°«â“ß Ê
4) ¥—ßπ—πÈ º≈µà“ß Ÿß ÿ¥¢Õߧ–·ππ∑’‡Ë ªìπ‰ª‰¥â®“°ºŸªâ √–‡¡‘π ‡æ’¬ß‡æ◊ËÕ„Àâ ◊ËÕ§«“¡°—π‚¥¬∑—Ë«‰ª‰¥â‡∑à“π—Èπ
2 §π„¥ Ê ®÷ß¡’§à“‡∑à“°—∫ I - 1 À√◊Õ 4 - 1 À√◊Õ 3 µ—«Õ¬à“ß
§–·ππ¥—ßπ—πÈ À“°ºŸªâ √–‡¡‘π∑—ßÈ  Õß„À⧖·ππµà“ß°—π ÿ¥¢—«È ®“°°“√ª√–‡¡‘πß“πª√–¥‘…∞å„∫µÕß°≈’∫∫—«À≈«ß
§◊Õ ç0 °—∫ 3é ¬àÕ¡ –∑âÕπ„Àâ‡ÀÁπ«à“‰¡à¡§’ «“¡ Õ¥§≈âÕß ¢Õßπ—°‡√’¬π§πÀπ÷Ëß‚¥¬ºŸâª√–‡¡‘π 2 §π ¥â«¬‡§√◊ËÕß¡◊Õ
√–À«à“ߺŸªâ √–‡¡‘π∑—ßÈ  Õߧππ—πÈ „π∑”πÕß°≈—∫°—πÀ“°ºŸâ «—¥∑’Ë¡’‡°≥±å°“√„À⧖·ππ √«¡ 4 §à“ §◊Õ 1-2-3-4
ª√–‡¡‘π∑—Èß Õß„À⧖·ππ‡∑à“°—π°Á· ¥ß«à“¡’§«“¡ Õ¥- §–·ππ (®“°µ—«Õ¬à“ß∑’Ë 1)
§≈âÕß√–À«à“ߺŸªâ √–‡¡‘πÕ¬à“ß ¡∫Ÿ√≥å ®“°À≈—°°“√æ◊πÈ ∞“π  ¡¡µ‘«à“ ºŸâª√–‡¡‘π§π·√°„Àâ 4 §–·ππ ·≈–ºŸâ
π’È®÷ßÕ“®°≈à“«Õ¬à“ß√«∫√—¥∂÷ß Ÿµ√∑’Ë„™â„π°“√§”π«≥À“ ª√–‡¡‘ π §π∑’Ë   Õß„Àâ ‡ æ’ ¬ ß 2 §–·ππ º≈µà “ ߢÕß
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π (2 §π) ‰¥â¥—ßπ’È §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π∑—Èß Õß À√◊Õ R1-R2 ®–¡’
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 119  ÿ√™—¬ ¡’™“≠
§à“‡∑à“°—∫ 2 §–·ππ ¢≥–∑’˺≈µà“ß Ÿ¥ ÿ¥∑’ˇªìπ‰ª‰¥â M
‡∑à“°—∫ I - 1 À√◊Õ 4 - 1 À√◊Õ 3 §–·ππ ¥—ßπ—Èπ RAI ΣR
m=1 m
R=
®–¡’ §à “ ‡∑à “ °— ∫ 0.33 ´÷Ë ß §à “ ¥— ß °≈à “ «π’È ·  ¥ß„Àâ ‡ ÀÁ π M
«à“°“√µ—¥ ‘π§√—ßÈ π’‰È ¡à¡¡’ “µ√∞“πæÕ∑’®Ë –¬Õ¡√—∫‰¥â ‡æ√“–
·¡â®–¡’‡°≥±å°“√„À⧖·ππ∑’Ë°”À𥉫â√à«¡°—π·≈â« ·µà M ·∑π ®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥
ºŸâª√–‡¡‘π∑—Èß Õß°Á¬—߉¡à “¡“√∂„À⧖·ππÕ¬à“ß Õ¥ I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
§≈âÕß°—π‰¥â ∑—Èßπ’È®÷ß¡’§«“¡®”‡ªìπµâÕßæ‘®“√≥“·°â‰¢ (µ“¡‡°≥±å°“√„À⧖·ππ)
‡°≥±å°“√„À⧖·ππ„Àâ¡’§ÿ≥¿“æµàÕ‰ª ∑—Èßπ’ÈÀ“°æ‘®“√≥“‚¥¬Õ“»—¬À≈—° ∂‘µ‘®–‡ÀÁπ‰¥â
„π°√≥’∑’Ë°”À𥧖·ππ‰«â‡æ’¬ß 2 §à“ (I = 2) «à“º≈≈—æ∑å¢Õߧ–·ππ·µà≈–µ—«≈∫¥â«¬§à“‡©≈’ˬ (Rm-R)
‡™àπ ‡¡◊ËÕ„Àâ 0-1 À√◊Õ 1-2 §–·ππ ®–∑”„Àâ I - 1 ¡’ °Á§◊Õ §–·ππ‡∫’ˬ߇∫π (deviate score) π—Ëπ‡Õß ´÷ËßÀ“°
§à“‡∑à“°—∫ 1 ®÷ß “¡“√∂‡¢’¬π Ÿµ√„À¡à„Àâßà“¬¢÷Èπ°«à“ º≈√«¡¢Õß§à“ —¡∫Ÿ√≥å¢Õߧ–·ππ‡∫’ˬ߇∫π∑—ÈßÀ¡¥¡’§à“
‡¥‘¡‰¥â¥ß— π’È ¡“°¬àÕ¡· ¥ß«à“ºŸªâ √–‡¡‘π·µà≈–§π„À⧖·ππ∑’·Ë µ°µà“ß
RAI = 1 - R1-R2 ................ 2 °—π¡“° „π∑“ßµ√ß°—π¢â“¡∂⓺≈√«¡¥—ß°≈à“«¡’§à“≈¥µË”
≈ß°Á· ¥ß«à“ºŸªâ √–‡¡‘π„À⧖·ππ‰¥âÕ¬à“ß Õ¥§≈âÕß°—π¡“°
·¡â«à“‚Õ°“ ∑’Ë®–‰¥â„™â Ÿµ√∑’Ë 1 ·≈– 2 §ß¡’‰¡à ¢÷Èπ¥â«¬ ‚¥¬‡¡◊ËÕ„¥∑’˺Ÿâª√–‡¡‘π∑ÿ°§π “¡“√∂„À⧖·ππ
∫àÕ¬π—° ‡æ√“–‡§√◊ËÕß¡◊Õ«—¥∑’ˇ√“ √â“ߢ÷Èπ¡—°®–∂Ÿ°π”‰ª ‰¥â‡∑à“°—π §–·ππ‡∫’ˬ߇∫π∑ÿ°µ—«°Á®–¡’§à“‡∑à“°—∫ 0 ´÷Ëß
∑¥≈Õß„™â°—∫π—°‡√’¬π®”π«π¡“° ·≈–‚¥¬∑—Ë«‰ª°Á¡—°®– ®–∑”„Àâ RAI ¡’§à“‡∑à“°—∫ 1 ¥—ßπ—ÈπÀ“°‡√“¬âÕπ°≈—∫‰ª
¡’惵‘°√√¡∫àß™’ÈÀ≈“¬ Ê µ—« ·µà “‡Àµÿ∑’Ëπ” Ÿµ√π’È¡“ æ‘®“√≥“ Ÿµ√∑’Ë 1 Õ’°§√—ßÈ ®–æ∫«à“‡ªìπ Ÿµ√‡¥’¬«°—∫ Ÿµ√∑’Ë
°≈à“«∂÷߉«â¥â«¬°Á‡æ◊ËÕ„Àâ∑√“∫·π«§‘¥æ◊Èπ∞“π¢Õß°“√ 3 π—πË ‡Õß ‡æ’¬ß·µà¡°’ “√ª√—∫‡ª≈’¬Ë π√Ÿª ¡°“√„À¡à ‡æ√“–
æ—≤π“ Ÿµ√µà“ß Ê ∑’Ë´—∫´âÕπ¢÷Èπ¥—ß∑’Ë®–‰¥â°≈à“«∂÷ßµàÕ‰ª „π°√≥’∑’Ë¡’ºŸâª√–‡¡‘π 2 §π (M = 2) §à“¢Õß M - 1 ®–
2. °√≥’∑¡’Ë æ’ ƒµ‘°√√¡∫àß™’‡È æ’¬ßÀπ÷ßË µ—« π—°‡√’¬π ‡∑à“°—∫ 1 ®÷߉¡àª√“°Ø M - 1 Õ¬Ÿà„π Ÿµ√¥—ß°≈à“« ·≈–
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘πÀ≈“¬§π 2
„π°√≥’∑’Ë𔇧√◊ËÕß¡◊Õ«—¥∑’Ë¡’惵‘°√√¡∫àß™’È „π∑“ß ∂‘µ‘π—Èπ Σ Rm-R ¬àÕ¡¡’§à“‡∑à“°—∫R1-R2
m=1
‡æ’¬ßÀπ÷Ëßµ—«‰ª∑¥≈Õß„™â°—∫π—°‡√’¬π‡æ’¬ß§π‡¥’¬« ·µà
°”Àπ¥„Àâ¡’ºŸâª√–‡¡‘πÀ≈“¬§π ‡√“ “¡“√∂§”π«≥ ®÷ß “¡“√∂„™â·∑π°—π‰¥â‡ ¡Õ ´÷Ëß„π°√≥’π’È∑à“π “¡“√∂
À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π‰¥â¥â«¬ Ÿµ√¥—ß æ‘ ® “√≥“∂÷ ß §«“¡‡∑à “ °— π ¢Õß∑—È ß §Ÿà ‰ ¥â ¥â « ¬‡ â π °√“ø
µàÕ‰ªπ’È µàÕ‰ªπ’È
M
Σ R -R
m=1 m
RAI = 1- ................ 3 R1 R R2
(M-1) (I-1)
‚¥¬∑’Ë
RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π µ—«Õ¬à“ß
Rm ·∑π §–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π§π∑’Ë m (m  ¡¡µ‘«à“§–·ππß“πª√–¥‘…∞å∂“¥„∫µÕß°≈’∫∫—«
= 1, 2, 3,......,M) À≈«ß¢Õßπ—°‡√’¬π§πÀπ÷Ëß∑’ˉ¥â®“°ºŸâª√–‡¡‘π 3 §π ¡’
R ·∑π §–·ππ‡©≈’ˬ À√◊Õ§à“‡©≈’ˬ‡≈¢§≥‘µ §à“‡∑à“°—∫ 3, 3 ·≈– 2 §–·π𠵓¡≈”¥—∫ ‡√“
(arithmetic mean) ¢Õߧ–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π∑ÿ°§π  “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
´÷Ëߧ”π«≥‰¥â®“° Ÿµ√ ‰¥â¥ß— π’È
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 120 Surachai Meechan

R1 R2 R3 R R1-R R2-R R3-R


3 3 2 2.67 0.33 0.33 0.67

3
Σ Rm-R= 1.33
m=1

·∑π§à“µà“ß Ê ≈ß„π Ÿµ√§”π«≥ ®–‰¥â K


M
Σ R1k-R2k
k=1
RAI = 1- ............. 4
Σ Rm-R
m=1
K(I-1)
RAI = 1-
(M-1) (I-1)
‚¥¬∑’Ë
1.33 RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
= 1-
(3-1) (4-1) R1k ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 1 „π
惵‘°√√¡∑’Ë k (k = 1, 2, 3,...,K)
= 0.78
R2k ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 2 „π
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“ 惵‘°√√¡∑’Ë k ( k = 1, 2, 3,...,K)
‡∑à“°—∫ 0.78 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“‡§√◊ËÕß¡◊Õ«—¥©∫—∫π’È¡’ K ·∑π ®”π«π¢Õß惵‘°√√¡∫àß™’È∑—ÈßÀ¡¥
§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µà∂â“ “¡“√∂ª√—∫ª√ÿ߇°≥±å I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
°“√„À⧖·ππ„Àâ™—¥‡®π·≈– ◊ËÕ§«“¡‰¥âµ√ß°—π¡“°¢÷Èπ (µ“¡‡°≥±å°“√„À⧖·ππ)
°«à“π’°È ®Á –¥’¡“° °√≥’π’È RAI ®–¡’§à“ Ÿß ÿ¥‡∑à“°—∫ 1 ‡¡◊ËÕºŸâ
3. °√≥’∑’Ë¡’惵‘°√√¡∫àß™’ÈÀ≈“¬µ—« π—°‡√’¬π ª√–‡¡‘ π ∑—È ß  Õß “¡“√∂„Àâ § –·ππ‰¥â µ √ß°— π „π∑ÿ °
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘π 2 §π 惵‘°√√¡ ·≈–®–¡’§à“µË” ÿ¥‡∑à“°—∫ 0 ‡¡◊ËÕºŸâª√–‡¡‘π
„π°√≥’∑’Ë𔇧√◊ËÕß¡◊Õ«—¥∑’Ë¡’惵‘°√√¡∫àß™’È ∑—Èß Õߧππ—Èπ„À⧖·ππµà“ß°—π ÿ¥‚µàßÀ√◊Õ «π∑“ß°—π
À≈“¬µ—«‰ª∑¥≈Õß„™â°—∫π—°‡√’¬π‡æ’¬ß§π‡¥’¬« ‚¥¬ Õ¬à“ß ‘Èπ‡™‘ß„π∑ÿ°æƒµ‘°√√¡
°”Àπ¥„Àâ¡’ºŸâª√–‡¡‘π 2 §π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π µ—«Õ¬à“ß
·µà≈–§π°Á®–¡’À≈“¬§à“µ“¡®”π«π¢Õß惵‘°√√¡∫àß™’È §–·ππ∑—°…–„π°“√查Àπâ“™—Èπ (µ“¡∑’ˉ¥â°≈à“«
∑—ÈßÀ¡¥ ·≈– “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß ∂÷ß¡“·≈â«„πµ—«Õ¬à“ß∑’Ë 3) ¢Õßπ—°‡√’¬π§πÀπ÷Ëß∑’ˉ¥â®“°
√–À«à“ߺŸâª√–‡¡‘π‰¥â¥â«¬ Ÿµ√¥—ßµàÕ‰ªπ’È ºŸâª√–‡¡‘π 2 §π ª√“°Øº≈¥—ßπ’È

§–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π
√“¬°“√ª√–‡¡‘π
§π∑’Ë 1 §π∑’Ë 2
1. §«“¡µ√ߢÕ߇π◊ÈÕÀ“ 2 3
2. §«“¡µàÕ‡π◊ËÕߢÕß°“√查 1 1
3. §«“¡∂Ÿ°µâÕß„π°“√„™â¿“…“ 3 2
4. §«“¡‡À¡“– ¡¢ÕßπÈ”‡ ’¬ß 2 2
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 121  ÿ√™—¬ ¡’™“≠
®“°§–·ππ∑’˪√“°Æ  “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ‰¥â¥—ßπ’È

k R1k R2k R1k-R2k


1 2 3 1
2 1 1 0
3 3 2 1
4 2 2 0

4
Σ R -R = 2
k=1 1k 2k

·∑π§à“µà“ßÊ ≈ß„π Ÿµ√§”π«≥ ®–‰¥â K M


Σ Σ Rmk-Rk
k=1 m=1
K RAI = 1- ........... 5
Σ R1k-R2k
k=1
K(M-1)(I-1)
RAI = 1-
K(I-1) ‚¥¬∑’Ë
RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
2
= 1- Rmk ·∑π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë m „π
4(4-1)
惵‘°√√¡∑’Ë k (m = 1, 2, 3,..., M ·≈– k = 1, 2,
= 0.83 3,...,K)
Rk ·∑π §–·ππ‡©≈’ˬ„π惵‘°√√¡∑’Ë k
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“ ´÷Ëߧ”π«≥‰¥â®“° Ÿµ√
‡∑à“°—∫ 0.83 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“·∫∫«—¥∑—°…–°“√查 M
Àπâ“™—Èπ©∫—∫π’È¡’§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µàÀ“°ª√—∫ª√ÿß ΣR
m=1 mk
‡°≥±å°“√„À⧖·ππ„π惵‘°√√¡∑’Ë 1 ·≈– 3 „Àâ Rk =
M
™—¥‡®π®π “¡“√∂ ◊ÕË §«“¡‰¥âµ√ß°—π¡“°°«à“π’°È ®Á –¥’¡“°
4. °√≥’∑’Ë¡’惵‘°√√¡∫àß™’ÈÀ≈“¬µ—« π—°‡√’¬π K ·∑π ®”π«π¢Õß惵‘°√√¡∫àß™’È∑—ÈßÀ¡¥
§π‡¥’¬« ·≈–¡’ºŸâª√–‡¡‘πÀ≈“¬§π M ·∑π ®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥
„π°√≥’∑’Ë𔇧√◊ËÕß¡◊Õ«—¥∑’Ë¡’惵‘°√√¡∫àß™’È I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
À≈“¬µ—«‰ª∑¥≈Õß„™â°—∫π—°‡√’¬π‡æ’¬ß§π‡¥’¬« ·µà (µ“¡‡°≥±å°“√„À⧖·ππ)
°”Àπ¥„Àâ¡’ºŸâª√–‡¡‘πÀ≈“¬§π ®– “¡“√∂§”π«≥À“ µ—«Õ¬à“ß
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π‰¥â¥â«¬ Ÿµ√¥—ßµàÕ §–·ππ∑— ° …–°“√æŸ ¥ Àπâ “ ™—È π ¢Õßπ— ° ‡√’ ¬ π§π
‰ªπ’È Àπ÷Ëß∑’ˉ¥â®“°ºŸâª√–‡¡‘π 3 §π ª√“°Øº≈¥—ßπ’È
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 122 Surachai Meechan

§–·ππ∑’ˉ¥â®“° §–·ππ∑’ˉ¥â®“° §–·ππ∑’ˉ¥â®“°


√“¬°“√ª√–‡¡‘π
ºŸâª√–‡¡‘π§π∑’Ë 1 ºŸâª√–‡¡‘π§π∑’Ë 2 ºŸâª√–‡¡‘π§π∑’Ë 3
1. §«“¡µ√ߢÕ߇π◊ÈÕÀ“ 2 3 2
2. §«“¡µàÕ‡π◊ËÕߢÕß°“√查 1 1 1
3. §«“¡∂Ÿ°µâÕß„π°“√„™â¿“…“ 3 2 3
4. §«“¡‡À¡“– ¡¢ÕßπÈ”‡ ’¬ß 2 2 2

®“°§–·ππ∑’˪√“°Ø  “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ‰¥â¥—ßπ’È

3
k R1k R2k R3k Rk R1k-Rk R2k-Rk R3k-Rk Σ R -R 
m=1 mk k
1 2 3 2 2.33 0.33 0.67 0.33 1.33
2 1 1 1 1 0 0 0 0
3 3 2 3 2.67 0.33 0.67 0.33 1.33
4 2 2 2 2 0 0 0 0
4 3
Σ Σ R -R = 2.66
k=1 m=1 mk k

·∑π§à“µà“ß Ê ≈ß„π Ÿµ√§”π«≥ ®–‰¥â „π°√≥’∑’ˇ√“𔇧√◊ËÕß¡◊Õ«—¥∑’Ë¡’惵‘°√√¡∫àß™’È


K M
À≈“¬µ—«‰ª∑¥≈Õß„™â°—∫π—°‡√’¬π°≈ÿà¡Àπ÷Ëß (·∑π∑’Ë®–
Σ Σ Rmk-Rk
k=1 m=1
∑¥≈Õß„™â°—∫π—°‡√’¬π‡æ’¬ß§π‡¥’¬«) ‚¥¬°”Àπ¥„Àâ¡’ºŸâ
RAI = 1- ª√–‡¡‘ π 2 §π ®– “¡“√∂§”π«≥À“¥— ™ π’ § «“¡
K(M-1)(I-1)
 Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘𠉥â¥â«¬ Ÿµ√¥—ßµàÕ‰ªπ’È
2.66 K N
= 1-
4(3-1) (4-1) Σ Σ R1nk-R2nk
k=1 n=1
RAI = 1- ........ 6
= 0.89 KN(I-1)
‚¥¬∑’Ë
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“ RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π
‡∑à“°—∫ 0.89 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“·∫∫«—¥∑—°…–°“√查 R1nk ·∑π §–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π§π∑’Ë 1 ¢Õß
Àπâ“™—Èπ©∫—∫π’È¡’§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µàÀ“°ª√—∫ª√ÿß π—°‡√’¬π§π∑’Ë n „π惵‘°√√¡∑’Ë k (n = 1, 2, 3,..., N
‡°≥±å°“√„À⧖·ππ„π惵‘°√√¡∑’Ë 1 ·≈– 3 „Àâ ·≈– k = 1, 2, 3,...,K)
™—¥‡®π®π “¡“√∂ ◊ÕË §«“¡‰¥âµ√ß°—π¡“°°«à“π’°È ®Á –¥’¡“° R2nk ·∑π §–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π§π∑’Ë 2 ¢Õß
5. °√≥’∑’Ë¡’惵‘°√√¡∫àß™’ÈÀ≈“¬µ—« π—°‡√’¬π π—°‡√’¬π§π∑’Ë n „π惵‘°√√¡∑’Ë k (n = 1, 2, 3,..., N
À≈“¬§π ·≈–¡’ºŸâª√–‡¡‘π 2 §π ·≈– k = 1, 2, 3,...,K)
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 123  ÿ√™—¬ ¡’™“≠
K ·∑π ®”π«π¢Õß惵‘°√√¡∫àß™’È∑—ÈßÀ¡¥ µ—«Õ¬à“ß
N ·∑π ®”π«π¢Õßπ—°‡√’¬π∑—ÈßÀ¡¥ §–·ππ∑—°…–°“√查Àπâ“™—Èπ¢Õßπ—°‡√’¬π 5 §π
I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â ∑’ˉ¥â®“°ºŸâª√–‡¡‘π 2 §π ª√“°Øº≈¥—ßπ’È
(µ“¡‡°≥±å°“√„À⧖·ππ)

π—°‡√’¬π §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 1 §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 2


§π∑’Ë §«“¡µ√ß §«“¡µàÕ‡π◊ÕË ß §«“¡∂Ÿ°µâÕß §«“¡‡À¡“– ¡ §«“¡µ√ß §«“¡µàÕ‡π◊ÕË ß §«“¡∂Ÿ°µâÕß §«“¡‡À¡“– ¡
¢Õ߇π◊ÈÕÀ“ ¢Õß°“√查 „π°“√„™â¿“…“ ¢ÕßπÈ”‡ ’¬ß ¢Õ߇π◊ÈÕÀ“ ¢Õß°“√查 „π°“√„™â¿“…“ ¢ÕßπÈ”‡ ’¬ß
1 2 1 3 2 3 1 2 2
2 1 2 3 1 3 2 1 2
3 1 2 2 3 1 2 2 3
4 2 1 3 1 3 2 1 2
5 0 2 3 2 1 2 3 2

®“°§–·ππ∑’˪√“°Ø  “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π ‰¥â¥—ßπ’È

R1nk R2nk R1nk-R2nk


n k 1 2 3 4 1 2 3 4 1 2 3 4
1 2 1 3 2 3 1 2 2 1 0 1 0
2 1 2 3 1 3 2 1 2 2 0 2 1
3 1 2 2 3 1 2 2 3 0 0 0 0
4 2 1 3 1 3 2 1 2 1 1 2 1
5 0 2 3 2 1 2 3 2 1 0 0 0
4 5
Σ Σ R -R = 13
k=1 n=1 1nk 2nk

·∑π§à“µà“ß Ê ≈ß„π Ÿµ√§”π«≥ ®–‰¥â ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“


‡∑à“°—∫ 0.78 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“·∫∫«—¥∑—°…–°“√查
K N
Σ Σ R1nk-R2nk
k=1 n=1
Àπâ“™—Èπ©∫—∫π’È¡’§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µàÀ“°ª√—∫ª√ÿß
RAI = 1- ‡°≥±å ° “√„Àâ § –·ππ„π∫“ß惵‘ ° √√¡„Àâ ™— ¥ ‡®π®π
KN(I-1)  “¡“√∂ ◊ËÕ§«“¡‰¥âµ√ß°—π¡“°°«à“π’È°Á®–¥’¡“° (®“°
13 µ—«Õ¬à“ßπ’È惵‘°√√¡∑’˪√–‡¡‘π‰¥âµ√ß°—π¡“°∑’Ë ÿ¥§◊Õ
= 1- 惵‘°√√¡∑’Ë 2)
(4)(5) (4-1)
6. °√≥’∑—Ë«‰ª : ‡¡◊ËÕ¡’惵‘°√√¡∫àß™’ÈÀ≈“¬µ—«
= 0.78 π—°‡√’¬πÀ≈“¬§π ·≈–¡’ºŸâª√–‡¡‘πÀ≈“¬§π
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 124 Surachai Meechan
„π°√≥’∑«—Ë ‰ª À“°‡√“µâÕß°“√µ√«® Õ∫§ÿ≥¿“æ Rnk ·∑π §–·ππ‡©≈’ˬ¢Õßπ—°‡√’¬π§π∑’Ë n „π
¢Õ߇§√◊ÕË ß¡◊Õ«—¥∑’¡Ë æ
’ ƒµ‘°√√¡∫àß™’ÀÈ ≈“¬µ—«‚¥¬°“√𔉪 惵‘°√√¡∑’Ë k
∑¥≈Õß„™â°∫— π—°‡√’¬π°≈ÿ¡à Àπ÷ßË ·≈–°”Àπ¥„À⡺’ ªŸâ √–‡¡‘π ´÷Ëߧ”π«≥‰¥â®“° Ÿµ√
À≈“¬§ππ—πÈ ‡√“ “¡“√∂§”π«≥À“¥—™π’§«“¡ Õ¥§≈âÕß M
√–À«à“ߺŸâª√–‡¡‘π‰¥â‚¥¬Õ“»—¬·π«§‘¥æ◊Èπ∞“πµ“¡∑’ˉ¥â ΣR
m=1 mnk
°≈à“«¡“·≈â«∑—ßÈ À¡¥ ´÷ßË ‡¢’¬π‡ªìπ Ÿµ√°“√§”π«≥‰¥â¥ß— π’È Rnk =
M
K N M
Σ Σ Σ Rmnk-Rnk K ·∑π ®”π«π¢Õß惵‘°√√¡∫àß™’È∑—ÈßÀ¡¥
k=1 n=1m=1 N ·∑π ®”π«π¢Õßπ—°‡√’¬π∑—ÈßÀ¡¥
RAI = 1- ...... 7
KN(M-1)(I-1) M ·∑π ®”π«π¢ÕߺŸâª√–‡¡‘π∑—ÈßÀ¡¥
‚¥¬∑’Ë I ·∑π ®”π«π¢Õߧ–·ππ∑—ßÈ À¡¥∑’‡Ë ªìπ‰ª‰¥â
RAI ·∑π ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸªâ √–‡¡‘π (µ“¡‡°≥±å°“√„À⧖·ππ)
Rmnk ·∑π §–·ππ∑’‰Ë ¥â®“°ºŸªâ √–‡¡‘π§π∑’Ë m ¢Õß µ—«Õ¬à“ß
π—°‡√’¬π§π∑’Ë n „π惵‘°√√¡∑’Ë k (m = 1, 2, 3,..., §–·ππ∑—°…–°“√查Àπâ“™—Èπ¢Õßπ—°‡√’¬π 5 §π
M ; n = 1, 2, 3,..., N ·≈– k = 1, 2, 3,...,K) ∑’ˉ¥â®“°ºŸâª√–‡¡‘π 3 §π ª√“°Øº≈¥—ßπ’È

§–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 1 §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 2 §–·ππ∑’ˉ¥â®“°ºŸâª√–‡¡‘π§π∑’Ë 3


§π (R1nk ) (R2nk ) (R3nk )
∑’Ë æƒµ‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡
∑’Ë 1 ∑’Ë 2 ∑’Ë 3 ∑’Ë 4 ∑’Ë 1 ∑’Ë 2 ∑’Ë 3 ∑’Ë 4 ∑’Ë 1 ∑’Ë 2 ∑’Ë 3 ∑’Ë 4
1 2 1 3 2 3 1 2 2 2 1 3 2
2 1 2 3 1 3 2 1 2 2 2 2 2
3 1 2 2 3 1 2 2 3 2 3 2 3
4 2 1 3 1 3 2 1 2 3 2 2 2
5 0 2 3 2 1 2 3 2 0 2 2 3

®“°¢âÕ¡Ÿ≈∑—ÈßÀ¡¥  “¡“√∂§”π«≥À“§–·ππ ®“°¢â Õ ¡Ÿ ≈ ∑’Ë ª √“°Ø· ¥ß«à “ §à “ ‡©≈’Ë ¬ ¢Õß


‡©≈’ˬ¢Õßπ—°‡√’¬π§π∑’Ë n „π惵‘°√√¡∑’Ë k (Rnk) ‰¥â §–·ππ∑’‰Ë ¥â¡“®“°ºŸªâ √–‡¡‘π∑ÿ°§π „π惵‘°√√¡∑’Ë 1 ∂÷ß
¥—ßπ’È 4 ¢Õßπ—°‡√’¬π§π·√° ¡’§à“‡∑à“°—∫ 2.33, 1, 2.67 ·≈–
2 µ“¡≈”¥—∫  ”À√—∫°√≥’Õπ◊Ë Ê °Á¡§’ «“¡À¡“¬„π∑”πÕß
π—°‡√’¬π §–·ππ‡©≈’ˬ (Rnk ) ‡¥’¬«°—π ´÷Ëß‚¥¬À≈—°°“√æ◊Èπ∞“πµ“¡∑’ˇ§¬°≈à“«¡“·≈â«
§π∑’Ë æƒµ‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ 惵‘°√√¡ π—Èπ À“°ºŸâª√–‡¡‘π∑—Èß “¡§π “¡“√∂„À⧖·ππ‰¥âÕ¬à“ß
∑’Ë 1 ∑’Ë 2 ∑’Ë 3 ∑’Ë 4  Õ¥§≈âÕß°—π¡“° §–·ππ‡∫’¬Ë ߇∫π®–µâÕß¡’§“à ‡¢â“„°≈â 0
1 2.33 1 2.67 2 ‡ªìπ à«π„À≠à ´÷Ëß®“°¢âÕ¡Ÿ≈∑’˪√“°Ø°≈—∫‰¡à‰¥â¡’§«“¡
2 2 2 2 1.67  Õ¥§≈âÕß°—π¡“°π—° ‡™àπ „π°“√ª√–‡¡‘π惵‘°√√¡∑’Ë
3 1.33 2.33 2 3 1 ¢Õßπ—°‡√’¬π§π·√° ´÷Ë߉¥â§–·ππ‡©≈’ˬ‡∑à“°—∫ 2.33
4 2.67 1.67 2 1.67 π—Èπ ºŸâª√–‡¡‘π 3 §π „Àâ 2, 3, ·≈– 2 §–·ππ §–·ππ
5 0.33 2 2.67 2.33 ‡∫’ˬ߇∫π®÷߇∑à“°—∫ -0.33, 0.67 ·≈– -0.33 µ“¡≈”¥—∫
«. ß¢≈“π§√‘π∑√å ©∫—∫ —ߧ¡»“ µ√å·≈–¡πÿ…¬»“ µ√å ¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π...
ªï∑’Ë 10 ©∫—∫∑’Ë 2 æ.§. -  .§. 2547 125  ÿ√™—¬ ¡’™“≠
„π à«π¢Õß惵‘°√√¡Õ◊πË ·≈–π—°‡√’¬π§πÕ◊πË Ê °Á “¡“√∂ §«“¡‡∫’ˬ߇∫π∑—ÈßÀ¡¥∑’˪√“°Ø®√‘ß ´÷ËßÀ“°¡’§à“ Ÿß¬àÕ¡
§”π«≥‰¥â„π∑”πÕ߇¥’¬«°—π ´÷Ë߇¡◊ËÕÀ“§à“ —¡∫Ÿ√≥å¢Õß · ¥ß„Àâ‡ÀÁπ«à“¡’§«“¡·µ°µà“ßÀ√◊Õ¡’§«“¡‰¡à Õ¥§≈âÕß
§–·ππ‡∫’ˬ߇∫π·≈–√«¡§à“ —¡∫Ÿ√≥å∑—ÈßÀ¡¥®“°∑ÿ°§à“ √–À«à “ ß°≈ÿà ¡ ºŸâ ª √–‡¡‘ π π—Ë π ‡Õß ®“°°√≥’ µ— « Õ¬à “ ß®÷ ß
À√◊Õ∑ÿ°™àÕß (cell) ·≈â« ‡√“°Á®–∑√“∫‰¥â∂÷ß¢π“¥¢Õß  “¡“√∂§”π«≥À“§à“ —¡∫Ÿ√≥å¢Õߧ–·ππ‡∫’¬Ë ߇∫π‰¥â¥ß— π’È

R1nk-Rnk R2nk-Rnk R3nk-Rnk


n k 1 2 3 4 1 2 3 4 1 2 3 4
1 0.33 0 0.33 0 0.67 0 0.67 0 0.33 0 0.33 0
2 1 0 1 0.67 1 0 1 0.33 0 0 0 0.33
3 0.33 0.33 0 0 0.33 0.33 0 0 0.67 0.67 0 0
4 0.67 0.67 1 0.67 0.33 0.33 1 0.33 0.33 0.33 0 0.33
5 0.33 0 0.33 0.33 0.67 0 0.33 0.33 0.33 0 0.67 0.67
K N M
Σ Σ Σ Rmnk-Rnk = 20.63
k=1 n=1 m=1

·∑π§à“µà“ß Ê ≈ß„π Ÿµ√§”π«≥ ®–‰¥â ‡¢’ ¬ π®÷ ß ¡’ § «“¡‡™◊Ë Õ «à “ ·¡â · µà ºŸâ ∑’Ë ‰ ¡à §à Õ ¬™◊Ë π ™Õ∫À√◊ Õ
 —π∑—¥∑“ߥâ“π§≥‘µ»“ µ√å¡“°π—° À“°‰¥â≈Õß∑”§«“¡
K N M
Σ Σ Σ Rmnk-Rnk
k=1 n=1 m=1
‡¢â“„®¢—ÈπµÕπ°“√§”π«≥¥—ß°≈à“«Õ¬à“ß≈–‡Õ’¬¥ —°Àπ÷Ëß
RAI = 1- À√◊ Õ  Õߧ√—È ß °Á πà “ ®–™à « ¬„Àâ ‡ °‘ ¥ §«“¡‡¢â “ „®„π·µà ≈ –
KN(M-1)(I-1) ª√–‡¥Á π ‰¥â ‚ ¥¬‰¡à ¬ “°π— ° ·≈–‡π◊Ë Õ ß®“°„π‚≈°¬ÿ §
20.63 ªí®®ÿ∫π— ‡√“¡’‡§√◊ÕË ß™à«¬§”π«≥µà“ß Ê Õ¬Ÿ‡à ªìπ®”π«π¡“°
= 1- ®÷߇™◊ËÕÕ’°«à“∂â“ “¡“√∂∑”§«“¡‡¢â“„®À≈—°°“√æ◊Èπ∞“π
(4)(5)(3-1)(4-1)
®π∑√“∫∂÷ ß ∑’Ë ¡ “∑’Ë ‰ ª¢Õß Ÿ µ √‡À≈à “ π’È ‰ ¥â · ≈â « °“√
= 0.83 §”π«≥§à“µà“ß Ê ∑’Ë®–‡°‘¥¢÷Èπ∂—¥®“°π’ȧ߉¡à„™à‡√◊ËÕ߬ÿàß
¬“°·µàª√–°“√„¥ ¥—ßπ—Èπ®÷߇ªìπ ‘Ëß ¡§«√Õ¬à“߬‘Ëß∑’˧√Ÿ
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π®÷ß¡’§à“ ®–‰¥â„™â§«“¡Õÿµ “À–¢Õßµπ„π°“√ √â“ß·≈–æ—≤π“
‡∑à“°—∫ 0.83 ´÷Ëß· ¥ß„Àâ‡ÀÁπ«à“·∫∫«—¥∑—°…–°“√查 ‡§√◊ÕË ß¡◊Õ«—¥„À⡧’ ≥ ÿ ¿“æ Ÿß ÿ¥‡∑à“∑’æ Ë ß÷ ®–°√–∑”‰¥â ∑—ßÈ π’È
Àπâ“™—Èπ©∫—∫π’È¡’§ÿ≥¿“æÕ¬Ÿà„π¢—Èπ„™â‰¥â ·µàÀ“°ª√—∫ª√ÿß ‡æ◊Ë Õ ™à « ¬°— π ‡æ‘Ë ¡ §«“¡πà “ ‡™◊Ë Õ ∂◊ Õ „Àâ °— ∫ °√–∫«π°“√
‡°≥±å ° “√„Àâ § –·ππ„π∫“ß惵‘ ° √√¡„Àâ ™— ¥ ‡®π®π «—¥º≈°“√‡√’¬π√Ÿâ ´÷Ëß®– àߺ≈ ◊∫‡π◊ËÕ߉ª∂÷ß¡“µ√∞“π
 “¡“√∂ ◊ËÕ§«“¡‰¥âµ√ß°—π¡“°°«à“π’È°Á®–¥’¡“° ‚¥¬ ¢Õß°“√®—¥°“√»÷°…“‚¥¬√«¡‰¥â„πÕ𓧵
‡©æ“–惵‘°√√¡∑’Ë 1 ´÷Ëß¡’º≈√«¡¢Õß§à“ —¡∫Ÿ√≥å¢Õß
§–·ππ‡∫’ˬ߇∫π Ÿß∑’Ë ÿ¥ ‡Õ° “√Õâ“ßÕ‘ß
®“° Ÿµ√§”π«≥∑—ÈßÀ¡¥∑’Ë°≈à“«¡“®÷߇ÀÁπ‰¥â«à“ √ÿâß»‘√‘π∑√å ®—π∑√åÀÕ¡. (2545). °“√ √â“߇°≥±å°“√ª√–‡¡‘π
¥—™π’§«“¡ Õ¥§≈âÕß√–À«à“ߺŸâª√–‡¡‘π‰¡à‰¥âÕ“»—¬À≈—° º≈ß“π∑“ߧÀ°√√¡»“ µ√å¥â«¬√Ÿ∫√‘§ (Rubrics
°“√·≈–¢—ÈπµÕπ°“√§”π«≥∑’ˬÿà߬“°·µàª√–°“√„¥ ºŸâ Assessment). «“√ “√»÷°…“»“ µ√å, 14(1), 23-29.
Songklanakarin J. of Social Sciences & Humanities Rater Agreement Index (RAI)...
Vol. 10 No. 2 May - Aug 2004 126 Surachai Meechan
 ÿ«‘¡≈ «àÕß«“≥‘™. (2535). Àπ૬∑’Ë 12 °“√ √â“߇§√◊ËÕß Burry-Stock, Judith A. and other. (1996). Rater
¡◊Õ«—¥º≈¥â“π∑—°…–æ‘ —¬. ‡Õ° “√ª√–°Õ∫°“√ Õπ Agreement Indexes for Performance Assess-
™ÿ¥«‘™“°“√æ—≤π“·∫∫∑¥ Õ∫«—¥º≈ —¡ƒ∑∏‘∑Ï “ß°“√ ment. Educational and Psychological
‡√’¬π (Àπâ“ 481-558). °√ÿ߇∑æœ : ¡À“«‘∑¬“≈—¬ Measurement, 56(2), 251-262.
 ÿ‚¢∑—¬∏√√¡“∏‘√“™.

You might also like