วจารณ การจดอนดบมหาวทยาลยของ
The Times Higher Education
นายชยพร ภทรวารกล นางสาววกานดา ศรจรสรง
นายสนทด พรประเสรฐมานต
หวขอในการน าเสนอ นยามของค าวา “มหาวทยาลย” นยามปฏบตการของมหาวทยาลยทด คณสมบตของมหาวทยาลยทด ตวชวดทสะทอนใหเหนถงคณสมบตของมหาวทยาลยทด การวดตวชวด การใหน าหนกของแตละตวชวด วธการรวมคะแนนเมอทราบคาน าหนกแลว การจดอนดบใหมตามแนวคดของผวจารณ
นยามของค าวา “มหาวทยาลย”
Times ไมไดใหค านยามไวอยางชดเจน บอกแตเพยงวาจะไมรวมมหาวทยาลยทสอนแตเฉพาะ graduate แตจะรวมมหาวทยาลยเฉพาะทางไวดวย เชน London School of Economics
มปญหาดานการนยามไมชดเจน เชน ถาสถาบนทสอนแตอนปรญญา ถอวาเปนมหาวทยาลยหรอไม campus ตางๆ ถกแยกกนจดอนดบหรอไม เปนตน
ตองนยามค าวา “มหาวทยาลย” ใหชดเจนกวาน
นยามของค าวา “มหาวทยาลย” นาจะรวมการจดอนดบของมหาวทยาลยทสอนแต
graduate เขาไปดวย เนองจากพนธกจคลายๆ กบมหาวทยาลยทสอนทง undergraduate และ graduate ไมใชเพยงแตอางวาการจดอนดบยงยาก
การไมรวม graduate เขาไป อาจกอใหเกดความเขาใจผด ตวอยางนยาม เชน มหาวทยาลย เปนสถาบนทสอนนกศกษา
เพอใหไดรบระดบการศกษาขนปรญญาตร โท หรอเอก
นยามของมหาวทยาลยทด ผจดอนดบไมไดก าหนดเอาไววามหาวทยาลยทด ควรมลกษณะอยางไร
ถาไมไดรบการนยาม จะมปญหาเรอง objectivity
ผวจารณวเคราะหวา ตามความคดของ Times นาจะตงนยามมหาวทยาลยทดไววาตองมคณสมบตดงน (เดาตามตวชวดทใช)
1. มชอเสยง ไดรบการยอมรบในระดบสากล
2. เปนเลศในการสอน ผลตบณฑตทมคณภาพ
3. เปนเลศในการวจย และความเชยวชาญในสาขาวชาตางๆ
4. มแนวโนมพฒนามหาวทยาลยสความเปนสากล
นยามของมหาวทยาลยทด
ผวจารณคดวาควรจะมเพยงแค 2 ขอเทานน คอ 1. เปนเลศในการสอน ผลตบณฑตทมคณภาพ
2. เปนเลศในการวจย และความเชยวชาญในสาขาวชาตางๆ
ปญหาเรองการวดคณสมบตของมหาวทยาลยทด
เปนปญหาทวา ตวชวดตางๆ ทสรางขน สามารถวดคณสมบตของมหาวทยาลยไดจรงหรอไม
จากการคาดเดาของผวจารณ Times นาจะมคณสมบตของมหาวทยาลยทดไว 4 ขอ โดยตวชวดทง 6 ตว วดแทนคณสมบตทง 4 อยางไดดงน
ปญหาเรองการวดคณสมบตของมหาวทยาลยทด 1. ชอเสยง – การใหผเชยวชาญประเมน การใหผจางงานประเมน
2. การเรยนการสอน – ใหผเชยวชาญประเมน ใหผจางงานประเมน จ านวนอาจารยตอนกศกษา
3. การวจย – ใหผเชยวชาญประเมน จ านวนการอางองตออาจารย
4. การมงสสากล – รอยละของอาจารยตางประเทศ รอยละของนกศกษาตางประเทศ
วจารณเรองความตรงระหวางเกณฑและตวชวด 1. ชอเสยง – การใหผเชยวชาญประเมน การใหผจางงานประเมน
- การใหผเชยวชาญประเมน คอนขางด แตวาควรเนนการซกถามวา “มหาวทยาลยอะไร ททานเหนวามชอเสยงในสายตาของทาน” เปนตน
- การใหผจางงานประเมน เปนเกณฑทคอนขางด แตควรเนนการซกถามใหตรงจดมากขนเชนกน
1. ชอเสยง – การใหผเชยวชาญประเมน การใหผจางงานประเมน อยางไรกตาม การมชอเสยง ตวชวดทงสองอาจไมครอบคลมทงหมด เกณฑอนทนาสนใจ เชน มหาวทยาลยในฝนของนกเรยนม.ปลาย มหาวทยาลยในฝนของเดก undergraduate อตราสวนนกศกษาสอบเขาตอนกศกษาทสามารถรบได การสอบถามจากประชาชน การวดเจตคต และอนๆ
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
โดยทวไปเปนการประเมนทยาก เพราะสวนใหญจะประเมนผลลพธทออกมา แตกระบวนการสอนประเมนไดยาก ถาประเมนแตเพยงผลลพธอาจมอคต
ไมรวากระบวนการสอนแบบใด จะดหรอไมด กระบวนการสอนบางประเภทอาจเหมาะกบคนบางประเภท
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
- การใหผเชยวชาญประเมน อาจชวยสะทอนคณภาพทบณฑตทออกมาได แตผลลพธของการสอน อาจไมไดเหนไดโดยทนท อาจตองรอเวลา หรอประเมนกระบวนการสอน ตองระวงเรองกระบวนการบางอยางเหมาะกบคนบางคน และความชอบวธการสอนของแตละบคคล นอกจากนควรถามใหเฉพาะเจาะจง
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
- การใหผจางงานประเมน คอนขางด แตมปญหาเรองประเทศทผจางงานสงกดอย อาจเรองมหาวทยาลยในประเทศ เพราะเรองการสอสาร เปนตน และควรถามใหเฉพาะเจาะจงลงไป
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
- จ านวนอาจารยตอนกศกษา แนใจหรอ? วาอาจารยตอนกศกษาเยอะแลวจะด นอกจากนมปญหาเรองความ active ของอาจารย สงเกตวามหาวทยาลยทมคะแนนดานนเกน 50 แตม มถง 5 ใน 6 มหาวทยาลยทจ านวนงานวจยไมถง 10 แตม
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
เกณฑอนทนาสนใจ เชน จ านวนศษยเกาของมหาวทยาลยทไดเปนบคคลทมชอเสยงของโลก หรอบคคลทมผลกระทบตอโลกมากทสดในรอบป หรอทได Nobel Prize หรอบคคลดเดนในสาขาตางๆ (ทอาจวดเรองผลของการสอน)
วจารณเรองความตรงระหวางเกณฑและตวชวด
2. การเรยนการสอน – การใหผเชยวชาญประเมน การใหผจางงานประเมน และอตราสวนระหวางอาจารยตอนกศกษา
เกณฑอนทนาสนใจ (ตอ) เชน จ านวนเครองมอในการเรยนการสอน งบประมาณทใชเพอลงทนการเรยนการสอน จ านวนการฝกงานเฉลยตอนกศกษา งบประมาณสนบสนนการวจยของนกศกษา จ านวนทนการศกษาทใหตอหว รอยละนกศกษาทไดรบทน เปนตน (กระบวนการ)
วจารณเรองความตรงระหวางเกณฑและตวชวด
3. การวจย – การใหผเชยวชาญประเมน และจ านวนการอางองตออาจารย
ปญหาส าคญของการประเมนการวจย คอ ภาษา งานวจยบางอยางอาจไมไดตพมพในภาษาองกฤษ นอกจากน งานวจยทมคณภาพอาจไมไดตพมพในวารสาร เชน งานวจยทเปนความลบในระดบชาต เปนตน
วจารณเรองความตรงระหวางเกณฑและตวชวด
3. การวจย – การใหผเชยวชาญประเมน และจ านวนการอางองตออาจารย
- การใหผเชยวชาญประเมน อาจด แตวามปญหาเรองภาษา นอกจากนควรตงค าถามใหเฉพาะเจาะจงเรองการวจยลงไป
- จ านวนการอางองตออาจารย เปนตวสะทอนทด แตอยางไรกตาม งานวจยทไมไดพมพภาษาองกฤษจะเอามาอางองไดล าบาก และการเขยนรายงานใหเปนภาษาองกฤษของประเทศทไมไดใชภาษาองกฤษ เปนขนตอนทเพมความยงยาก
วจารณเรองความตรงระหวางเกณฑและตวชวด
3. การวจย – การใหผเชยวชาญประเมน และจ านวนการอางองตออาจารย
เกณฑทแนะน าเพมเตม เชน จ านวนบทความทลงในวารสารทม Impact Factor สงๆ จ านวนอาจารยท active เรองการวจย จ านวนอาจารยทไดทนสนบสนนการวจย รอยละจ านวนศาสตราจารยในมหาวทยาลย
วจารณเรองความตรงระหวางเกณฑและตวชวด
4. สากล – รอยละนกศกษาตางประเทศ และรอยละอาจารยตางประเทศ
ทงสองเกณฑดอยแลว วดไดคอนขางงาย
วจารณเรองความตรงระหวางเกณฑและตวชวด
ปญหาเรองการวดแตละตวชวด 1. การประเมนของผเชยวชาญ
- ใหขอมลไมเพยงพอทจะวจารณได คอ ใชเกณฑใดในการพจารณาวาผใดเปนผเชยวชาญแตละสาขา
การใหคะแนนของผเชยวชาญ จดอยางไร จดทงหมดกอนดบ
ใหคะแนนของแตละอนดบอยางไร
การกระจายของผเชยวชาญในแตละมหาวทยาลย ทวป สาขาวชา เปนอยางไร
- การประเมนใหประเมนในสาขาวชา และภมภาค แตไมไดบอกวาในโลก
ปญหาเรองการวดแตละตวชวด
1. การประเมนของผเชยวชาญ
- การแบงหมวดทง 5 หมวด (Science, Technology, Biomedicine, Social sciences, Arts) ถกหรอไม บางสาขาวชาอาจจดได 2 หมวดหรอไม
- ผเชยวชาญแตละสาขาวชา เชน นกคณตศาสตร จะประเมนไดถกตองทงหมวด Science หรอไม
ปญหาเรองการวดแตละตวชวด 2. การประเมนจากผจางงาน
- ใหขอมลไมเพยงพอทจะวจารณได คอ ผจดอนดบคดเลอกบรษทมาไดอยางไร
คดเลอกบคคลทมาประเมนของแตละบรษทอยางไรบาง
ประเมนต าแหนงงานอะไร
การใหคะแนนของแตละบคคลเปนอยางไร จดอนดบอยางไร
- นาจะมอคตจากการคดเลอกกลมตวอยาง ท าใหไมสามารถสมประชากรจากบรษทตางๆ ทวโลกได
ปญหาเรองการวดแตละตวชวด
3. รอยละของนกศกษาตางประเทศ
- เปนปรนยอยแลวท าใหไมนามปญหาในการวด
- ควรบอกวาหาขอมลนมาไดอยางไร หามาเวลาไหน
ปญหาเรองการวดแตละตวชวด
4. รอยละของอาจารยตางประเทศ
- เปนปรนยอยแลวท าใหไมนามปญหาในการวด
- ควรบอกวาหาขอมลนมาไดอยางไร หามาเวลาไหน
ปญหาเรองการวดแตละตวชวด
5. จ านวนอาจารยตอนกศกษา
- เปนปรนยอยแลวท าใหไมนามปญหาในการวด
- ควรบอกวาหาขอมลนมาไดอยางไร หามาเวลาไหน
ปญหาเรองการวดแตละตวชวด 6. จ านวนการอางองตออาจารย
- ชวงป 1995 ถง 2005 นาจะดอยแลว
- การใช Thomson’s… นาจะมปญหาเรองอคตทางภาษา
“But it has some systematic biases. It disadvantages some institutions, esp. those in Asia, that published few papers in high-impacted journal surveyed.” (p. 6)
ปญหาเรองการวดแตละตวชวด
6. จ านวนการอางองตออาจารย
- การตดมหาวทยาลยทอางองไมถง 5,000 ครงออก ไมควรท า เพราะมอคตตอมหาวทยาลยทมจ านวนอาจารยนอย ถากลววามหาวทยาลยทมอาจารยนอย จะมดชนตรงนสง กไมเปนไร เพราะวาแสดงถงคณภาพของอาจารยในเรองการวจยอย
การใหน าหนกของแตละตวชวด เดมมการใหน าหนกดงน ใหผเชยวชาญในสาขาอาชพบอกชอมหาวทยาลยอนดบตนในสาขาวชาและใน
ภมภาคในชวงเวลา 2 ปทผานมา เทากบ 40% ใหผจางงานจดอนดบ 20 อนดบทจะจางงานคนทจบจากมหาวทยาลยตางๆ
เทากบ 10% รอยละของอาจารยตางประเทศ ตออาจารยทงหมด เทากบ 5% รอยละของนกศกษาตางประเทศ ตอนกศกษาทงหมด เทากบ 5% จ านวนอาจารยตอนกศกษา เทากบ 20% จ านวนการอางองตออาจารย โดยใช Thomson’s Essential
Science Indicator ในชวงป 1995 - 2005 ในการอางอง เทากบ 20 %
การใหน าหนกของแตละตวชวด คดเปนแตละคณสมบตของมหาวทยาลยทดไดดงน มชอเสยง เปนทยอมรบในระดบสากล มาจาก (1) 25% และ มา
จาก (2) 7.5% รวมแลวเปน 32.5% เปนเลศในการสอน และผลตบณฑตทมคณภาพ มาจาก (1) 5% มา
จาก (2) 2.5% และมาจาก (5) 20% รวมแลวเปน 27.5%
เปนเลศในดานการวจย และความเชยวชาญในสาขาวชาตางๆ มาจาก (1) 10% และมาจาก (6) 20% รวมแลวเปน 30%
มแนวโนมพฒนามหาวทยาลยสความเปนสากล มาจาก (3) 5% และมาจาก (4) 5% รวมแลวเปน 10%
การใหน าหนกของแตละตวชวด สาเหตทแบงการใหผเชยวชาญประเมนเปน 25% ใน
วตถประสงคท 1 5% ในวตถประสงคท 2 และ 10% ในวตถประสงคท 3 เนองจากวาการประเมนของเพอนรวมอาชพ นาจะเกดจากชอเสยงทไดรบมาชานานเปนอนดบแรก จงใหไว 25% ผลงานวจยสงผลกระทบนอยกวาชอเสยง เนองจากภาพในความคดของคนไมสามารถเปลยนไดโดยงาย แสดงวาการประเมนนาจะมาจากชอเสยงมากกวา จงใหสดสวนไว 10% และสดทายคอการเรยนการสอน ซงบคคลรวมอาชพเหนไดยากวามการเรยนการสอนอยางไร จงใหแคเพยง 5%
การใหน าหนกของแตละตวชวด
สาเหตทแบง (2) เปน 7.5% ในวตถประสงคท 1 และ 2.5% ในวตถประสงคท 2 เพราะวาผสมครงานนาจะรบคนเขาท างาน เนองจากชอเสยงของมหาวทยาลยมากกวาทจะเปนเพราะคณภาพบณฑต จงใหอตราสวนไวท 7.5% ตอ 2.5%
การใหน าหนกของแตละตวชวด ผประเมนคดวาการประเมนใหมควรมแค 2 คณสมบตทสะทอนถง
มหาวทยาลยทด คอ
ความเปนเลศดานการสอน และความเปนเลศดานการวจย
โดยใหน าหนกเทากน เพราะวา ถาไมมการวจยกไมมความรใหม แตวามหาวทยาลยตองมงผลตบณฑตดวย มเชนนนจะไมตางกบสถาบนวจยทวไป และบณฑตทเกง ด ยอมเปนตวผลกดนพฒนาสงคมตอไป
การใหน าหนกของแตละตวชวด ถาใหความเปนเลศในการสอนเปน 100% จะแบงใหแตละตวชวด ดงน
- ใหผเชยวชาญประเมน 40%
- ใหผจางงานประเมน 20%
- จ านวนอาจารยตอนกศกษา 40% (แตใหจ ากดคาสงสดทจะใหแกตวชวดน เชน ถาคะแนนสงกวา 60 จะใหคะแนนตวชวดนแค 60 คะแนน
การใหผเชยวชาญประเมน นาจะชวยไดมากทสด เมอเทยบกบเกณฑอน การใหผจางงานประเมน ประเมนไดบาง แตบางสาขาวชากไมสามารถประเมนได เชน ประวตศาสตร จงใหแค 20% และจ านวนอาจารย ถาจ ากดแลว นาจะเชอถอไดระดบหนง จงให 40%
การใหน าหนกของแตละตวชวด
ถาใหความเปนเลศในการวจยเปน 100% จะแบงใหแตละตวชวด ดงน
- ใหผเชยวชาญประเมน 60%
- จ านวนอางองตออาจารย 40%
ความจรงนาจะใหทง 2 ตวชวดพอๆ กน แตเนองจากอาจมอคตดานภาษา จงใหน าหนกแกผเชยวชาญประเมน 60% และจ านวนอางองตออาจารย 40%
การใหน าหนกของแตละตวชวด ดงนน น าหนกของแตละตวชวดในการจดอนดบใหม ถาลองทง 2 คณสมบตเปนดงน
ใหผเชยวชาญในสาขาอาชพประเมน ใหน าหนกแกการสอนเทากบ 40% ใหน าหนกแกการวจยเทากบ 60% ดงนนสงผลตอคะแนนรวมเทากบ 50%
ใหผจางงานจดอนดบ 20 อนดบทจะจางงานคนทจบจากมหาวทยาลยตางๆ ใหน าหนกแกการสอนเทากบ 20% ไมไดใหน าหนกแกการวจยเทากบ ดงนนสงผลตอคะแนนรวมเทากบ 10%
จ านวนอาจารยตอนกศกษา ใหน าหนกแกการสอนเทากบ 40% ไมไดใหน าหนกแกการวจยเทากบ ดงนนสงผลตอคะแนนรวมเทากบ 20%
จ านวนการอางองตออาจารย ไมไดใหน าหนกแกการสอน แตใหน าหนกแกการวจยเทากบ 40% ดงนนสงผลตอคะแนนรวมเทากบ 20%
การรวมคะแนน
การจดอนดบของ Times หรอการจดอนดบแบบทวไป
ใชแบบ Benchmarking อาจไมใชวธการทด เพราะเปนการประเมนตางมหาวทยาลย
การใช z-score อาจเปนวธการทดกวา เนองจากตวเปรยบเทยบคอคาเฉลยของแตละมหาวทยาลยเหมอนกน จงนาจะดกวา (หมายเหต ขอมลทใชในการหาคาเฉลย และสวนเบยงเบนมาตรฐานมแคมาจาก 200 อนดบเทานน จงอาจมอคต)
การรวมคะแนน
อนดบ มหาวทยาลย
1 Harvard
2 MIT
3 Cambridge
4 Oxford
5 Stanford
121 Chula
การจดอนดบแบบ Benchmarking การจดอนดบแบบ Z-score
อนดบ มหาวทยาลย
1 Harvard
2 MIT
3 Stanford
4 Cambridge
5 Oxford
144 Chula
สรปวธการจดอนดบใหม
น าคะแนนแตละตวชวด มาหาคา Mean และ SD จาก 200 มหาวทยาลย (ความเปนจรงควรคดจากมหาวทยาลยทงหมดทน ามาจดอนดบ แตวาเนองจากขอมลมเพยงแคนจงใชเพยง 200 มหาวทยาลย) แลวน ามาสรางคา Z-score
จ ากดคาตวชวดจ านวนอาจารยตอนสต ใหคา Z-score สงสดไมเกน 2 ถาคาทมากกวานนใหคะแนนเทากบ 2
สรปวธการจดอนดบใหม น าคา Z-score ทไดมาสรางคาคะแนนดานการเรยนการสอน ดวย
สมการ คะแนนดานการเรยนการสอน = (0.40 * การประเมนจากผเชยวชาญ) + (0.20 * การประเมนจากผจางงาน) + (0.40 * จ านวนอาจารยตอนกศกษา) และมาสรางคาคะแนนดานการวจย ดวยสมการ คะแนนดานการวจย = (0.60 * การประเมนจากผเชยวชาญ) + (0.40 * อตราสวนอาจารยตอนกศกษา)
น าคะแนนดานการเรยนการสอน และดานการวจย มารวมกน จะไดคาคะแนนรวม แลวน ามาจดอนดบ
Top Ten in Teaching Rank University Z-score:
Peer Z-score: Recruiter
Z-score: Teacher
Teaching score
1 Harvard 4.11 4.36 0.30 2.64
2 Cambridge 3.86 2.99 0.23 2.23
3 Oxford 3.68 2.84 0.45 2.22
4 Yale 2.33 1.47 1.85 1.96
5 MIT 3.13 3.70 -0.07 1.96
6 Stanford 2.76 4.11 -0.36 1.78
7 UC, Berkeley 3.80 2.43 0.73 1.71
8 Duke 0.18 3.30 2.00* 1.53
9 Beijing 2.33 1.17 0.67 1.43
10 Princeton 2.21 0.91 0.23 1.16
87 Chula -0.004 0.10 -0.36 -0.13
* = มหาวทยาลยทมคา z-score เกน 2.00 จะถกปรบใหเหลอเพยง 2.00
Top Ten in Research Rank University Z-score:
Peer Z-score: Citation
Research score
1 Harvard 4.11 3.83 4.00
2 CIT 0.92 7.41 3.51
3 MIT 3.13 3.50 3.27
4 UC, Berkeley 3.80 2.33 3.21
5 Stanford 2.76 3.75 3.15
6 Cambridge 3.86 0.41 2.48
7 Oxford 3.68 0.33 2.34
8 Princeton 2.21 1.66 1.99
9 Texas, at Austin 0.86 3.58 1.94
10 Tokyo 2.45 0.50 1.67
140 Chula 0.00 -0.92 -0.37
* = มหาวทยาลยทมคา z-score เกน 2.00 จะถกปรบใหเหลอเพยง 2.00
Top Ten in Overall Rank
Ov Rank
Te Rank
Re Rank
Time
University Teaching Research Overall score
1 1 1 1 Harvard 2.64 4.00 6.63
2 5 3 2 MIT 1.96 3.27 5.24
3 7 4 6 UC, Berkeley 1.71 3.21 4.93
4 2 6 3 Cambridge 2.23 2.48 4.72
5 3 7 4 Oxford 2.22 2.34 4.56
6 6 5 5 Stanford 1.10 3.15 4.25
7 29 2 8 CIT 0.51 3.51 4.03
8 4 11 7 Yale 1.96 1.66 3.63
9 10 8 9 Princeton 1.16 1.99 3.14
10 13 23 17 Stanford 1.78 0.86 2.64
98 87 140 121 Chula -0.13 -0.37 -0.50
* = มหาวทยาลยทมคา z-score เกน 2.00 จะถกปรบใหเหลอเพยง 2.00