題目: University rankings smarten up
來源: Nature 464, 16-17 (2010)
作者: Declan Butler
對全世界所有的高等教育和研究機構的排名系統看來是愈來愈複雜了. Declan Butler如是說.
每年秋天, 政客, 大學當局, 基金會和無數的學生都會焦急的等待不列顛時報高等教育雜誌 (Britain's Times Higher Education (THE) magazine) 做的世界大學排名 (World University Rankings). 在THE排名名列較前的位置可以影響決策者的高教投資, 決定那一個研究構可以吸引最好的研究員和學生, 並且促使大學提高它們的名聲.
但是學術單位和大學長期以來都在批評THE和其他大學排名這種過度的影響, 說他們的方法和數據是有問題的. 舉例來說, 很多大學看到他們的排名每年都有很大的變化, 這並不能反映出品質上實際的變化. 而且有許多法國大學名聲很差, 因為他們的研究者的著作通常把大學和國家研究機構並列為其單位, 因而稀釋了對大學的貢獻. 如今, 大學和其相關人員正在發展他們自己的排名方式來阻斷這種缺點.
"排名這件事已經超過始作俑者的預期了"IREG Observatory on Academic Rankings and Excellence 的總裁Kazimierz Bilanow 說. 一個華沙建立的排名品質確認組織在2009年的十月成立了. "常見的行動是打算刺激報紙的發行量, 以對政府機關的政策擬定和補助造成影響".
許多目前在發展中的大學排名系統關注的焦點從粗略的級別表轉移到更細緻的準則, 來提供政策制訂者, 資助機構, 研究者和學生做評估. 他們承諾從比較大的條件範圍來對大學排名, 並且估計更多無形的品質, 像是教育傑出等. 而且, THE的列表在面對批評後也將試著改版.
一個抱怨的原因是THE的排名重度依賴著聲望調查, 尤其是在某些學術領域中那個大學被認為是最優秀的投票. 有些爭論在於這個評估通常太不學術, 被詢問者不會得到所有被評斷的所有的大學的資訊, 而且通常偏好英語系國家.
在2009年十一月, THE宣佈他們的資料將不再由OS(一個倫敦設立的高教媒體公司)來提供. "我們相當了解國家政策和數百萬英鎊的決策是基於這個排名" THE的編輯 Ann Mroz 當時這樣說, "我們事實上也了解方法上造成的批評, 因此, 我們認為我們有責任改良我們編纂的方法"
級別表的變身
THE在未來將從 Global Institutional Profiles Project 提取出他們的資料. 這是一月分由湯馬士路透社提供發行的數據. 這個計畫目的是產生一個全世界數千所大學的完整資料庫, 包括研究經費的細節, 研究人員和博士學位的數量, 以及教學表現的測量. 該公司也使用其內部引用和出版資料來產生研究所研究表現的多種指標, 並且將建立審計程序來校正大學所提供的錯誤資訊.
湯馬士路透社計畫持續進行聲譽調查, 但目標是有至少25000個審查員, 相較之下, OS在2009年排名中使用4000人. 它和英國民調機構Ipsos MORI合作, 試者保証該調查是可信的. "我們並非隨機做的, 背後是有很多想法在裡面的" 湯馬士路透社研究機構的專案經理 Simon Pratt 說, "我們想要在各科領域間有更均衡的觀點". THE將會繼續把各大學依級別表排列, 這被批評者說是提供了一個不精確的誇大在不同單位間的差異. 但是新的排名將會更精細和詳實, 根據Pratt的說法, 包括可以讓不同研究所可以在相類似的同儕中依他們不同的指標來比較.
相似的互相比較是歐盟努力建立一個世界性大學資料庫的一個轉唳點 --- 多維全球性大學排名 (Multi-dimensional Global ranking of Universities (U-Multirank)). 一個試驗性的計畫, 包括150個大學將會在幾個月後被公佈, 由德, 荷, 比, 法專門於研究和教育指標的研究中心來公佈, 就是眾所周知的高等教育和研究表現評估的聯營銀行 (Consortium for Higher Education and Research Performance Assessment).
U-Multirank希望聚焦在它在相似活動力和任務的機構間的比較. 存在的級別表把所有種類的大學併在一起, 但是比較一個多領域的大學和專注於教學的區域型大學沒什麼意義, Frans van Vught(一個U-Multirank計畫主持人, 之前是荷蘭Enschede的Twente大學的校長)說.
一個歐聯的姊妹計畫U-map是要建立一個大學研究活動的分級, 提供的學位和學生課程分級, 和其他重要性的延伸, 像是他們的區域和工業參與和國際性的方向. U-Multirank會在這些方面發展指標.
U-Multirank也希望可以滿足一個對現存排名系統主要的批評: 它們主要聚焦在研究產出, 忽略大學很多其他的重要角色, 不只是教學. 事實上, 上海交大所編纂的世界大學學術排名就是特別重視研究產出和引用影響, 包括不同的諾貝爾獎得主數, 和 Nature 及 Science 的發表數.
用引用數通常不會把不同領域間被引用率考慮進去, 這個偏頗的排名對生醫研究單位有利, 而對主要發表社會科學或是其他低引用率的學門是一種懲罰. 湯馬士路透社和 U-Multirank會用一個標準化的文獻計量學來處理這個缺陷.
U-Multirank在級別表中會在不同指標中用一個研究所表現的完整評分, 可以讓學生, 科學家和決策者來使用和他們最相關的指標, 用他們自己的排名選單. van Vught 說, "他們可以用他們自己的眼鏡來看這個數據".
但是在這個領域裡所有的人都承認, 大學教學方面別難比較, 研究是個國際性的活動, 而且, 有合理的比較指標可以比較研究單位. 教學, 相對的, 主要是由國家性的組織, 而且反應出不同的文化和傳統. Pratt說, "這是一個比較麻煩的問題".
例如在法國的大學退學率沒辦法和其他國家直接比較, 因為所有的學生只要通過大學聯考就可以進法國的大學, 大學第一學年末才進行篩選, 而非在離開高中後就直接進行, 會提高退學率. 相同的, 不同國家的學位禸容和長度也有很大的不同.
評量的概念
組織經濟合作與發展 (Organisation for Economic Co-operation and Development (OECD))試著彌補評量的差距. 上個月, 它提供了1200萬美元的先期計畫, 高等教育學習表現評量 (Assessment of Higher Education Learning Outcomes (AHELO)), 發展新的指標來評斷教學和學校表現. 這個計畫並不打算產生排名, 而是試著來測量大學生活的複雜面, 像是學生批判性思考的能力, 以及原創性概念的產生, 穿梭不同的文化和語言. 雖然目前還沒有很多細項可以提供, 但聽說會進行一個在六個國家, 十餘個大學, 有200個學生參與的先期計畫, 包括美國和日本. Ben Sowter (OS的研究主管)說, 我們會密切注意AHELO工作的發展.
OS雖不再和THE合作, 但仍然繼續發展大學排名. Sowter說, "我們會持續改進方法和調查的責任", 並附帶說他們歡迎新的競爭者. 其他專家則說, 有更多的排名會有好處, 同時這會減少單一排名的不良影響.
而今, 排名系統要被評鑑了. 歐州大學聯盟 (European University Association) 代表800 多個大學, 計畫發表所有國際性排名的年度審查, 評量它們的方法和檢視為何研究所在該排名中升降. 這個努力將會由瑞士教育和研究州秘晝處 (Swiss State Secretariat for Education and Research) 和瑞士大學校長會議 (Rectors' Conference of the Swiss Universities) 鬆散的建立一個排名系統的概觀.
這個審核將會助使用者來決定那一種排名數據可以最適切的回答大學表現的主要問題. Sowter說, "任何排名的行為, 無論多複雜, 都不能不負責的宣稱是某個問題的正確答案, 正確答案是在問問題的人的手掌中".
沒有留言:
張貼留言