????細看指標,有些不必當真
????看排行榜,最重要的一步是什么?這個答案在許多業(yè)內(nèi)人士眼中,無疑是評估指標。而這恰恰是很多學(xué)生忽略的問題。
????評估指標的合理性和數(shù)據(jù)的客觀性是一個排行榜能成功的關(guān)鍵。國內(nèi)的一家機構(gòu)曾經(jīng)推出大學(xué)排名的調(diào)查,其中一個指標是畢業(yè)生質(zhì)量。這個指標讓許多人看得百思不得其解,“是指畢業(yè)生的就業(yè)率,畢業(yè)后的薪水,還是就業(yè)單位?很難找到這項指標的清晰解釋,而這個指標是如何具體落實的,更是不甚了然。”滬上一家大學(xué)的統(tǒng)計學(xué)副教授章老師表示很疑惑。
????除了每個重要指標是否設(shè)計得合理和科學(xué)外,評估過程是否透明,數(shù)據(jù)采集是怎樣完成的,各項指標的具體得分是什么,也是推斷這個排行榜是否能為自己提供重要信息的因素。
????程瑩是上海交通大學(xué)世界一流大學(xué)研究中心的執(zhí)行主任,她所在的機構(gòu)推出的《世界大學(xué)學(xué)術(shù)排名》自2003年發(fā)布以來,得到了許多國家的主流媒體、世界著名大學(xué)的網(wǎng)站和年報、Economist和Nature等學(xué)術(shù)刊物的重視。據(jù)她介紹,交大版排行榜的參考指標一共有6項,每項都有說明和權(quán)重,為了避免主觀性,研究人員不采取深入調(diào)查的方式,所有數(shù)據(jù)皆由第三方提供。事實上,國際上的知名排行榜發(fā)布機構(gòu)在收集數(shù)據(jù)時,一方面依靠學(xué)校授權(quán),另一方面從具有公信力的數(shù)據(jù)公司即第三方獲取,總體來說社會誠信度較高,數(shù)據(jù)還是比較真實和客觀的。
????不過,即使這樣,各大知名排行榜仍然受到詬病。前不久,美國最受關(guān)注的US News大學(xué)排行榜爆出丑聞。美國名校喬治·華盛頓大學(xué)被逐出US News大學(xué)排名,因為該學(xué)校在提交有關(guān)新生在高中階段排名的數(shù)據(jù)有誤。US News被指責沒有核實學(xué)校提供的數(shù)據(jù)。
????看榜人可以相信哪些數(shù)據(jù)?在程瑩看來,那些不是從學(xué)校直接取得的數(shù)據(jù)更可信。另外,能保證每個指標的得分可以公布和檢驗,發(fā)布機構(gòu)還能提供核查數(shù)據(jù)的途徑的排名顯然更完善更準確。
????當然,即便如此,也不要過于迷信這些排行榜。因為許多設(shè)計完美的指標在現(xiàn)階段的技術(shù)條件下并不容易實現(xiàn)?!皩嶋H操作起來往往難度很大。不是找不到適合的指標就是有了指標卻采集不到數(shù)據(jù),又或者采集難度太大,方法也不可靠?!睂Υ耍态擃H有些無奈。事實上,他們機構(gòu)在做一個世界研究型大學(xué)數(shù)據(jù)庫的計劃,向1200個研究型大學(xué)發(fā)問卷收集數(shù)據(jù),盡管500強大學(xué)中有超過50%的回收率,1000強大學(xué)中這個數(shù)據(jù)達到了70%,但仍然有一些大學(xué)沒有回復(fù)。另外,統(tǒng)計來自不同渠道的研究經(jīng)費也很難操作,很多學(xué)校提供不出來,這就和當初的設(shè)計有一定差異。
????類似的困難在國外發(fā)布機構(gòu)也不鮮見。來自俄勒岡州里德學(xué)院的校長約翰·克魯格顯然很同意這個觀點,“所有的排名都不能準確地計算出一個大學(xué)的學(xué)術(shù)能力和它對學(xué)生的幫助程度,因為它們的數(shù)據(jù)不見得真實和可靠,評估的方法也未必科學(xué)合理?!?/p>