2016年9月5日，由中國科學(xué)評價研究中心（RCCSE）、中國科教評價網(wǎng)（m.say1888.cn）和武漢大學(xué)中國教育質(zhì)量評價中心（ECCEQ）共同發(fā)布了2016年中國研究生教育排行榜，在2016年中國研究生教育評價中，原始數(shù)據(jù)主要來自五個方面：①有關(guān)政府部門的統(tǒng)計數(shù)據(jù)資料（包括匯編、年鑒、報表等）；②國內(nèi)外有關(guān)數(shù)據(jù)庫；③有關(guān)政府部門、高校的網(wǎng)站；④有關(guān)刊物、書籍、報紙、內(nèi)部資料等；⑤本中心在多年評價的基礎(chǔ)上建立的“基礎(chǔ)數(shù)據(jù)庫”。我們對所有的原始數(shù)據(jù)進(jìn)行了全面核查，并對異常數(shù)據(jù)進(jìn)行了人工處理，要求“有數(shù)據(jù)必有來源，有來源必須精準(zhǔn)”。

本次評價中，我們在審定了評價體系并確定評價對象后，對原始數(shù)據(jù)進(jìn)行了全面核查，并對異常數(shù)據(jù)進(jìn)行處理，然后利用我們自己設(shè)計的“中國研究生教育評價信息系統(tǒng)”進(jìn)行數(shù)值計算、統(tǒng)計得分。

分類評價是當(dāng)前科學(xué)評價的熱點和難點，專業(yè)評價是教育評價的微觀層面，其復(fù)雜度和難度之大難以想象。通過多年的評價實踐，認(rèn)識到利用題錄信息可以完成論文分類，有人提出《學(xué)科分類與代碼》是中國科學(xué)評價領(lǐng)域的最佳分類體系。在梳理常規(guī)分類方法的基礎(chǔ)上，歸納出這些方法適合于分類評價的方面，而且對這些方面進(jìn)行進(jìn)一步的改造和融合，提出和構(gòu)建了科學(xué)評價論文分類系統(tǒng)，其特點是“二次分類”和“自動生成訓(xùn)練集”。該系統(tǒng)巧妙利用期刊分類器和類號轉(zhuǎn)換器，實現(xiàn)了二次分類和自動生成測試集，提高了支持向量機(jī)（support vector machine，SVM，一種機(jī)器學(xué)習(xí)算法）的分類精度，也避免了繁重的人工分類任務(wù)。實驗證明本系統(tǒng)能勝任科學(xué)評價中的論文分類任務(wù)。本次評價繼續(xù)使用該系統(tǒng)并適當(dāng)改進(jìn)。在其他數(shù)據(jù)指標(biāo)的分專業(yè)過程中，采用人機(jī)結(jié)合的方式，大量使用VBA、Java等設(shè)計程序，提高了工作效率和準(zhǔn)確性。

最后，我們利用“中國研究生教育評價信息系統(tǒng)”進(jìn)行數(shù)值計算、統(tǒng)計得分和排行榜生成。在評價過程中，我們進(jìn)一步實現(xiàn)智能與人工的密切配合，加強了誤差判定，對波動較大的數(shù)據(jù)進(jìn)行了人工校準(zhǔn)，提高了效率，保證了準(zhǔn)確率。

在評價的初步結(jié)果出來之后，邀請各領(lǐng)域?qū)＜覍Y(jié)果進(jìn)行分析，將反饋的意見納入最終的結(jié)果，達(dá)到了定量評價和定性評價的完美結(jié)合，使評價的結(jié)果更具科學(xué)性和權(quán)威性。

   在結(jié)果的呈現(xiàn)方式上，根據(jù)集中與離散分布規(guī)律，在各評價結(jié)果的表示方面，繼續(xù)沿用去年的星級表示方法，即用5★、4★、3★、2★和1★分別代表各等級。

中國科學(xué)評價研究中心

中國科教評價網(wǎng)

武漢大學(xué)中國教育質(zhì)量評價中心

2016年9月27日發(fā)布

[發(fā)布者：yezi]

• 相關(guān)閱讀：
• 新時代我們需要什么樣的高等教育評價？
• 蘇 強 邱均平：構(gòu)建學(xué)校應(yīng)急管理能力評價指標(biāo)體系的政策建議
• 2020金平果高職專業(yè)評價指標(biāo)體系
• 從冠狀病毒防治研究看為什么要把論文寫在祖國大地上 ——對我國科研論文發(fā)表和管理
• 2021年高職評價指標(biāo)體系調(diào)整,“雙百強”評選結(jié)果納入評價體系