2016年9月5日，由中國科學(xué)評(píng)價(jià)研究中心（RCCSE）、中國科教評(píng)價(jià)網(wǎng)（say1888.cn）和武漢大學(xué)中國教育質(zhì)量評(píng)價(jià)中心（ECCEQ）共同發(fā)布了2016年中國研究生教育排行榜，在2016年中國研究生教育評(píng)價(jià)中，原始數(shù)據(jù)主要來自五個(gè)方面：①有關(guān)政府部門的統(tǒng)計(jì)數(shù)據(jù)資料（包括匯編、年鑒、報(bào)表等）；②國內(nèi)外有關(guān)數(shù)據(jù)庫；③有關(guān)政府部門、高校的網(wǎng)站；④有關(guān)刊物、書籍、報(bào)紙、內(nèi)部資料等；⑤本中心在多年評(píng)價(jià)的基礎(chǔ)上建立的“基礎(chǔ)數(shù)據(jù)庫”。我們對(duì)所有的原始數(shù)據(jù)進(jìn)行了全面核查，并對(duì)異常數(shù)據(jù)進(jìn)行了人工處理，要求“有數(shù)據(jù)必有來源，有來源必須精準(zhǔn)”。

本次評(píng)價(jià)中，我們?cè)趯彾嗽u(píng)價(jià)體系并確定評(píng)價(jià)對(duì)象后，對(duì)原始數(shù)據(jù)進(jìn)行了全面核查，并對(duì)異常數(shù)據(jù)進(jìn)行處理，然后利用我們自己設(shè)計(jì)的“中國研究生教育評(píng)價(jià)信息系統(tǒng)”進(jìn)行數(shù)值計(jì)算、統(tǒng)計(jì)得分。

分類評(píng)價(jià)是當(dāng)前科學(xué)評(píng)價(jià)的熱點(diǎn)和難點(diǎn)，專業(yè)評(píng)價(jià)是教育評(píng)價(jià)的微觀層面，其復(fù)雜度和難度之大難以想象。通過多年的評(píng)價(jià)實(shí)踐，認(rèn)識(shí)到利用題錄信息可以完成論文分類，有人提出《學(xué)科分類與代碼》是中國科學(xué)評(píng)價(jià)領(lǐng)域的最佳分類體系。在梳理常規(guī)分類方法的基礎(chǔ)上，歸納出這些方法適合于分類評(píng)價(jià)的方面，而且對(duì)這些方面進(jìn)行進(jìn)一步的改造和融合，提出和構(gòu)建了科學(xué)評(píng)價(jià)論文分類系統(tǒng)，其特點(diǎn)是“二次分類”和“自動(dòng)生成訓(xùn)練集”。該系統(tǒng)巧妙利用期刊分類器和類號(hào)轉(zhuǎn)換器，實(shí)現(xiàn)了二次分類和自動(dòng)生成測(cè)試集，提高了支持向量機(jī)（support vector machine，SVM，一種機(jī)器學(xué)習(xí)算法）的分類精度，也避免了繁重的人工分類任務(wù)。實(shí)驗(yàn)證明本系統(tǒng)能勝任科學(xué)評(píng)價(jià)中的論文分類任務(wù)。本次評(píng)價(jià)繼續(xù)使用該系統(tǒng)并適當(dāng)改進(jìn)。在其他數(shù)據(jù)指標(biāo)的分專業(yè)過程中，采用人機(jī)結(jié)合的方式，大量使用VBA、Java等設(shè)計(jì)程序，提高了工作效率和準(zhǔn)確性。

最后，我們利用“中國研究生教育評(píng)價(jià)信息系統(tǒng)”進(jìn)行數(shù)值計(jì)算、統(tǒng)計(jì)得分和排行榜生成。在評(píng)價(jià)過程中，我們進(jìn)一步實(shí)現(xiàn)智能與人工的密切配合，加強(qiáng)了誤差判定，對(duì)波動(dòng)較大的數(shù)據(jù)進(jìn)行了人工校準(zhǔn)，提高了效率，保證了準(zhǔn)確率。

在評(píng)價(jià)的初步結(jié)果出來之后，邀請(qǐng)各領(lǐng)域?qū)＜覍?duì)結(jié)果進(jìn)行分析，將反饋的意見納入最終的結(jié)果，達(dá)到了定量評(píng)價(jià)和定性評(píng)價(jià)的完美結(jié)合，使評(píng)價(jià)的結(jié)果更具科學(xué)性和權(quán)威性。

   在結(jié)果的呈現(xiàn)方式上，根據(jù)集中與離散分布規(guī)律，在各評(píng)價(jià)結(jié)果的表示方面，繼續(xù)沿用去年的星級(jí)表示方法，即用5★、4★、3★、2★和1★分別代表各等級(jí)。

中國科學(xué)評(píng)價(jià)研究中心

中國科教評(píng)價(jià)網(wǎng)

武漢大學(xué)中國教育質(zhì)量評(píng)價(jià)中心

2016年9月27日發(fā)布

[發(fā)布者：yezi]

• 相關(guān)閱讀：
• 新時(shí)代我們需要什么樣的高等教育評(píng)價(jià)？
• 蘇 強(qiáng) 邱均平：構(gòu)建學(xué)校應(yīng)急管理能力評(píng)價(jià)指標(biāo)體系的政策建議
• 2020金平果高職專業(yè)評(píng)價(jià)指標(biāo)體系
• 從冠狀病毒防治研究看為什么要把論文寫在祖國大地上 ——對(duì)我國科研論文發(fā)表和管理
• 2021年高職評(píng)價(jià)指標(biāo)體系調(diào)整,“雙百強(qiáng)”評(píng)選結(jié)果納入評(píng)價(jià)體系