网络科技文献专家评价模型的实施

7.3.3　专家评价模型的实施

网络科技文献是进行科学技术交流的主要载体，是获得科技信息、促进科学技术发展的重要途径。为了有效地开发利用网络科技文献，建立优质高效的评价机制，必须首先建立起一套行之有效的评价模型。综合分析目前国内外学者所采用的各种评价方法的优缺点，笔者认为对网络科技文献应该采用“专家评价模型”进行评价，以确保评价的准确性、公正性。其实施流程如下:

(1)确定评价对象。

进行网络科技文献评价时，首先要确定对哪些网络科技文献进行评价。评价对象的选择包括被动选择和主动选择两种方式，如果是接受委托进行评价，则评价对象是别人提供的;如果是主动评价，则是评价人员根据本单位的需求情况主动地选择评价对象。

(2)确定专家评价团。

根据评价对象的特点，按照“专家评价模型”的要求，选择相关的专家、学者，组成专家评价团。为了保证评价的公正、公平，在选择专家时，要尽量选择不同地区、不同单位的专家、学者，组成评价团。

(3)确定评分标准。

在专家进行评分前要请专家讨论确定评分标准，需要注意的是，标准一旦确立，就应保持一定时间内的相对稳定，尽量保证评价标准的一致性。我们一般建议采用百分制对评价对象进行评分。

(4)请专家对评价对象进行评分。

根据网络科技文献评价指标体系表，请专家逐个地对评价对象的每项指标进行评估打分，并填入相应的表格中，以备分析之用。

(5)进行数据分析。

首先，根据以下公式计算每位专家对每个评价对象的最终评分，假设有n位专家参与m个评价对象的评价工作，计算第n位专家对第m个评价对象的评价得分公式为(假设n=30，m=20):

其中:S_nm为第n位专家对第m个评价对象的评分，n=1，2，

3，…，30;m=1，2，3，…，20

X_i为评价对象第i项指标的权重，i=1，2，3，…，20 P_nmi为第n位专家对第m个评价对象第i项指标的评分，i=1，2，3，…，20(www.xing528.com)

其次，计算每个评价对象的总得分。在分别计算每位专家对该评价对象的具体评分后，将全部专家的评分累加，得到该评价对象的总得分T_m，公式如下:

其中:T_m为第m个评价对象的总评价得分，m=1，2，

3，…，20

S_nm为第n位专家对第m个评价对象的评分最后，计算该评价对象的最终评价结果。将该评价对象的总得分除以专家人数，就得到该评价对象的最终评价结果，即:

A_m=T_m/30

其中:A_m为第m个评价对象的最终评价结果，m=1，2，

3，…，20

T_m为第m个评价对象的总评价得分，m=1，2，3，…，20

(6)撰写评价报告。

将每个评价对象的最终评价结果按照综合得分高低进行排序，并写出评价报告，将最后的评价报告提供给用户，以供用户使用。

(7)收集用户的反馈信息。

若用户比较满意，则可以结束评价。若用户不满意，则应对评价过程所运用的数据或事实、所参考的专家学者等他人的意见等进行修正或核实，以对评价对象进行再一次的评价，直到满足用户的需求为止。

当前，在文献计量学方法越来越被大家接受的情况下，探讨一种科学的、具有可操作性的网络科技文献评价模型，使学术研究成果评价结果更具有说服力，在学术界已得到较大范围的认同，并具有十分重要的现实意义。利用“专家评价模型”对网络科技文献进行评价，能把影响论文质量的各种因素进行综合考虑，避免了评价时易加入个人主观臆断的缺点，更好地保证了评价工作的客观性、适用性和操作便利性。写作此书，意在抛砖引玉，引起广大同仁更多地关注网络科技文献评价问题，并积极开展更加深入、有效的研究。