论文部分内容阅读
学术期刊评价是科技评价中的重要类型,也是知识经济时代知识管理的重要途径和工具,在大量学术期刊论文构成的海量信息环境下,科学计量等定量分析方法成为学术期刊评价不可或缺的重要方法。目前学术期刊评价已有以影响因子为代表的诸多评价指标,各评价指标分别对期刊的某一方面的属性进行揭示和计量,并通过自身或简单易于操作或复杂但解释更为合理的方式,完成对学术期刊影响力的评价。借助这些评价指标,不仅可避免同行专家精力有限可能存在的不足,而且使得对学术期刊的评价变得相对客观。但各指标有各自的优点也存在其难以消除的弊端,尤其是目前读者对期刊论文获取方式的改变,学术期刊评价则需要进一步提高其科学性和有效性。
通过对学术期刊评价研究现状的全面深入分析,当前的文献计量定量评价方法或指标大多都是借助引文分析法来进行的,所构建的指标还存在诸多问题,主要表现为:首先,将引文分析的数据分布经验性地视为正态分布,但实际上通过对大样本引文数据集的统计分析,发现引文数据分布客观上是典型的偏态分布,具有明显的无标度特征,符合幂律分布。这种引文数据分布幂律特征的揭示表明建立在正态分布基础上,采用均值计量的影响因子等指标在评价中的失效(或者存在明显的缺陷)。这是因为幂律分布形态下,采用均值计量的影响因子等不能表现引文数据的集中趋势,尤其是异常值和离群点会引起统计平均值的较大变化,耐抗性较差,因而,影响因子等对期刊真实影响力的反映存在较大的偏差。其次,评价中不能合理区分被引量带来的权重分配,因而不能合理地评价学术期刊的影响力。再次,评价指标构造粗糙,遗漏与期刊影响力相关的重要属性信息,导致评价结果与同行评议方法不能达成一致,并且借助这些指标的“绝对”评价结果产生不少负面效应,继而产生了对引文分析能否用于学术期刊或者其他科技评价的质疑。除了评价指标本身存在的问题,目前还没有专门针对期刊评价的分类体系。这些问题的存在导致学术期刊评价以及诸多相关评价产生不少负面效应,也使得不少研究者对引文分析用于期刊评价的可行性产生了质疑。
为解决以上问题,本文首先从引文过程中的引用认同,知识传播及扩散过程进行分析,论证了引文分析用于学术期刊评价计量的可行性及局限性。为了增强引文分析用于学术期刊评价的有效性,本文改进了当前面向检索的学术期刊分类方法,细化了期刊分类,形成面向评价的学术期刊分类。其次,通过对照期刊、机构以及研究人员等不同评价对象的标准化指标,深入分析了在学术期刊评价中不同类型的评价指标对评价结果有效性的理解,以探寻学术期刊影响力的主要属性特征及有效测度指标,为本文的学术期刊影响力评价指标构建和方法研究打下基础。通过分析讨论,本文选择易于测度的引文量和引文网络中心度两个变量来更全面揭示学术期刊的影响力,按照普赖斯提出的知识累积金字塔式模式,依据对数法则对不同引用量区间的文献赋予不同权重,并考虑研究领域引文网络的结点中心度,选取入度中心度(被引量)来衡量文献在知识传播网络中的重要性,并运用非参数统计方法,从而构建起基于非参数统计的秩次分布得分指标(简称分布得分)评价方法来测度学术期刊的影响力。
最后,为了检验本文建立的上述测度学术期刊影响力的评价方法和指标,论文选择了核心版SCI生物学领域的46种期刊进行实证分析。实证分析结果显示,非参数统计的秩次分布得分指标与目前常用评价指标有较大的区别,这是因为分布得分指标包含更多期刊影响力属性信息。为检验分布得分指标的有效性,取样本期刊进行同行专家评价并作为标杆结果,用分布得分指标及其它指标与专家排名结果做偏差和离散度对比分析。结果发现分布得分指标与标杆结果的偏差较小,并且具有最小的离散度,因此验证了分布得分指标评价方法结果的有效性。这种有效性来源于分布得分指标区分了不同引文量论文的评价权重,同时吻合了期刊引文数据分布客观的右偏态分布,因此,尽管其计量过程较为繁琐,但可以更准确的反映期刊的真实影响力。另外,本文的秩次分布得分指标是对较长时间段引文的分析,相对其它评价指标而言更具稳定性。
本文的主要工作和创新贡献为:首先,本文系统深入地分析了当前学术期刊影响力评价的主要指标类型,分析了这些指标各自的优点与存在的缺陷,得到了学术期刊影响力评价的现状和存在的问题。其次,对引文分析方法应用于学术评价进行了理论分析,论证了文献计量方法的可行性及局限性。再次,本文对学术期刊分层、分类评价方法进行了更深入的研究,构建了学术期刊分层评价的框架和流程,并改进了基于引用相似度,多种分类聚类方法相互参照的面向评价的学术期刊分类方法。最后,也是本文最主要的创新之处:针对学术期刊引文数据幂律分布特征,对引文分析的权重分配方法进行了较为深入的数理特征研究,最终构建起基于非参数统计的秩次分布得分指标评价方法。该指标改善了已有评价指标构造的粗糙性,丰富了现有学术期刊评价指标家族,有望在一定程度上改变单一使用影响因子评价学术期刊带来的负面效应,也使得依据学术期刊作为参照的科研项目、人才和机构的评价更为客观、科学和有效,从而有利于改善科学评价工作,提高科学管理水平。