衡量科研水平,看质量还是数量?

时间:2019-08-22 来源:www.eventdesignbylucy.com

?

衡量研究水平,看质量或数量?

c3a0ecfa0b324f8e8b7dd05be2fdcc9a.jpeg

科学研究是创新的源泉,大学是科学研究的主力军。特别是在“双一流”建设的背景下,科研水平的提高已成为高校的核心任务之一。当涉及到水平时,必须有高点和低点,但不同评价体系下的高度难以比较,因此科学评价一直是高校的问题之一。

对大学科研的评价主要是基于同行评审,这也是国际学术界的实践。然而,随着研究投入和产出的快速增长,同行评审的局限性开始出现。同行评审需要大量的时间和精力,并且受评估者对研究结果的熟悉程度,评估者评估标准的客观权威等因素的限制。因此,相对更客观,更具成本效益的定量评估方法开始受到影响。青睐。特别是,基于文献计量学的定量评估方法。然而,学术界仍然对量化评估方法存有疑虑。它认为,目前的科学评价体系是“量大,质量轻”。在科学评价体系中打破“五个唯一”的关键之一在于考虑科学研究质量。质量定量评价体系可以更加科学,客观。

CNCI,科学研究质量定量评估的公认指标

上海软科学最近发布了“世界级学科排名”,按照文献计量学的客观指标对大学的科学表现进行排名,包括论文总数(PUB),论文的标准化影响(CNCI)以及国际合作的比例论文(IC)。和顶级期刊(TOP)的数量,从科学研究,科研质量,国际合作和科研成果的科学维度,客观评价高校的绩效。评估科学研究质量的指标称为类别标准化引文影响(CNI)。 CNCI是衡量科学研究质量的最客观指标之一。 CNCI可以消除不同学科论文引用次数的差异,并以量化和标准化的形式比较不同学科的科研质量。如果CNCI等于1,则表明该组论文的引用性能与全球平均水平相当。如果CNCI小于1,则表明该文引用的表现低于全球平均水平。 CNCI大于1表明该文引用的表现高于全球平均水平。

CNCI消除了学科,年份和文件类型对论文质量的影响,但CNCI能否充分公正地反映学校研究的实力?论文数量与CNCI直接相关吗?物理学是2019年世界级学科排名中排名最高的学科之一,名单上有500所学院和大学。与其他学科相比,整体科研产出更高。因此,本文以物理学为例对该列表进行分析。 CNCI在高校的表现。

论文数量是否决定了质量?

首先,在2019年选择物理学界排名前50位的大学。这50所大学的论文数量相对较多。他们根据PUB分数从高到低,从CNCI得分和这50所大学的PUB得分排名。两者之间的趋势关系可以观察到CNCI与前50所大学的论文数量之间没有简单的线性关系,但CNCI得分通常分布在70-100范围内,而CNCI倾向于相对稳定。

在物理学科中,中国大陆的大学CNCI平均分为64.3分,而全球大学的平均CNCI分数为81.3分。 CNCI得分的计算方法是将大学的CNCI指数的数值除以指标的最大值(开盘数)并乘以100.从CNCI的原始值来看,中国大学的平均CNCI为1.29。该值为2.13,中国大学物理学的平均研究质量远低于全球平均水平。

0168600ad3e345bf97362700ba06220e.jpeg

高等学院论文数量相对较多。 CNCI基本上可以反映这些学校的整体科研质量。但CNCI越高,科研水平越高?事实上,在2019年选择世界顶级学科中CNCI最高的50所大学时,这50所大学的CNCI分数均超过95分,但PUB分数集中在20-50分之间,整体排名为降低。因此,在论文数量相对较少的情况下,CNCI的价值可能无法有效反映学校研究的整体质量。

9d04eab5c6fd42dca1ae36dfa36e0691.jpeg

为了证明“CNCI指标对于具有一定数量的已发表论文的大学更有效”并不仅限于个别学科,我们分析了具有工程领域最高门槛的材料科学和工程学科。首先,在2019年选择材料科学与工程学科的前50所大学,然后根据PUB分数从高到低进行排序。与物理学相比,材料科学与工程学科中排名前50位的大学的CNCI得分基本上分布在70-100分之间,但CNCI与论文数量之间仍然没有直接的线性关系。

37a5ea52a5b34ab0a165cb22764c0d0f.jpeg

在材料科学与工程学科中,中国大陆大学的平均CNCI得分为79.0,世界大学的平均CNCI得分为76.9。从CNCI的原始值来看,中国大学的平均CNCI为1.34,世界大学的平均CNCI为1.28。高等院校材料科学与工程的科研质量总体略高于全球平均水平。在材料科学与工程领域排名前50位的大学中,中国大学占据了15个席位,充分体现了中国大陆在材料科学与工程领域的强大实力。

22fc03a73a234b91b102fde7a9797f9c.jpeg

当高校发表的论文数量很少时,CNCI在材料科学与工程学科和物理学中的分数表现出相似的特征。材料科学与工程学科中CNCI最高的50所大学的PUB分数集中在20-70分之间,这50所大学的CNCI分数集中在90-100范围内,高于排名前50位的大学排名。

663e477e28d74a42bccf45d69685eb36.jpeg

除了物理学和材料科学与工程学科之外,CNCI在其他学科中具有相似的分布特征。因此,尽管CNCI被认为是衡量科学研究质量的最客观指标之一,但考虑到CNCI指标是一个相对指标,当论文数量较少时,CNCI不够稳定。因此,在2019年的世界级排名中,为了更准确地使用CNCI指标来科学地衡量不同学科的高校绩效,在计算指标的得分时,一个学科的最大CNCI被设定为主题。该大学的CNCI平均分是该学科所有大学中CNCI的2倍或实际最大值,以较低者为准,即100分。其他大学根据他们的CNCI比例得分,CNCI超过最高分的大学得分为100分。该算法合理地消除了一些学校少数论文和高CNCI学校的异常影响,使得排名更加客观合理。

当然,科学研究水平的测量不仅限于CNCI。在世界一流学科的排名中,我们采用了一些客观指标来全面反映学校的整体实力。有关2019年世界级学科排名方法和排名结果的更多信息,请参阅《权威发布:2019软科世界一流学科排名》。 SoftSoft还将继续以科学,专业和客观的方式开发和发布排名。

e2880f3dca2c4076bd059fda9d.jpeg

09: 58

来源:软科学

衡量研究水平,看质量或数量?

c3a0ecfa0b324f8e8b7dd05be2fdcc9a.jpeg

科学研究是创新的源泉,大学是科学研究的主力军。特别是在“双一流”建设的背景下,科研水平的提高已成为高校的核心任务之一。当涉及到水平时,必须有高点和低点,但不同评价体系下的高度难以比较,因此科学评价一直是高校的问题之一。

对大学科研的评价主要是基于同行评审,这也是国际学术界的实践。然而,随着研究投入和产出的快速增长,同行评审的局限性开始出现。同行评审需要大量的时间和精力,并且受评估者对研究结果的熟悉程度,评估者评估标准的客观权威等因素的限制。因此,相对更客观,更具成本效益的定量评估方法开始受到影响。青睐。特别是,基于文献计量学的定量评估方法。然而,学术界仍然对量化评估方法存有疑虑。它认为,目前的科学评价体系是“量大,质量轻”。在科学评价体系中打破“五个唯一”的关键之一在于考虑科学研究质量。质量定量评价体系可以更加科学,客观。

CNCI,科学研究质量定量评估的公认指标

上海软科学最近发布了“世界级学科排名”,按照文献计量学的客观指标对大学的科学表现进行排名,包括论文总数(PUB),论文的标准化影响(CNCI)以及国际合作的比例论文(IC)。和顶级期刊(TOP)的数量,从科学研究,科研质量,国际合作和科研成果的科学维度,客观评价高校的绩效。评估科学研究质量的指标称为类别标准化引文影响(CNI)。 CNCI是衡量科学研究质量的最客观指标之一。 CNCI可以消除不同学科论文引用次数的差异,并以量化和标准化的形式比较不同学科的科研质量。如果CNCI等于1,则表明该组论文的引用性能与全球平均水平相当。如果CNCI小于1,则表明该文引用的表现低于全球平均水平。 CNCI大于1表明该文引用的表现高于全球平均水平。

CNCI消除了学科,年份和文件类型对论文质量的影响,但CNCI能否充分公正地反映学校研究的实力?论文数量与CNCI直接相关吗?物理学是2019年世界级学科排名中排名最高的学科之一,名单上有500所学院和大学。与其他学科相比,整体科研产出更高。因此,本文以物理学为例对该列表进行分析。 CNCI在高校的表现。

论文数量是否决定了质量?

首先,在2019年选择物理学界排名前50位的大学。这50所大学的论文数量相对较多。他们根据PUB分数从高到低,从CNCI得分和这50所大学的PUB得分排名。两者之间的趋势关系可以观察到CNCI与前50所大学的论文数量之间没有简单的线性关系,但CNCI得分通常分布在70-100范围内,而CNCI倾向于相对稳定。

在物理学科中,中国大陆的大学CNCI平均分为64.3分,而全球大学的平均CNCI分数为81.3分。 CNCI得分的计算方法是将大学的CNCI指数的数值除以指标的最大值(开盘数)并乘以100.从CNCI的原始值来看,中国大学的平均CNCI为1.29。该值为2.13,中国大学物理学的平均研究质量远低于全球平均水平。

0168600ad3e345bf97362700ba06220e.jpeg

高等学院论文数量相对较多。 CNCI基本上可以反映这些学校的整体科研质量。但CNCI越高,科研水平越高?事实上,在2019年选择世界顶级学科中CNCI最高的50所大学时,这50所大学的CNCI分数均超过95分,但PUB分数集中在20-50分之间,整体排名为降低。因此,在论文数量相对较少的情况下,CNCI的价值可能无法有效反映学校研究的整体质量。

9d04eab5c6fd42dca1ae36dfa36e0691.jpeg

为了证明“CNCI指标对于具有一定数量的已发表论文的大学更有效”并不仅限于个别学科,我们分析了具有工程领域最高门槛的材料科学和工程学科。首先,在2019年选择材料科学与工程学科的前50所大学,然后根据PUB分数从高到低进行排序。与物理学相比,材料科学与工程学科中排名前50位的大学的CNCI得分基本上分布在70-100分之间,但CNCI与论文数量之间仍然没有直接的线性关系。

37a5ea52a5b34ab0a165cb22764c0d0f.jpeg

在材料科学与工程学科中,中国大陆大学的平均CNCI得分为79.0,世界大学的平均CNCI得分为76.9。从CNCI的原始值来看,中国大学的平均CNCI为1.34,世界大学的平均CNCI为1.28。高等院校材料科学与工程的科研质量总体略高于全球平均水平。在材料科学与工程领域排名前50位的大学中,中国大学占据了15个席位,充分体现了中国大陆在材料科学与工程领域的强大实力。

22fc03a73a234b91b102fde7a9797f9c.jpeg

当高校发表的论文数量很少时,CNCI在材料科学与工程学科和物理学中的分数表现出相似的特征。材料科学与工程学科中CNCI最高的50所大学的PUB分数集中在20-70分之间,这50所大学的CNCI分数集中在90-100范围内,高于排名前50位的大学排名。

663e477e28d74a42bccf45d69685eb36.jpeg

除了物理学和材料科学与工程学科之外,CNCI在其他学科中具有相似的分布特征。因此,尽管CNCI被认为是衡量科学研究质量的最客观指标之一,但考虑到CNCI指标是一个相对指标,当论文数量较少时,CNCI不够稳定。因此,在2019年的世界级排名中,为了更准确地使用CNCI指标来科学地衡量不同学科的高校绩效,在计算指标的得分时,一个学科的最大CNCI被设定为主题。该大学的CNCI平均分是该学科所有大学中CNCI的2倍或实际最大值,以较低者为准,即100分。其他大学根据他们的CNCI比例得分,CNCI超过最高分的大学得分为100分。该算法合理地消除了一些学校少数论文和高CNCI学校的异常影响,使得排名更加客观合理。

当然,科学研究水平的测量不仅限于CNCI。在世界一流学科的排名中,我们采用了一些客观指标来全面反映学校的整体实力。有关2019年世界级学科排名方法和排名结果的更多信息,请参阅《权威发布:2019软科世界一流学科排名》。 SoftSoft还将继续以科学,专业和客观的方式开发和发布排名。

e2880f3dca2c4076bd059fda9d.jpeg

只提供信息存储空间服务。

大学

受试者

研究

得分

阅读()