医学科技人才评价指标体系的信度与效度研究

医学人才

２７９

方法研讨

医学科技人才评价指标体系的信度与

效度研究

李海燕吴少林黄毓文

【摘要】

目的通过对医学科技人才评价指标体系的实际应用，考评指标体系的信度与效度。

方法利用医学科技人才评价指标体系对５１名被收入省科技咨询专家库的专家进行综合评价，对评

价结果与被测评人员在工作岗位的实际表现等多方面因素进行对照和分析。采用Ｃｒｏｎｂａｃｈ’８

ａｌｐｈａ

系数对指标体系的信度进行评价，采用内容效度和结构效度对效度进行评价。结果指标体系的总

Ｃｒｏｎｂａｃｈ’ｓａｌｐｈａ系数为０．９３４，５ｐｅａｒｍａｎ相关分析显示，各级指标得分与其上级指标分值的相关性均

较大（０．８０４—０．９３５），测评分数基本体现了各被测评人员在科研工作中体现出的科研综合素质。结

论

医学科技人才评价指标体系具有良好的信度和效度，能很好地反映实际情况。

【关键词】医学科技人才；指标体系；信度与效度

为进一步促进医学科研管理的科学化、民主化建设，建立一套科学、客观、全面、定量与定性相结合、可操作性强、符合现阶段我国基本国情的医学科技人才综合评价指标体系，本研究前期运用Ｄｅｌｐｈｉ法对３０名专家进行了两轮问卷咨询，对指标进行筛选与修正；运用层次分析法（ＡＨＰ法）确定指标权重；运用模糊综合评判法建立了综合评价模型。指标体系及权重见表ｌ。考虑到本课题研究目的和意义的前提下，为了验证医学科技人才评价指标体系与综合评价模型的客观性、实用性，我们选取了某医学高等院校被收入省科技咨询专家库的５１名专家，应用本研究的评价指标体系及评价模型进行了实际测评，并对评价指标体系的信度和效度进行评价。

１．评价对象与方法

度进行考察。

为了便于比较和分析，将根据所从事专业分成临床医学（４个组）、基础医学、中医学、中药学等７个组，并对被测评人员在工作岗位的实际表现等多方面因素进行对照与分析。

３

结果

３．１指标体系的信度

信度是指根据测验工具所得到的结果的一致性或稳定性，反映被测特征真实程度的指标…。鉴于本指标体系所采用指标具有一定程度的稳定性，重测信度对指标体系的考察作用不大，故仅从内部一致性信度方面来考察指标体系的信度。

检验内部一致性程度常用的检测方法是Ｃｒｏｎ—

ｂａｃｈ’ｓ

ａｌｐｈａ系数心］。信度系数越大，表明测量的可

５１名被测评人员来自某医学高等院校被收入省科技咨询专家库的临床医学、基础医学、中医学等研究领域的专家，均为副高以上职称。

２资料分析方法

所有被测评人员的评价结果均根据医学科技人才评价指标体系与综合评价模型所编制的单机软件评价系统运算生成。

利用Ｃｒｏｎｂａｃｈ’ｓａｌｐｈａ系数对指标体系的信度进行考察。从内容效度与结构效度对指标体系的效

基金项目：广东省医学科研课题（Ａ２００６３６９）

作者单位：５１０５１５广州，广州南方医科大学科技处（李海燕）；５１００６０广州，广东省卫生厅（吴少林、黄毓文）

信程度越大。学者ＤｅＶｅｌｌｉｓ（１９９１）认为，一份信度系数好的量表或问卷，最好在０．８０以上，０．７０～０．８０之间还算是可以接受的范围；分量表最好在０．７０以上．０．６０—０．７０之间可以接受。若内部一致性系数在０．６０以下或者总量表的信度系数在Ｏ．８０以下，应考虑重新修订量表或增删题项。本研究

Ｃｒｏｎｂａｃｈ’８

ａｌｐｈａ系数结果如表２所示。

评价指标体系的总Ｃｒｏｎｂａｃｈ’ｓａｌｐｈａ系数为３．２指标体系的效度

效度是指某～研究工具能真正反映它所期望研

０．９３４，表明指标体系信度较高。

究的概念的程度，是反映调查问卷设计者的意图

医学人才

２８０

（通过将意图用具体问题表述，并且把相关问题组

成模块的形式表述）能否让被调查者理解，即问卷

而保证了指标体系具有良好的内容效度。

结构效度将所有指标和各上级指标做Ｓｐｅａｒｍａｎ相关分析口Ｊ，结果经整理如表３所示。各级指标得分与其上级指标分值的相关性均较大（０．８０４～０．９３５），而与其他指标得分的相关系数较

小。说明本研究指标间具有良好的结构效度。

能否有效地测量各项变量。本研究从内容效度和结构效度来考量指标体系的效度。

内容效度：前期研究中，通过对咨询专家的组成结构分析和专家权威性检验表明，专家对指标的判断是建立在丰富的实践经验和理论基础之上的，从

表ｌ

一级指标

Ｉ一１基本素质

Ｏ．２５０００．７５０００．１１５５Ｏ．２０４２Ｏ．３０８６

医学科技人才综合评价指标体系及权重

权重

０．６６６７０．３３３３

权重二级指标Ⅱ－１科研道德

三级指标Ⅲ．１创新能力Ⅲ－２团队协作皿．３科研管理

权重

０．６１４４Ｏ．２６８４●０．１１７２

组合权重

０．１４２０Ｏ．０４３６０．０１９１Ｏ．００８３０．０４５５０．１３６５０．０６９９０．１２３５

ｏ．２１３０

Ⅱ－２智能素质

Ｉ．２

Ⅱ－３学术职务Ⅱ－２学术荣誉Ⅱ一６论文Ⅱ－５科技奖励Ⅱ－７科研项目

学术造诣

Ⅲ４项目层次０．７５００Ⅲ－５资助额度０．２５００Ⅲ．６授权专利０．１７３４Ⅲ－７版权登记

Ｏ．０７“

Ｏ．１４１００Ｏ．０４６７Ｏ．０１５７

Ⅱ＿８知识产权

Ｏ．０叮ｌ

０．０４１２Ｏ．０２６３Ｏ．０１９２０．０３８２Ｏ．０２９６０．０３３３Ｏ．０１４８０．０１１ｌ０．０１１００．２００２

Ⅲ．８新药证书０．４５６５

Ｉ－３

Ｏ．６０５０

科研业绩

Ⅱ＿９成果转化

０．０９４７

Ⅲ母医疗器械研发０．２９１７

Ⅲ－ｌＯ社会效益０．３３３３Ⅲ－ｌｌ经浊效益０．６６６７

Ⅲ－１２重点学科０．６６６７（基础）

０．７５００（临床）

Ⅲ－１３研发基地（基础）０．３３３３Ⅲ－１４重点专科（Ｉ临床）０．２５００Ｉｌｌ－１５培养层次０．３３３３Ⅲ．１６培养效果

０６６６７

．

Ⅱ－ｌＯ专业建设

Ｏ．０７３３

Ⅱ．１１人才培养０．０５４５

表２医学人才综合评价体系的Ｃｒｏｎｂａｃｈａｌｐｈａ系数

４测评情况综合分析校５１名被收入省科技咨询专家库的专家进行了测评。在前期被测评人员资料收集方面，由于充分利用了省科技咨询专家库和被测评人员在校科技管理部门的相关资料，避免了采用发放资料统计表等一些传统做法所带来的周期长、效率差等缺点。

本研究根据医学科技人才自身特点，构造了医学科技人才评价指标体系，结合模糊综合评价法建立了医学科技人才综合评价方法，并利用医学科技人才评价指标体系及综合评价方法对某医学高等院

医学人才

生堡匡堂魁班蟹理盘壶塑！生！Ｑ旦筮兰！鲞筮！翅￡毡！』丛鲤墅ｉ娶壁丛！望§鳇：堡！：！Ｑ堕：坠！：呈！。№：§

表３

ｌ ｌ

Ｉ－２

２８ｌ

医学人才综合评价指标体系各级指标的相关矩阵 …… 此处隐藏：883字，全部文档内容请下载后查看。喜欢就下载吧 ……