首页 百科知识 学科评估指标体系有哪些指标

学科评估指标体系有哪些指标

时间:2022-07-03 百科知识 版权反馈
【摘要】:评估的依据是指标,对复杂系统评价常常要涉及多个因素或多个指标,风险评估指标体系是由多个相互联系、相互作用的评价指标,按照一定层次结构组成的有机整体。只有科学合理的评估指标体系,才有可能得出科学公正的评估结论。整个指标体系必须紧紧围绕评估目的层层展开,才能得出科学的评价结论;“点”指的是指标的独立性和代表性。评估专家的挑选,取决于医院阶段性安全管理目标。

评估的依据是指标,对复杂系统评价常常要涉及多个因素或多个指标,风险评估指标体系是由多个相互联系、相互作用的评价指标,按照一定层次结构组成的有机整体。风险评估指标体系是联系评估专家与评估对象的纽带,也是联系评估方法与评估对象的桥梁。只有科学合理的评估指标体系,才有可能得出科学公正的评估结论。

(一)合理选取评估指标

1.点面结合 “面”指的是“系统”。指标体系必须全面反映风险主体的内部环境和外部环境。医院风险是一个复杂系统(图18-1),我们在确立指标体系的时候,一定要树立“将医院视为一个风险系统”的理念,站在全局的高度看问题。整个指标体系必须紧紧围绕评估目的层层展开,才能得出科学的评价结论;“点”指的是指标的独立性和代表性。独立性指每个指标要内涵清晰、相对独立,同一层次的各指标间评估内容应尽量不相互重叠。代表性指每个指标能够很好地反映评估对象某方面的特征。

2.简明科学 指标体系的大小必须适宜。如果指标体系过大、指标层次过多、指标过细,就会导致风险评估者精力集中到琐碎问题上,耗费大量精力;如果指标体系过小、指标过粗,则不能充分反映风险主体的真实情况。科学是指标体系的制订过程、采用方法、结果表述要符合科学性原则。

3.指标可行 指标应符合客观实际水平,有稳定的数据来源,易于操作和测量。评价指标含义要明确,数据要规范,口径要一致,资料收集要简便易行。

(二)筛选指标

筛选指标一般采取专家评分法。请专家就各指标的重要性进行打分,可分为5个级别:“极其重要、很重要、重要、一般、不重要”,分别赋值“5、4、3、2、1”。计算各指标评分的平均值、满分比和变异系数。平均值的意义在于:如某技能的平均值大于2.5,说明该指标得到了大多数专家的认可;如果小于或等于2.5,则说明没有得到专家们的普遍认可,不进入指标列表。满分比是平均值的辅助指标,其取值在0~100%之间。其值越大,说明给该技能满分的专家比例越大,该指标就越重要。如果该值为0%,则说明该指标不重要,不进入指标列表。变异系数反映专家对各指标相对重要性判断的一致性程度,其取值在0~1之间。变异系数越小,说明专家判断的一致性程度越高。如变异系数小于0.5,则说明对该指标专家的认知较为一致。如变异系数大于或等于0.5,不进入指标列表。

筛选指标还可采用专家会议法和“头脑风暴”法。专家会议法就是邀请相关专家开会讨论进行指标筛选。该法的主要优点是可以交换意见,相互启发,弥补个人决策之不足。专家会议也有明显的缺点,主要表现在易受心理因素的影响,不愿公开修正已发表的意见等;“头脑风暴”法就是为了克服上述缺点而开发出来的一种创造性思维方法,已在预测与评估中得到广泛应用,这种方法对参与会议的专家及意见表达方式都有一些规定。比如,当参加会议的专家相互认识时,要从同一职位的人员中选取,领导人员不应参加,否则对下属人员将产生心理压力;当参加者互不认识时,可在不同职位的人员中选取,这时不论成员的职务与职称等级,都给予同等对待;并且提倡会议的参加者即席发言,不对别人的意见提出质疑和批评等。这样,将有助于克服一般专家会议的短处,而发扬“头脑风暴”的长处。

(三)确定指标权重

利用挑选出来的指标建立评估模型时,还应适当考虑指标对评价结果的影响大小,即各个评价指标在评价模型中的权重问题。目前用于确定指标权重的方法很多,归纳起来有主观定权法和客观定权法两类。前者主要包括专家评分法、成对比较法等;后者主要包括相关系数法、熵权法等。目前使用最广的方法主要有两种:专家评分法和层次分析法,在这里进行简要介绍。

1.专家评分法 专家评分法是一种依靠有关专家,凭借他们在某一学科领域内的理论知识和丰富经验,以打分的形式对各评价指标的相对重要性进行评估,然后借助统计手段,以确定各指标权重大小的方法。专家评分问卷可通过电话、信件、面呈等方式发放,最好在两周内完成问卷填写。如果是采用信件,在呈送的信封里附回邮信封,附收信地址并贴好邮票。专家评分法的步骤如下。

(1)明确评估专家入选条件。所谓专家,应当是熟悉医院安全管理的人才。评估专家的挑选,取决于医院阶段性安全管理目标。在选择专家的过程中,不仅要注意选择知名的本领域专家,还要选择相关学科如管理学、社会学、经济学等学科的专家。选择承担各种领导职务的专家固然重要,但还要考虑到他们事务繁忙,问卷质量可能难以保证。如专家来源困难时,可挑选在该领域内从事10年以上技术工作的专业干部作为评估专家。

(2)确定评估专家人数。专家组人数取决于评估问题的规模。人数太少,结果必然代表性差;人数太多,难以组织且成本较高。研究结果显示当专家人数超过15人时,进一步增加人数,预测精度变化不大。专家组人数以15~50人为宜。

(3)确定专家的权威系数。专家的权威程度一般由两个因素决定,一是专家打分判断依据,二是专家对研究问题的熟悉程度。专家权威程度以自我评估为主,有时也可相互评估。专家打分判断依据(得分)主要有:实践经验(1.0)、理论分析(0.60)、参考国内文献(0.10)、参考国外文献(0.10)、对国内外有关进展的了解(0.05)、直观判断(0.05);熟悉程度得分一般设0.1、0.2、……、1.0共10个等级。专家权威系数是专家打分判断依据和熟悉程度两者得分之和。

(4)权重计算。将专家的重要性得分乘以该专家的权威系数,即得到该专家的加权重要性得分。所有专家的加权重要性得分的平均值就是该指标的权重。

2.层次分析法 层次分析法是美国数学家Saatty TL于20世纪70年代提出的一种定性分析和定量分析相结合的评价方法,在经济学和管理学中得到了广泛应用。层次分析法的基本思想是把复杂问题分解为若干层次,在最低层次通过两两对比得出各方案对总目标的权数,为决策者提供决策依据。该方法能够使复杂的问题系统化、数学化和模型化,将以人的主观判断为主的定性分析定量化,将各种判断要素之间的差异数值化,适用于多目标、多层次、多指标的决策分析,应用范围广泛,包括军事指挥、经济分析与计划、行为科学管理信息系统运筹学方法评价、教育等诸多领域,该法也可用于医院安全工作评估。层次分析法的基本假设是层次间存在递阶结构,从高到低或从低到高递进。当复杂系统中某一层次直接或间接受其他层次影响时,就不属于层次分析范围,而应用网络模型来描述。医院各风险指标之间难免存在互相影响的关系,虽然严格意义上不宜使用层次分析法,但只要各指标相对独立,层次分析法也可得出较为理性合乎实际的结果。层次分析法的步骤如下。

(1)建立递阶层次结构,形成目标树图。对总评估目标进行连续性分解,以得到不同层次的评估目标(各级指标),建立递阶层次结构,用目标树图将各层评估目标标识出来。

(2)建立筛选后指标的两两比较判断矩阵,计算各指标相对权重。将m个评价指标关于某个评估目标的重要程度做两两比较判断获得矩阵A,通常通过求A与特征值m相对应的特征向量,并将其归一化,即可得到该评估指标下各级评估指标的权重系数。

(3)进行一致性检验。在计算归一化权重系数后,应检验所计算得到的权重系数是否符合逻辑。医院安全评估的判断指标阶数一般都大于2,应用同阶平均随机一致性指标(RI)对一致性指数(CI)进行修正,计算随机一致性比例(CR)。

(4)通过乘积法,计算底层指标的组合权重。

(四)注意事项

需要注意的是,指标体系的确定具有很大的主观随意性。虽然指标体系的确定有经验确定法和数学方法两种,但多数研究中均采用经验确定法。尽管确定指标体系过程中用到了很多数学方法,但由于采用的样本集合不同,也不能保证指标体系的唯一性;其次,不管采用哪种定权方法都带有主观成分,需要借助专业知识加以解释;另外,由于医院是个复杂系统,安全管理不可能面面俱到,应有阶段性目标。要根据医院安全管理的阶段性目标确定指标体系,比如说医院安全管理的阶段性目标是降低临床风险,就要选取和建立临床风险管理指标体系。随着一个个阶段性目标的完成,医院安全管理工作也会越来越完善。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈