中华放射医学与防护杂志  2022, Vol. 42 Issue (3): 210-214   PDF    
省级放射卫生技术机构能力评估体系构建初探
卓维海1 , 张伟2 , 张卫媛1 , 姚竹2 , 孙全富2     
1. 复旦大学放射医学研究所,上海 200032;
2. 中国疾病预防控制中心辐射防护与核安全医学所 辐射防护与核应急中国疾病预防控制中心重点实验室, 北京 100088
[摘要] 目的 探索构建省级放射卫生技术机构的能力评估体系。方法 基于Donabedian模型和主要工作职责,构建省级放射卫生技术机构能力评估体系的逻辑框架和能力指标库;运用德尔菲专家咨询法和层次分析法确定各指标及其权重;并开展全国省级放射卫生技术机构能力自测与评估。结果 评估体系包括3个一级指标、11个二级指标、30个三级指标和76个四级指标;以100分为满分计算,29个省级机构的必备能力自评得分在28.7~97.7分之间,平均值为78.7分,各省的分数符合正态分布。结论 本研究建立的评估体系较为科学且全面、可操作性强,可作为评估省级放射卫生技术机构能力的有效工具。
[关键词] 放射卫生    能力评估    Donabedian模型    省级机构    
A preliminary study on the system construction for evaluating the professional capability of provincial radiological health institutions
Zhuo Weihai1 , Zhang Wei2 , Zhang Weiyuan1 , Yao Zhu2 , Sun Quanfu2     
1. Institute of Radiation Medicine, Fudan University, Shanghai 200032, China;
2. Key Laboratory of Radiological Protection and Nuclear Emergency, China CDC, National Institute for Radiological Protection, Chinese Center for Disease Control and Prevention, Beijing 100088, China
[Abstract] Objective To construct a system for evaluating the professional capability of provincial radiological health institutions. Methods Based on the Donabedian model and the main professional responsibilities of provincial radiological health institutions, the logical framework and indicator database of the capability evaluation system were initially constructed, the Delphi expert consultation method and analytic hierarchy process were further used to determine each indicator and its weight. The self-assessment test was carried out throughout the provincial radiological health institutions by using the system established in this study. Results The evaluation system included 3 primary-class indicators, 11 second-class indicators, 30 third-class indicators and 76 fourth-class indicators. Taking 100 points as the full score, the self-assessment scores of the 29 provincial institutions ranged from 28.7 to 97.7 with an average of 78.7, and the scores conform to the normal distribution. Conclusions The system established in this study are scientific, comprehensive and operable, which can be used as an effective tool to evaluate the professional capability of provincial radiological health institutions.
[Key words] Radiological health    Capability evaluation    Donabedian model    Provincial institution    

《健康中国行动(2019—2030年)》的15项重大行动中,健康知识普及行动、健康环境促进行动、职业健康保护行动、癌症防治行动等都与放射卫生工作密切相关[1]。为落实和巩固国家战略,国家卫生健康委员会先后出台了《关于加强职业病防治技术支撑体系建设的指导意见》(国卫职健发〔2020〕5号)、《关于做好2020年基本公共卫生服务项目工作的通知》(国卫基层发〔2020〕9号)等工作方案。随着“健康中国”战略的不断推进,医疗卫生领域公立机构的服务质量评价研究在不断深入[2-6],但相对于医疗机构而言,公共卫生机构的服务质量评价研究仍较少,尤其是放射卫生技术机构的能力与质量评价研究依然缺乏。

建立良好且科学实用的放射卫生技术机构的能力与质量评价体系是现代医疗卫生管理制度建设的必然要求,同时也是各级放射卫生技术机构打造优质高效能力水平的必要保障[7]。为此,本研究以Donabedian卫生评估模型为框架,在调研我国省级放射卫生技术机构的主要工作职能基础上,通过专家咨询和层次分析来确定相关指标及其权重,初步建立了省级放射卫生技术机构的能力评估体系及其配套评分方法,以期为不断加强全国放射卫生技术机构的能力建设、开展更加科学的绩效考核管理体系提供支持或参考。

资料与方法

1.机构职能:通过调研中国疾病预防控制中心辐射防护与核安全医学所官网(www.nirp.cn/htm/index.htm)公开的我国放射卫生法律、行政法规、部门规章和规范性文件以及中国疾病预防控制中心的内部资料,将省级放射卫生技术机构的主要职能作为初步设计能力评估的指标库。

2.评估体系构建

(1) 选用模型和指标筛选原则:参照Donabedian卫生评估模型[8],将能力评价框架分为:基础(结构)、环节(过程)和终末(结果)的3个维度。这个分类既能体现出逐层递进又可反映出3个维度的相互关联关系[9-10]。在指标筛选时,遵循卫生管理绩效评价理论中对于考核指标的SMART原则[11],亦即:具体性(specific)、可衡量性(measurable)、可及性(attainable)、目标导向性(result-based)和时效性(time-bound),注重评价指标的科学性与实际应用价值。

(2) 二级指标构建:根据我国放射卫生工作的现状和发展趋势,结合专家咨询意见,对于能反映技术机构各类资源配置关系与效率的基础(结构)维度,本研究主要考量的二级指标包括:①机构独立性。②机构人员配置。③实验室的功能与质量管理体系。对于能体现技术机构技术能力的环节(过程)维度,本研究主要评估如下二级指标:①具备检测/监测(以下简称“检测”)能力的项目数。②检测项目的符合率(有能力检测项目数占本省需检测项目数的比例)。③具备检测能力项目的认证认可情况。④具备检测能力项目通过国家级机构组织能力考核或能力比对的情况。对于技术机构工作成效的终末(结果)维度,本研究主要评估如下二级指标:①完成工作任务情况。②日常业务的信息化情况。③科研/教学成效。④声誉和贡献情况。

3.指标的量化

(1) 专家咨询法:邀请全国省级放射卫生技术机构的业务领导或技术负责人成立咨询专家小组。运用德尔菲(Delphi)专家咨询法[12],并结合实地调研情况,开展两轮专家咨询确立评价指标体系。首轮咨询的重点是二级指标和三级指标的重要性和可操作性,根据首轮咨询结果保留、删减或增加相应指标;第二轮咨询是在首轮的基础上适当调整二级和三级指标体系并加入四级指标,再次要求专家对调整后的指标体系进行重新评价,根据专家咨询结果确定评价指标体系。最终确定的评价指标分为必备能力和加分能力两大类,并分别赋值100分和10分。

(2) 层次分析法:利用第二轮专家咨询中对各指标相对重要性、敏感程度和可操作性的定量评分结果,构建两两比较矩阵,并对矩阵进行综合处理后用层次分析法[13]测算每个指标的权重。为了确保层次分析结果的一致性和准确性,本研究又将各级指标的权重转化为具体分数以便检验。

4.自评测试:为探讨通过上述研究制定出评估指标体系的合理性和可操作性,本研究结合中国疾病预防控制中心辐射防护与核安全医学所官网公开的我国现行有效的放射卫生标准和专家咨询意见,进一步制定了配套评分方法,并邀请全国共31个省级放射卫生技术机构的技术负责人进行自评测试。

结果

1. 定量评估指标体系:经对照省级放射卫生技术机构的主要职能和专家咨询结果,本研究确定的能力指标评价体系包括3个一级指标、11个二级指标、30个三级指标和76个四级指标。根据层次分析法的计算结果,表 1汇总了前3个级别指标及其量化赋值的情况,其中25个三级指标为必备能力,5个三级指标不作强制要求(可加分)。

表 1 省级放射卫生技术机构能力指标设置与分值建议 Table 1 Suggested indicators and scores for evaluating professional capability of provincial radiological health institutions

2. 自评结果:31个省级放射卫生技术机构中共收回29个省级机构的有效自评,29个省级机构需具备能力的总分分布示于图 1。由图 1可见,除1个边远自治区得分低于30分外,28个省级机构的必备能力得分情况呈正态分布,有5个省级机构的得分超过90分,50~70分的也有5个省级机构。经统计,这29个省级机构的平均得分为78.7分,初步反映了我国省级放射卫生技术机构的总体能力处于良好水平。另外,自评结果还显示,有22个省级机构可获得0.7~7.0分不等的加分,但加分的平均值仅有2.4分。

图 1 29个省级机构必备能力自评分数分布情况 Figure 1 Distribution of self-assessed scores of necessary capability of 29 provincial institutions

对于必备能力的一级和二级指标,表 2汇总了29个省级放射卫生技术机构自评的得分率情况。从表 2可以看出,这些省份完成工作任务和通过中国疾病预防控制中心组织的4个项目能力考核/比对的比例均已到达90%以上,但人员配备、检测能力符合率、科研工作和信息化工作的平均得分率均仍低于80%,尤其是信息化工作的平均得分率只有45%。

表 2 一级和二级指标的平均得分率(%) Table 2 Percentage of average scores for the first- and second-class indicators(%)

讨论

Donabedian卫生评估模型是国内外卫生领域常用的能力与质量评价模型[14-16]。本研究运用该模型初步搭建省级放射卫生技术机构的能力评价体系框架,涵盖了基础(结构)、环节(过程)和终末(结果)这3个逐层递进且有密切相互关联的维度;然后在强调指标的科学性与实用价值的同时,遵循SMART原则并结合我国省级放射卫生技术机构的主要职能等实际情况逐步筛选各层级指标;最后再根据专家咨询结果,应用层次分析法获得各层级指标的权重,并做了符合性和准确性检测。因此,评估指标体系的构建方法具有较高的科学性。

本研究构建的省级放射卫生技术机构能力评价体系涵盖了机构独立性、人员与资质、实验室功能、质量管理体系、检测技术能力、实验室认证认可、能力考核/比对、工作成效等基础指标,提出了“能力符合率”指标以客观评价不同省份所需检测技术能力的差异,加入科研工作、信息化工作、声誉与贡献等指标以体现现代放射卫生技术工作的发展需求。从基础能力和能力发展的视角出发,统筹兼顾,尽可能对全方位的能力进行客观评价,评价指标更为全面且合理。

自评结果显示,我国29个省级放射卫生技术机构的总得分呈明显的正态分布变化,客观反映出了各省级放射卫生技术机构的能力存在有地域和经济发展程度不同的差异。这说明了本研究制定的能力评估体系和配套评分方法可供我国省级放射卫生技术机构能力的定量评估借鉴使用,具有较高的合理性和可操作性。自评结果还表明,我国的省级放射卫生技术机构目前存在有:①技术人员普遍不足、相应内设机构非完全独立的基础结构问题。②检测技术能力不能完全满足各自省份的工作需要。③信息化工作和科研工作仍较落后等问题。这可为今后进一步加强并完善我国放射卫生技术机构的能力建设提供方向参考。

受研究期限限制,本研究开展的实地调研和专家咨询数量仍比较局限,各省级机构的自评分数和过程未能完全经研究者现场确认。为此,今后仍应:①进一步扩大实地调研和咨询专家范围,进一步细分体系结构并完善指标设置。②尤其是对终末(结果)中的三级指标如何从绝对量转化成相对量需加以深入研究,以使得评价结果更具可比性等。总而言之,本研究是国内首次开展省级放射卫生技术机构能力评估体系构建的尝试,本研究初步构建的各指标内容和量化评分方法仍有待于在今后的实践中不断检验与调整。

利益冲突  无

作者贡献声明  卓维海负责项目整体设计、数据分析和论文起草;张伟负责提供项目设计建议和提供相关法律法规以及部门工作文件;张卫媛负责专家咨询和数据整理,姚竹负责自评测试工作;孙全富负责项目把关和论文修改

参考文献
[1]
健康中国行动推进委员会办公室. 健康中国行动文件汇编[M]. 北京: 人民卫生出版社, 2019.
Office of Healthy China Initiative Promotion Committee. Compilated documents of healthy China initiative[M]. Beijing: People's Medical Publishing House, 2019.
[2]
沈鑫, 段降龙, 王建华, 等. 公立医院医疗质量绩效考核指标比较分析[J]. 中国卫生质量管理, 2021, 28(7): 44-47.
Shen X, Duan XL, Wang JH, et al. Comparative analysis of medical quality indicators in performance appraisal of public hospitals[J]. Chin Health Qual Manag, 2021, 28(7): 44-47. DOI:10.13912/j.cnki.chqm.2021.28.7.12
[3]
孙桂霞, 丁磊, 李晶, 等. 全面服务质量考核评价促进医院标准化建设[J]. 中国卫生质量管理, 2020, 27(6): 62-66.
Sun GX, Ding L, Li J, et al. Comprehensive service quality assessment to promote hospital standardization[J]. Chin Health Qual Manage, 2020, 27(6): 62-66. DOI:10.13912/j.cnki.chqm.2020.27.6.16
[4]
丁凡, 门韵, 王健生, 等. 三级综合医院学科评价指标体系的构建与应用[J]. 中国卫生质量管理, 2019, 26(4): 41-44.
Ding F, Men Y, Wang JS, et al. Construction of the discipline evaluation index system of tertiary general hospital[J]. Chin Health Qual Manage, 2019, 26(4): 41-44. DOI:10.13912/j.cnki.chqm.2019.26.4.12
[5]
李新超, 别凤赛, 李树峰, 等. 公共卫生服务评价研究的国际经验及启示[J]. 中华医院管理杂志, 2019, 35(9): 728-731.
Li XC, Bie FS, Li SF, et al. Public health service assessment: enlightenments from worldwide experience[J]. Chin J Hosp Admin, 2019, 35(9): 728-731. DOI:10.3760/cma.j.issn.1000-6672.2019.09.005
[6]
苏海军, 姚岚. 公共卫生服务体系绩效评价指标框架研究[J]. 中国卫生经济, 2010, 29(11): 74-75.
Su HJ, Yao L. Researchon performance evaluation framework of public health service systems[J]. Chin Health Econ, 2010, 29(11): 74-75. DOI:10.3969/j.issn.1003-0743.2010.11.028
[7]
沈洪兵. 新型冠状病毒肺炎疫情后我国病控机构改革发展需思考的几个问题[J]. 中华流行病学杂志, 2022, 43(1): 1-4.
Shen HB. Rethinking of institutional reform and development of disease control and prevention system in post COVID-19 epidemic era in China[J]. Chin J Epidemiol, 2022, 43(1): 1-4. DOI:10.3760/cma.j.cn112338-20211218-00997
[8]
Donabedian A. The quality of medical care[J]. Science, 1978, 200(4344): 856-864. DOI:10.1126/science.417400
[9]
李享, 张璐莹, 叶露. 常用卫生领域绩效评价框架的发展和比较研究[J]. 中国卫生资源, 2012, 15(3): 251-254.
Li X, Zhang LY, Ye L. A comparative study on international health care performance assessment frameworks[J]. Chin Health Resource, 2012, 15(3): 251-254. DOI:10.3969/j.issn.1007-953X.2012.03.033
[10]
郭欣, 陈赟, 施雁. 基于Donabedian质量理论构建的护理质量评价标准之间影响关系的研究现状[J]. 护理学杂志, 2014, 29(9): 92-94.
Guo X, Chen Y, Shi Y. Association of quality evaluation indicators created based on the Donabedian's quality evaluation model: a literature review[J]. J Nurs Sci, 2014, 29(9): 92-94. DOI:10.3870/hlxzz.2014.09.092
[11]
吴佳莹. SMART原则在医院岗位综合目标管理中的应用[J]. 现代医院, 2013, 28(2): 45-47.
Wu JY. The application of SMART principal in post synthetical target management of hospital[J]. Modern Hosp, 2013, 28(2): 45-47. DOI:10.3969/j.issn.1671-332X.2013.05.001
[12]
Okoli C, Pawlowski SD. The Delphi method as a research tool: an example, design considerations and applications[J]. Infor Manage, 2005, 42(1): 15-29. DOI:10.1016/j.im.2003.11.002
[13]
Ajami S, Ketabi S. Performance evaluation of medical records departments by analytical hierarchy process (AHP) approach in the selected hospitals in Isfahan: medical records dep. &AHP[J]. J Med Syst, 2012, 36(3): 1165-1171. DOI:10.1007/s10916-010-9578-9
[14]
王震坤, 彭芳, 涂顺桂, 等. 基于Donabedian模型的综合医院门诊部医疗质量评价体系构建[J]. 中国医院, 2019, 23(8): 8-10.
Wang ZK, Peng F, Tu SG, et al. Construction of the outpatient medical quality assessment system of general hospitals based on the Donabedian model[J]. Chin Hosp, 2019, 23(8): 8-10. DOI:10.19660/j.issn.1671-0592.2019.08.03
[15]
赵美英, 肖阳, 王琼. 2009-2015年我国医疗卫生服务体系建设规划的结构和过程评估[J]. 卫生软科学, 2019, 33(5): 3-8.
Zhao MY, Xiao Y, Wang Q. The structure and process evaluation of construction plans for China health service system since 2009 to 2015[J]. Soft Sci Health, 2019, 33(5): 3-8. DOI:10.3969/j.issn.1003-2800.2019.05.0013
[16]
Ayanian JZ, Markel H. Donabedian's lasting framework for health care quality[J]. N Engl J Med, 2016, 375(3): 205-207. DOI:10.1056/NEJMp1605101