1、健康教育评价 四川省疾控中心健康教育所 刘兆炜一、评价概述评价是客观实际与预期目标进行的比较。评价的核心是比较。评价的基本工具是指标体系。健康教育评价需要有评价设计。(一)评价的性质-1 l 评价是管理的重要组成部分,贯穿于健康教育 项目的始终。评价最主要的作用是判定是否实现目标。同时也关注计划的科学性、可行性和适宜 性。(一)评价的性质-2 l 评价的基本原理是比较。项目客观结果与预期目标的比较实际实施情况与干预活动计划的比较(一)评价的性质-3 l 确定价值标准是评价的前提一种公认标准自身的基线水平他人的成功事实(一)评价的性质-4 l 测量是评价的重要手段准确的信息是评价成功的保障一套科
2、学可行的评价指标各项指标的测量标准与方法完善的信息系统收集、分析并表达资料(二)评价的目的 l 确定健康教育计划的先进性与合理性 l 确定计划的执行情况 l 确定健康教育计划是否达到预期目标,其可持续 性如何 l 项目的产出是否有混杂因素的影响,影响程度如 何 l 向公众和投资者说明项目的结果 l 总结成功经验与不足之处,提出进一步的项目方 向(三)评价的意义 l 评价是健康教育计划取得成功的必要保障 l 评价可以科学地说明健康教育计划的价值 l 评价是一种改善计划 l 评价结果可以科学地向公众、社区阐述项目效 果,扩大项目影响,争取更广泛的支持 l 评价可以提高健康教育专业人员的理论与实践水
3、 平二、评价的种类和内容(一)形成评价 l 形成评价是对健康教育计划本身的评价。 l 回顾审视前馈控制形成评价的基本内容-1 l 根据对象人群的需求/需要及其特点健康教育干预计划的目标是否准确?表述是否明确?程度是否适当?形成评价的基本内容-2干预策略是否清晰?是否有针对性和逻辑性?干预措施是否有理有力?策略、措施和方法是否具有可行性?有无重要遗漏或缺陷?形成评价的基本内容-3健康教育干预计划所涉及的人力、组织、 工作机制、资源分配等是否足够与合理?对象人群能否方便地参与项目工作?形成评价的基本内容-4健康教育干预实施所需要的信息反馈渠道 是否畅通?相关信息处理的能力如何?例1 l 总目标:减
4、少HIV在静脉吸毒者、其他有静脉吸毒危险者及其他 们性伴中的传播。 l 具体目标:减少静脉吸毒者中共用注射器的发生率。(在项目实 施一年后,30%的静脉吸毒者将报告不再共用针具) l 策略:通过同伴教育者为静脉吸毒者和其他有静脉吸毒危险者提 供安全注射和安全行为的知识 l 活动:选择和培训同伴教育者提供HIV/AIDS宣传资料和针具形成评价的方法 l 预实验 l 专家评估 l 计算机模拟形成评价的指标 l 计划的科学性 l 政策的支持性 l 技术的适宜性 l 目标人群对策略和活动的接受程度 高质量的形成评价能最大限度降低项目失败 的风险,增加成功的机会。(二)过程评价过程评价起始于健康教育计划
5、实施开始之 时,贯穿于计划执行的全过程。完善的过程评价资料可以为解释健康教育 的结果提供丰富的信息。过程评价还可以有效地监督和保障计划的 顺利实施。过程评价的内容-1 l 针对个体的评价内容哪些个体参与健康教育项目?在项目中运用了哪些干预策略和活动?这些活动是否在按计划进行?计划是否做过调整? 为什么调整?如何调整的?目标人群对干预活动的反应如何?是否满意并接受? 是用什么方法了解目标人群的反应的?目标人群对各种干预 活动的参与情况如何?项目资源的消耗情况是否与预计一致?不一致的原因 是什么?改进建议过程评价的内容-2 l 针对组织的评价内容项目涉及哪些组织?各组织之间是如何沟通的?他们参与项
6、目的程度和决策力量是如何?项目执行档案、资料的完整性、准确性如 何?过程评价的内容-3 l 针对政策和环境的评价内容项目涉及哪一层的政府?具体与政府的哪些部门有关?在项目执行过程中有无政策环境方面的变 化?这些变化对项目有什么样的影响?在项目进展方面是否与决策者保持良好沟 通?过程评价指标-1 项目活动执行率= 某时段已执行项目活动数 某时段应执行项目活动数 100%过程评价指标-2 干预活动覆盖率= 参与某种干预活动的人数 目标人群总人数 100%过程评价指标-3 干预活动暴露率= 实际参与项目干预活动人数 应参与该干预活动的人数 100%过程评价指标-4 有效指数= 干预活动暴露率 预期达
7、到的参与百分比过程评价指标-5 目标人群满意度对干预活动内容的满意度对干预活动形式的满意度对干预活动组织的满意度对人际关系的满意度过程评价指标-6 资源使用进度指标活动费用使用率年度费用使用率年度费用进度比过程评价的方法-1 l 记录与报告 l 定期召开例会 l 现场督导 l 审计 l 专项调查:定量调查半定量调查定性调查过程评价方法-2 l 查阅档案资料项目活动进度、目标人群参与情况、费用 使用情况 l 目标人群调查目标人群参与情况、满意度(定性、定量 调查) l 现场观察干预活动执行情况、目标人群参与情况、满意度过程评价方法-3为了确保过程评价的准确性,质量控制是必不可 少的,包括:内部质
8、控-项目工作人员在执行项目过程中能准确 记录项目活动进行情况,有可操作性评价指标并能 严格把握标准外部质控-项目以外的、有项目评价经验的专业人 员及专家小组审查的方式进行,能更加客观地反应 项目实施情况(三)效应评价(近中期效果评价)健康教育的最终目的是改善人群健康状况、 提高生活质量。健康教育是通过改变人们的 健康相关行为来实现其目的的。效应评价正是要评价健康教育项目导致的 目标人群健康相关行为及其影响因素的变化。效应评价内容-1 倾向因素:项目执行前后目标人群的卫生保健知识、健康 价值观、对健康相关行为的态度,对疾病易感性和 严重性的信念,采纳促进健康行为的动机,行为意 向以及自我效能等发
9、生了什么变化效应评价内容-2 促成因素:目标人群实现促进健康行为所需要的个人 保健技能、环境条件、卫生保健资源、服务、 技术等方面的变化。效应评价内容-3 强化因素:与目标人群关系密切的人、公众等对目标人群采 纳促进健康行为的支持程度、个人感受等方面在项 目前后的变化,如同伴的评价、家人的理解、社会 道德、公众舆论等效应评价内容-4 健康相关行为:项目实施前后目标人群健康相关行为发生了什 么样的改变各种变化在人群中的分布如何常用效应评价指标-1卫生知识均分卫生知识合格率卫生知识知晓率卫生知识总知晓率常用效应评价指标-2信念持有率常用效应评价指标-3行为流行率行为改变率常用效应评价指标-4环境、
10、服务、条件、公众舆论等方面的改 变,如安全饮用水普及率例2:防制艾滋病健康教育干预活动的近期 效果评价需要收集的资料-1 l 倾向因素艾滋病基本知识:什么是艾滋病?艾滋病的传播途径、艾滋 病病人的临床症状等。防治艾滋病知识:艾滋病如何预防、预防艾滋病相关技能、 怎样寻求预防艾滋病帮助、得了艾滋病或感染了艾滋病病毒怎么 办等防治艾滋病的态度:应该怎样对待艾滋病病人和艾滋病病毒 感染者、预防艾滋病的社会责任、与艾滋病相关的道德情操等例2:防制艾滋病健康教育干预活动的近期 效果评价需要收集的资料-2 l 强化因素:家人、同事和同伴对艾滋病的看法、同伴的艾滋 病风险行为情况、可能涉及艾滋病病毒感染者和
11、艾滋 病病人的制度规定、是否容易获得艾滋病相关信息等例2:防制艾滋病健康教育干预活动的近期 效果评价需要收集的资料-3 l 促成因素地理人口经济情况、艾滋病相关的习俗、教育事 业状况、交通状况、医疗保障和卫生服务状况、大众 媒体覆盖情况等。(四)结局评价(远期效果评价)着眼于评价健康教育项目实施后导致的目 标人群健康状况乃至生活质量的变化。结局评价的内容健康状况:生理和心理健康指标等方面的 变化;疾病与死亡指标;生活质量(五)总结评价总结评价是指对形成评价、过程评价、效 应评价和结局评价的综合以及对各方面资料 做出总结性的概括,能全面反映健康教育项 目成功之处与不足,为今后的计划制订和项 目决
12、策提供依据。健康教育计划评价的种类与内容 计划设 计阶段 项目实 施阶段 项目结束阶段 中间目标 行为改 变 健康状态 生活质 量 评 价 内 容 评 价 指标 评 价 种类 计划设 计 的合理性 科学性 适宜性 可接受性 形成评价 计 划 实 施 情 况 干预活动次数 参与人数 干预活动暴露率 有效指数 行为影响因 素(倾向、 促成、强 化) 知识知晓 率 态度转变率 健康 相 关行为 行为流行 率 行为转变率 行为意向 健康 状态 生理指标 疾病指标 死亡指标 生 活 质量 物理环境 健康状态 心理状态 过程评价 效应评价 结局评价 总结评价三、评价设计方案评价方案的选择取决于评价的目的以
13、及项目的具体情 况,如项目的周期、资源、技术等。 方案中的因子通常包含: R(random):随机化,指采取随机抽样的方法确定干预组和/ 或对照组 E(experiment):指接受健康教育干预的人群,称为干预组 或实验组。 C(control):指在健康教育项目中不对其进行干预,用作参 照的人群称为对照组。 O(observation):指观察、调查、测量等收集资料的过程。 X:代表健康教育项目的干预措施(一)不设对照组的前后测试 l 是评价方案中最简单的1种,通过比较目标人群在项目实 施前后有关指标的情况反映项目效应与结局,通常以EOXO来 表示。 l 优点:方案设计与实际操作相对简单,能
14、节省人力、物力 资源。 l 不足:实施后项目人群的表现不能消除其他因素带来的影 响 l 适用于周期比较短或资源有限的健康教育计划的评价(二)非等同比较组设计是类实验设计的一种,设计思想是设立与干预组相匹配的 对照组,为通过对干预组、对照组在项目实施前后变化的比较来评 价健康教育项目的效应和结局。 优势:有效地消除一些混杂因素 关键:对照组的选择,要选择各主要特征十分接近干预组的 人群作为对照组,保证两组的可比性。(三)实验研究 l 本方案的特点是将研究对象随机分为干预组和对 照组,充分保证了干预组与对照组之间的齐同性, 结果的真实性好。 l 优势:最为理想的评价方案 l 但是在实际的健康教育项
15、目中操作难度大,随机 化不易实现例3:预防艾滋病健康教育评价情况-1 l 评价设计方案 相关研究多采用不设对照组的前后 测试 l 评价方法:多采用自行设计的调查问卷,少数研 究采用个人访谈、参与式观察法等定性研究方法。 l 问卷调查主要针对知识、态度等进行评价,结果 较片面例3:预防艾滋病健康教育评价情况-2 l 评价时间:分析文献发现,绝大多数研究均在健 康教育结束1月内进行评价,有些甚至是结束后立即 进行 l 评价内容与指标:多数评价针对对象的艾滋病相 关知识、态度进行评价;其次是行为改变,如安全 套的使用、非婚性行为、HIV自愿监测与咨询等;多 数文献选用知识知晓率、正确态度持有率及行为
16、改 变率等指标。例3:预防艾滋病健康教育评价情况-3 l 我国目前并没有国家级的艾滋病健康教育评价 内容和指标体系,但有相关研究已启动并可见 相应的研究成果。 l 国际上针对艾滋病防控的评价指南或指标中包 括了知识与行为、效果、远期效应等指标。例4 健康素养的重要意义 l 健康素养是一个能综合反映个体或群体健康相关理念 、 认知、行为、技能水平的健康指标,被认为是独立于遗 传与自然因素、社会与经济环境、医疗技术与服务等之 外的一个“独立健康决定因素”目前国际上认同健康教育与健康促进是改善人群健康 素养水平的主要手段之一,并将健康素养的改善情况作 为反映健康教育与健康促进行动效果的一个主要指标。例4 健康素养与传统健康教育评价指标的 关系知识知晓率和行为形成率:可以反映人群缺乏哪些 健康知识,哪些健康行为亟待改善健康素养:综合测量和计算人群的健康意识、认知 、行为、技能,能全面反映个体、群体维护自身健康 能力的独立指标,丰富了健康教育效果评价方法和指 标四、影响评价结果的因素 l 时间因素 l 测量或观察因素 l 回归因素 l 选择因素 l 失访 谢谢!