方案评估(Project evaluation)是运用系统性、
质性研究、
定量研究等方法来分析资料、搜集证据,以客观判断社区方案或其他服务之成效与影响。因此,方案评估兼具责信(accountability)与学习的重要功能。
方案评估最早发展于
第一次世界大战前的教育与
公共卫生领域。1930年代,
社会科学专家开始使用严谨的研究方法去评估一些领域的社会方案。1960年代,方案评估的专业领域发展出检验方案过程与成果的科学概念与方法。1963年,
美国国会通过的“社区心理卫生中心法案”中,即订有方案评估之相关要求。1975年,“Evaluation Review”专业期刊问世,同年,“社区心理卫生中心修正案”更特别要求各中心应评估服务方案的需求与实施成效。从此,方案评估就开始成为社区心理卫生中心的重要工作之一。1980与1990年代,方案评估已包含服务提供的成本效果分析(cost-effectiveness analysis)。美国评估学会(
美利坚大学 Evaluation Association)随后创立,目前有将近3500位来自不同州郡、国家与专业的成员。
过程评估(process evaluation)与形成性评估(formative evaluation)、监测与评估(monitoring and evaluation)的概念近似,其主要目的皆在透过即时追踪或检视方案执行的过程与相关产出,以确保依照先前方案所设定的计划目标与期望效益,并循着在具监测功能系统的架构中持续进行下去与完成。因此,方案过程的监测与评估是非常重要的,这关一个方案的成败。过程评估的量化与质化的方式,包括服务人数或人次统计、使用率、问题或资源分析、会议或团体的记录、个案晤谈记录、成本分析、工作日志等。
结果评估(outcome evaluation)与总结性评估(summative evaluation)、绩效评估(performance evaluation)的概念接近,通常指在方案执行完毕之后(也可能是期程之中某个阶段完成)的时间点,透过量化或质化的方法来评价方案是否已达到原先设定的计划目标与期望效果。结果评估的测量方法有实验设计与准实验设计两种类型,包括人员访谈、自我报告、满意度、前后测比较、个案研究、
行动研究、随机对照验证(randomized controlled trials, RCTs)等。
影响评估(impact evaluation)是最具耗时费力与技术难度的评估工作,其指在方案结束一段时间之后,再来评估原先方案设定的最终正向结果或长期的影响程度。例如方案标的对象的快乐幸福感是否持续恶化或有具体提升,另外发生率(incidence)或盛行率(prevalence)也是常用来评估各类
初级预防方案长期影响的客观指标,其他非量化的资料亦可提供影响评估佐证,如医疗记录、健康检查报告、学校成绩单、考试榜单等。为了确认标的对象的正向改变与相关影响是受到方案介入所致,最好能使用实验设计的方式(
实验组与
对照组)来证明,受试样本数不能太少且需随机的
抽样过程。目前,有因果推断的新策略,包含因果归因(causal attribution)与因果贡献(causal contribution)两种。
方案评估的角色功能包括帮助
行政管理决策、改善目前实施中的方案、展现专业上的责信(accountability)、提升方案在效益方面的支持与证明、累积助人服务相关的理论基础。
参与或合作评估(participatory or collaborative evaluation)是评估者与利害关系人(stakeholders)代表组成评估团队,共同合作以进行评估计划、实施与分析,但评估者在团队中只是领导与咨询者。
赋权评估(empowerment evaluation)是一种方案评估的创新模式,主要在于鼓励方案实务工作者先从自我决定做起,并有系统地协助提升其方案规划与执行的相关知能,进而能产生正向的结果循环。赋权评估的概念是立基在赋权与公民参与的理论架构,有训练、促发、鼓吹、启迪、解放(约束或限制)等五个面向。赋权评估与传统评估方式的最大差异之处,在于以改善为最终目标、社区有权做决策、纳入不同利害关系人的观点、民主式的参与、
社会正义取向、善用社区的知识及智慧、实证为基础的策略、能力建构、组织学习、方案责信等十大原则。