DMEL第5问:什么是发展性评估?
传统评估及其局限
在讨论发展性评估前,读者需要先了解,基于信息的使用方式,而划分出的两种传统评估模型(EvaluationModel):
总结性评估(SummativeEvaluation):在干预结束后,搜集信息回溯干预的全过程,来评估干预目标的实现情况、干预的成本-效率等。
形成性评估(FormativeEvaluation):在干预的形成阶段(即执行阶段),搜集信息,识别出阶段性结果和干预的不同方式对结果的影响,以此为干预的全过程提出改进建议。
通俗而言,总结性评估的对象是结果或效果;而形成性评估的对象则是达成效果的全过程,效果本身则位居其次。
这两者的关系是,形成性评估往往能为总结性评估提供支持性证据和过程信息,成为支撑总结性评估结论的有力证据。
这两类传统评估范式,都要求干预的模式(包括目标和实现目标的方式方法)在“形成”前进行“预设”,但在真实世界中,并不是所有的干预工作都能预先设定,工作者往往面对的是复杂多变的现实,这就自然引出了发展性评估(DevelopmentEvaluation)。
发展性评估的特点
发展性评估最早由美国评估界的大师MichaelQuinnPatton提出。Patton认为,在复杂而多变的环境中,一成不变的干预模式和依此而设定的评估过于僵化死板,而无法发挥作用。
因此,Patton在其《发展性评估:使用复杂概念强化创新和使用》(DevelopmentEvaluation:applyingcomplexityconceptstoenhanceinnovationanduse)一书中总结道,发展性评估的最大特点,就是在随复杂环境而“发展”的过程中(而非设定的形成过程),帮助人们分析他们的灵感和期待(HunchesandHopes),测评其“愿景指引下的实际情况”(Vision-directedrealitytesting),捕捉随时出现并转瞬即逝的成果(emergentandchangingreality),并做出即时性反馈(feedingbackreal-timefindings),以此为创新性的干预工作提供支持。
换言之,发展性评估针对的是具有创新性、探索性、环境多变的干预工作,不使用、也无法使用基于目标和手段而设定的评估框架,只能随着干预工作的深入,随时开发评估框架,随时识别和搜集有价值的信息,引导干预工作做出有针对性的调整。
概括起来,传统评估和发展性评估的异同点如下:
传统评估发展性评估
对象模式固定的干预模式不固定、环境多变的干预
目的改进干预过程,证明干预成果帮助干预适应环境,促进创新
方法因循基于目标和方法的评估框架没有固定的框架,随时开发随时使用
发展性评估的核心
对于发展性评估,有几个核心问题需要得到解答,这同时也是发展性评估的工作方向:
1、在复杂的环境中,我们实现了什么变化?这些变化是如何产生的?会带来什么持续结果或影响?
2、这些变化和我们最初的愿景和关切有什么异同?为什么会有这些异同?
3、利益相关方之间的关系、和我们的关系是什么?这种关系在我们的工作前后发生了什么变化?
4、我们能从工作成果和关系变化中学习到什么?对改进我们的工作有什么帮助?
这些问题,始终围绕干预的愿景、干预带来的变化和对工作团队的启发。万变不离其宗,这三点,依然没有脱离评估的基本价值观:目标导向、成果导向、学习导向。
发展性评估的执行者
鉴于发展性评估过程的易变性,发展性评估的最佳执行人员应作为干预团队成员的一份子。但考虑到国内绝大多数基金会、民间组织的监测评估工作还刚刚起步,有意愿采用发展性评估的干预执行团队,可考虑适当引入第三方评估人员,以辅导员的角色对发展性评估进行指导。
具体而言,在项目的关键节点,例如项目设计、活动策划、关键监测时点(可根据时间节点或活动节点设定)、评估等环节,邀请熟悉监测评估工作、了解执行机构和项目团队的第三方评估方,辅助发展性评估相关工作的完成。
这种方式避免了执行团队的评估专业性缺陷,保证了发展性评估的质量,又最大程度节约了评估成本,带动了执行团队对评估专业知识和技能的学习,是在现实约束下较为可行的方式之一。
发展性评估对评估人员的要求
基于发展性评估的如上特点和核心关注点,发展性评估工作者应当具备4点基本能力:
1、战略思考的能力。发展性评估虽然面对多变的环境和模式不固定的干预,但依然遵循目标导向的评估原则,也即上文提到的Vision-directedrealitytesting。这就需要评估人员具备战略思考的能力,在任何情况下,都能够识别变化不定的干预方式与干预目标的关系,避免任何可能偏离目标的行动。
2、逻辑思考的能力。发展性评估尤其强调逻辑思考,这体现为及时、迅速捕捉信息并对信息做出有逻辑性的归类、梳理、分析、总结和推理演绎的能力,以便协助干预团队对工作做出正确、有效的调整。
3、领导能力。在传统评估中,并不特意注重评估人员的领导力,但这对发展性评估较为重要。原因在于,发展性评估对干预的全过程具有“纠偏”、“引领”的功能,这就需要评估人员具备领导能力,及时带领团队朝向正确的方向行进。
4、良好的社区关系。发展性评估所强调的即时、多变而准确的信息,需要依托良好的社区关系,方能获得,这要求评估人员具备处理复杂的社区关系的能力,以便随时获得社区对干预的反馈。
来源:社会资源研究所作者:张峻玮
页:
[1]