Utilization-Focused评价

还提供: 西班牙人
同义词:
以使用为重点的评估,以利用为重点的评估,以利用为重点的评估

由Michael Quinn Patton开发的利用焦点评估(UFE)是一种基于原则的方法,即应评估其对预定用户的实用性。因此,应按照提高调查结果和进程本身的可能使用的方式进行评估,以告知决策并提高绩效。

UFE有两个基本要素。首先,必须清楚地确定评估的主要预期用户,并在评估过程开始时亲自参与,以确保可以识别其主要预期用途。其次,评估人员必须确保主要预期用户评估的这些预期用途指导所有其他关于评估过程所取得的决定。

UFE关注的不是一般和抽象的用户和用途,而是真实和特定的用户和用途。评估人员的工作不是独立于预期用户做出决策,而是帮助将使用评估结果的人员做出决策。

Patton认为评估的研究表明:“如果他们理解和觉得评估过程和调查结果的所有权,预定的用户更有可能使用评估[以及那]嘿,更有可能理解和感受所有权积极参与。通过积极涉及主要预期用户,评估员正在为使用的基础准备。“(Patton,2008,第3章)

UFE可以用于不同类型的评价(形成性、总结性、过程性、影响性),它可以使用不同的研究设计和数据类型。

根据上下文和情况的需要,可以以多种方式使用UFE框架。Patton最初的框架由5个步骤组成,如下例所示。然而,也有一个12步框架(见Utilization-Focused评价(U-FE)清单在下面的参考资料)和最新的更新,这是17个步骤概述如下。

17步UFE框架

  1. 评估和构建计划和组织准备,以实现利用的评估
  2. 评估和提高评估员准备和能力,以进行利用为中心的评估
  3. 识别、组织和吸引主要目标用户:个人因素
  4. 与主要目标用户共同进行的情况分析
  5. 通过确定优先用途,确定主要预期用途并确定其优先顺序
  6. 在适当的情况下考虑和内置流程使用
  7. 重点优先评估问题
  8. 检查评估询问的基本领域是否得到充分解决:实施、结果和归因问题
  9. 确定正在评估哪种干预模型或改变理论
  10. 协商适当的方法,以产生可靠的结果,支持预期用户的预期用途
  11. 确保目标用户了解潜在的方法争议及其含义
  12. 模拟使用结果:评估相当于彩排
  13. 收集数据持续注意使用
  14. 组织并展示数据,供主要预期用户解释和使用:分析、解释、判断和建议
  15. 编写一份评价报告,以便利用和传播重要的研究成果,扩大影响
  16. 跟进主要预期用户,以促进和提高使用
  17. 使用的元评估:负责、学习和改进

例子

这个例子使用了5步UFE框架。

竹子和藤制的国际网络(inbar)
2006年底,国际竹藤网络聘请了一位作者(霍顿)对其方案进行评估。总部设在北京的国际竹藤协会的使命是改善竹藤生产者和使用者的福祉,同时确保竹藤资源基地的可持续性。荷兰政府最初要求并资助评估,作为赠款结束的要求。

步骤1。确定主要目标用户。第一个任务是确定评价的“真正”目的和潜在用户。这一进程首先与国际司法机构主任进行了面对面的会谈,并与荷兰外交部的一名办事人员进行了电话交谈。这表明,双方都希望评价工作有助于加强国际司法机构的方案和管理。在对INBAR总部的初步访问中,确定了更多的利益相关者,包括INBAR董事会成员和当地合作伙伴。

步骤2.获得对UFE的承诺并将评估集中起来。从一开始就明确表示,关键利益相关者致力于利用评估来改善禁区的工作。因此,主要任务是确定Inbar组织发展的关键问题。使用了三种选择:(1)一天长的参与式员工讲习班,审查Inbar最近的工作,并确定改进的主要优势,劣势和领域;(2)访华和工作人员的访谈;(3)提出评估框架,涵盖了广泛的战略,管理系统,计划和结果。

第3步。决定评估选项。经过早期互动,与荷兰外交部进行评估参考条款(ToR),大多数互动是与INBAR经理、工作人员和合作伙伴在现场。联合决定,该机构将编写一份关于其最近活动的综合报告(根据评价员提出的大纲),并在总部组织一次自我评价讲习班。评价员将参加本次研讨会,并对中国、加纳、埃塞俄比亚和印度进行实地考察。司法机构区域协调员提出了实地访问的时间表,然后与评价员进行谈判。

步骤4。分析和解释调查结果并得出结论。在每次实地访问结束时,都同当地司法机构工作人员举行一次汇报会议。在实地访问结束时,在司法机构总部举行了半天的汇报会议和讨论;这是对所有员工开放的。在这次会议之后,评价员会见了个别工作人员,他们表示希望在评价过程中有更多的个人意见。后来,国际律师协会的管理人员和工作人员应邀对评价报告草稿提出评论和更正。

第5步。传播评估结果。评价员亲自会见了INBAR的三个捐助者的代表,讨论评价结果,最后报告已提交给INBAR的捐助者、工作人员和董事会。该报告的摘要已发布在INBAR网站上。

评估的效用。评估过程有助于为地面带来一些问题,并探索加强inbar计划的选项。例如,评估的一个结论是,Inbar应该寻求将其在非洲的工作加强,并将项目管理的责任分散到该地区。随着新项目的开发,朝着这个方向逐渐运动。Inbar最近在亚的斯亚贝巴开设了东非区域办事处,并更加重视与区域和国家合作伙伴的合作。

资料来源:巴顿,M.Q.和霍顿,D.2009。以利用为中心的农业创新评估。国际劳工认证合作(ILAC)摘要第22号ILAC、生物多样性、罗马。

建议

使用这种方法时的建议

  • 虽然在原则上以利用为重点的评估的展开有一个直接的、一次一步的逻辑,但在现实中,这个过程很少是简单的或线性的。例如,评估者可能会发现,随着评估的进行,新的用户变得重要,或者在选择决策过程中出现新的问题。集中评价问题和作出备选决定的过程之间也不一定有明确和清晰的区别;问题提示选项,而方法偏好可以提示问题。
  • U-FE需要评估促进者的主动和熟练的指导和促进。
  • 必须明确谈判评估的时间资源,从一开始就建立,并在协议中陈述。U-F评估基本上的协作性质需要时间和积极参与,在整个过程的每一步,从将使用评估结果的人那些。如果在评估开始后添加新用途或用户,则可能需要额外的资源。
  • 必须明确说明可用于评价的财政资源。它们必须包括除了分析和报告之外的财政资源。必须提供方便使用的资源。
  • 在进行U-F评估时,评估人员必须仔细考虑从开始到结束所做的一切将如何影响使用。

资源

向导

工具

  • Utilization-Focused评价(U-FE)清单:由2002年的Michael Quinn Patton设计这是一个全面的清单,用于承担利用的利用率评估。它提请注意进行使用利用率的评估(UFE)的必要任务和相关挑战。

例子

来源

Patton,M.Q.(2008)。利用焦点评估,第4版。千橡木,加利福尼亚州:贤者。

Patton,M.Q.和霍顿,D。(2009)。利用的农业创新评估。学习与变革研究所(ILAC)简介第22号。ILAC,生物多样性,罗马。

评论

大卫·麦克唐纳的照片
大卫·麦克唐纳

谢谢,这里的材料已经很好了。

参考文献和进一步阅读的清单可以包括Patton, MQ 2011,利用重点评估要点:初级读本,Sage出版物,千橡。

Patricia Rogers的照片
帕特里夏·罗杰斯

谢谢,大卫。正如您所建议的,我们已经添加了这一伟大的资源。

alice macfarlan的照片
爱丽丝Macfarlan.

非常感谢更新的链接,大卫!如果你最终使用了它们,我们很想听听你是怎么做的。

最好的

爱丽丝

BetterEvaluation网站协调员

添加新注释

登录登录并作为BetterEvaluation成员进行评论,或者简单地填写下面的字段。