协作的结果报告

也可在: Español.
同义词:
参与式表现故事报道技术

协作成果报告(COR)是一种基于绩效故事的参与式影响评估方法,展示了项目如何对成果和影响做出贡献的证据,然后由技术专家和项目利益相关者(可能包括社区成员)进行审查。

由Jess Dart,COR联合公司开发贡献分析多个证据线和级别(MLLE),将现有数据和其他数据映射到程序逻辑制作一个表演故事。绩效故事报告本质上是一个关于项目如何对结果做出贡献的简短报告。尽管它们可能在内容和格式上有所不同,但大多数都很简短,提到了项目的背景和目标,与可信的结果链相关,并得到了经验证据的支持(Dart和Mayne, 2005)。目的是用多行证据来讲述程序性能的“故事”。

COR增加了审查由一个专家面板和利益相关者,有时包括社区成员,检查关于发生了什么影响的证据的可信度,以及这些影响在多大程度上可以可信地归因于干预。正是这些组成部分专家窗格l审查(成果小组)和制定成果的协作方法(通过首脑会议讲习班),将COR与其他成果和影响评估方法区分开来。

台阶

COR采用混合方法,主要利益相关者参与,通常分为6个过程步骤。参与可以发生在该过程的所有阶段:

  1. 范围:举行了成立/规划研讨会。在此研讨会中,阐明了程序逻辑,确定了现有数据并开发了评估问题。
  2. 数据拖网。可以包括主数据源和辅助数据源。通常,对现有证据进行数据拖网。可以招募项目工作人员帮助整理数据。
  3. 社会调查。社会调查可以包括任何形式的数据收集 - 定性或定量。如果在面试和面试指南中获得短暂培训课程的定性,志愿者可以进行面试。这是一种非常有效的方法,让员工在数据中涉及数据,在此过程中有足够的热情。否则顾问或评估管理人员进行所有或比例的访谈。在许多人的例子中,最重要的变化(MSC)技术被用于社会调查过程中的某个点,作为一种捕捉变化故事的方式,包括预期的和意外的。
  4. 数据分析与整合。定量和定性数据可以根据程序逻辑的结果一起分析。“结果图”通常用于集成不同的数据集和类型。
  5. 结果面板。将具有相关科学、技术或行业知识的人员聚集在一起,并出示步骤4中汇编的一系列证据。然后,他们被要求评估在已知知识的情况下,干预对实现目标的贡献,并探索可以解释数据的其他假设。它可以代替公民陪审团。
  6. 峰会研讨会。在一个大型的研讨会上,合成了重点发现和建议,并识别并添加更改的示例(如果可用的话,使用MSC的材料,以及选择最重要的故事的MSC进程)。首脑会议应涉及广泛参与计划人员和社区成员的主要利益相关者。

协作结果报告结构:该报告旨在探索并报告该计划为成果做出贡献的程度。在COR下,报告简短,通常在以下部分方面构建:

  1. 叙述部分解释项目的背景和理由。
  2. 将对程序逻辑模型的成就总结程序总结程序的成就,“结果图表”(参见常见问题解答)。
  3. 描述结果含义的叙述部分,例如成就(预期的和未预期的)、问题和建议。
  4. 提供大量“小插曲”的章节,提供重大变化的实例,通常是第一人称叙述。
  5. 一个索引在证据来源提供更多细节。

COR可以应用于多个部门或多个评估尺度。当评估一开始没有很好的定义结果,或者结果是紧急的、复杂的或复杂的时候,这种方法特别有用。它已被用于海外发展、社区卫生和土著教育等广泛部门,但大多数工作都发生在自然资源管理部门,澳大利亚政府在2007-9年资助了20项试点研究。

根据任务和选项映射方法

管理集群:

发展评估能力:让项目团队和员工参与社会调查和数据收集。

COR可以帮助建立评估能力,因为它有一个特定的任务,涉及社会查询或数据收集阶段的项目团队和工作人员。

定义群集:

开发程序理论/逻辑模型:COR方法的一个关键要素是开发程序逻辑。这用于映射数据和结果,并讲述评估的“绩效故事”。通常,在下面的示例中使用了结果层次结构。

描述集群:

定性和定量数据的结合:COR非常适合结合多种类型的数据,如定性和定性。这部分是由于COR在MLLE中的基础,但也因为COR使用Expert Review和Summit过程将这些数据类型连贯和有意义地组织在一起,映射到程序逻辑上。

收集/检索数据:数据拖网。

数据拖网步骤利用项目记录和任何其他现有监测数据来通知社会调查。

合成群集:

综合来自单一评估的数据:成果小组,首脑会议研讨会。

结果小组(专家小组的一种形式)和峰会研讨会都在评估过程中综合数据。

建议

选择此选项(提示和陷阱)的建议

  • 当需要提供简短而明确的信息和简单的审计追踪以证实这些主张的报告时。组织机构通常高度重视报告,因为它们在信息深度和简洁之间取得了良好的平衡,员工和利益相关者也容易理解。它们有助于建立一个可信的案例,证明已经做出了贡献。
  • 当愿望在该过程中包括计划人员和其他利益相关者并制定评估能力。发达报告的参与式过程为员工和利益攸关方的能力建设提供了许多机会。他们是启动新的监控和评估系统的好方法,因为它们涉及综合和反思所有现有数据和数据差距(一个伟大的平台来思考真正需要的数据!)。对于为计划或评估过程提供资金的购买和所有权,COR过程可能是有价值的。
  • 用于回答关于投资对结果的贡献程度的问题COR主要侧重于回答此类评估问题,因此不应将其视为唯一的报告工具。需要其他方法和途径来回答有关投资或干预的适当性或其成本效益的关键评估问题。COR不是为了解决这些问题而设计的。将来可能会将其添加到该方法中,但该方法目前未涵盖。
  • 利益相关者的价值将被用作评估标准:COR基于利益相关者、项目员工和关键利益相关者的价值在评估中是最重要的前提。评估师试图“括弧”他们的观点,而不是向专家小组和峰会参与者展示一系列的数据摘要,让他们分析和解释。价值观在整个过程中不断浮现和争论。与会者讨论数据来源的价值和意义,并就评估的关键结果达成一致。
  • 当一个项目有紧急或复杂的结果,而这些结果在项目开始时没有完全定义时。因此,在评估过程开始时会刷新程序逻辑。此外,定性调查用于捕捉意外结果,审议过程用于理解调查结果。

使用此选项的建议(提示和陷阱)

  • 将利益相关者包括在内需要细致的管理和谨慎的促进:在错误的时间引入利益相关者可能会给评估带来问题,特别是在峰会阶段。确保将出席首脑会议讲习班或将参与审查报告的所有利益攸关方的声音纳入数据收集阶段是很重要的。这既可以通过社会调查,也可以通过数据搜集和文件审查。如果不包括这些内容,峰会研讨会可能会更加关注数据收集,而不是其真正目的——挖掘真相并提出建议。
  • 仔细关注关键评估。由于没有任何评估能够回答项目利益相关者可能提出的所有问题,因此在范围界定阶段,确定问题的优先级非常关键。所有参与者都应该清楚评估的内容以及评估的重点。
  • 管理成果小组需要考虑利益冲突:在成果小组中召集专家也需要仔细考虑,以避免利益冲突。由于评估的性质,专家可能不可避免地与项目有某种联系,但重要的是,他们不是项目本身的设计人员,也不是项目的一部分,以保持中立。此外,在高度政治化的评估中,专家小组的结果可能令人担忧。在这种情况下,专家评估可能是比COR更合适的方法。
  • 确保绩效故事和数据收集不只是关注绩效的积极方面:COR被批评过于欣赏,或无法讲述糟糕的故事。虽然这肯定是一种风险,但该技术确实试图通过多种方式解决这一问题。首先,要求所有知情者描述该计划的优势和劣势。报告中记录了这些弱点或问题。第二,鼓励成果小组报告成果方面的消极和积极趋势。因此,在这个过程中“消极因素”是无法避免的。然而,结果报告的主题选择通常是有目的的,而不是随机选择的。
  • COR可以在有限的预算下完成:可以通过对流程进行以下更改来降低成本:启动会议和计划会议;更少的访谈;限制数据拖网时间;把成果小组与峰会结合起来。只使用次要数据;或者委托机构负责制作最终报告。然而,有一件事是绝对关键的,那就是首脑会议讲习班。峰会是将评价捆绑在一起,将观点编织在一起的空间。如果管理有效,峰会将把调查结果公诸于世,并提出建议。这是使COR区别于其他结果和影响评价方法的核心因素。
  • 如果程序已经有一个强大的监测、评估、报告和改进框架和过程:你可能不需要的所有元素软木。如果有一个明确的程序逻辑,一个全面的监控系统可能只需要添加一些组件的软木过程,结果面板和峰会等车间。在已经收集了特别的监控数据或没有开发和测试初始程序逻辑的情况下,整个COR流程非常适合。

资源

导游

例子

关于COR的常见问题解答

  1. 科尔来自哪里?

Cor受到John Mayne在贡献分析方面的工作启发。Mayne阐述了需要报告计划逻辑并呼吁这一表演故事报告(Dart和Mayne,2005)。COR采取了这一概念并将其扩展到了一个正在进行的过程和特定的报告产品中。其中部分是有意参与和使用的微量。

  1. 什么是成绩表?

结果图表可以通过数据搜集和社会调查过程中产生的证据,讲述一个项目的变化故事。它是一个图表,在收集的证据旁边描绘活动、产出和结果。

下载

下载此页面的PDF版本(1MB)。

引用这个页面

Dart,J.&Roberts,M。(2014)合作成果报告。从...获得http://m.szbpn.com/plan/approach/cort.

特别感谢本页的贡献者
著者
Clear Horizon Consulting Pty Ltd.董事总经理
澳大利亚墨尔本。
著者
Clear Horizon Consulting Pty Ltd.研究助理
澳大利亚。
管家
Clear Horizon Consulting Pty Ltd.董事总经理
澳大利亚墨尔本。
审稿人
首席执行官,更好的评估。
墨尔本。

评论

匿名的照片
金伯利

只是一个快速编辑说明-这一页的第一段重复。

匿名的照片
Nakea Blair.

我想添加一个数据跟踪工具来衡量项目的预期结果。

SimonDavies的照片
西蒙•戴维斯

你好,中田。我鼓励你们加入我们的讨论小组,并向我们的成员提出这一点,他们中的许多人在这一领域拥有专业知识。以下是供您加入的链接:百富勤讨论小组-主页

问候

西蒙

添加新评论

登录登录并以BetterEvaluation会员的身份发表评论,或者只需填写以下字段即可。