TIPC

博客 3:来自变革性创新政策测试项目的监测、评估和学习 (MEL):来自南非水和生物多样性计划的思考

Thinking & Analysis

“这就像雷雨中的过山车!一旦……熟悉度增加,谈论概念就更容易了。我发现从业者-学术的动态如此迷人。我非常感谢这次经历。”

 

评估在最后,对吗?随着学习?以及项目的成果?不使用 TIPC 方法论和方法。它不接受 MEL 的这种线性概念化。 TIPC 方法以不同的方式看待事情——而不是“一切照旧”。在整个联盟的政策或计划试验中,我们再次考虑如何监控、评估和从项目中学习,覆盖“TIPC 方法”。

 

研究人员和政策制定者一起将政策实践置于显微镜下,以检查和共同创建有助于实现可持续发展目标 (SDG) 的变革性实验。新设计的“TIPC 方法论”是一个多步骤的学习之旅,它利用 形成性评价 作为跳板走向 变革性成果.以下是南非水项目团队如何找到新方法的。

 

使用 TIPC 方法,监控、评估和学习 (MEL) 持续进行 原位,而不是在最后阶段。 MEL 链贯穿始终,构成了该方法的优势。 MEL 不是由一个单独的团队完成的,它在最后用勾选框检查列表来剖析项目,而是由那些运行、做、生活、适应和发展项目、计划或政策的人完成。因此,这些发现可以立即应用并采取行动。

 

连续反思融入 MEL 设计,以告知下一步要调整或培育的内容以实现变革性成果。关键是要强调这种共创过程和空间来做到这一点s 方法的本质,因此,它的结果。与 MEL 设计的中心产生共鸣的信念是,这种持续的评估以及对项目的必要微调,为构建变革性道路提供了最大的机会。该方法的特点是“使用形成性评价的变革性变革理论”。

 

在我们系列的最后一篇博客中,我们将重点关注在努力实现可持续发展目标 6 的南非生活集水区供水项目中对 TIPC 方法进行原型设计的团队的经验,我们在此背景下研究 MEL 及其对变革性创新的影响政策(TIP)作为一个整体。

 

来自南非国家生物多样性研究所 (SANBI) 的生物多样性和生态基础设施政策顾问 Alex Marsh 和生态基础设施自然资本核算项目经理 Aimee Ginsburg 的思考;和 丹尼尔斯, TIPC 在苏塞克斯大学商学院科学政策研究部 (SPRU) 的协调合作伙伴的研究员,并领导 TIPC 的非洲中心和该项目。

 

SANBI 的核心驱动力是为南非带来已建成基础设施和“生态基础设施”的内在价值。 本系列的第一篇博客 进一步讨论了这种方法,着眼于为什么将已建成的基础设施视为等同于自然的“基础设施”很重要。这一观点完美地说明了以变革创新政策 (TIP) 为中心的社会技术理论。

 

金斯伯格致力于帮助管理和指导自然资本账户的发展,以从经济角度展示生态和自然核算对国家和世界的价值。她着眼于这如何转化为可持续发展目标 (SDG)。她的职责是利用以自然会计为中心的证据和数据来支持决策和工作方向。与生活集水区供水项目一样,每个新项目都会进行自然核算。环境信息的组织是应对气候变化和生物多样性丧失的关键。例如,金斯伯格的职责是审核南非的生态系统和景观,以了解它们可能如何因其他影响生物多样性的土地用途而改变。与国内生产总值 (GDP) 等其他全球指标一样,如何实现标准化,以便有一致且透明的衡量方式?这些数据如何支持实验和项目中的 MEL 指标和指标?

 

这种理解自然账户价值的全球标准化最近随着新发布的 环境经济核算体系(SEEA)  联合国框架。这整合了经济和环境数据,以更好地了解经济与环境之间的联系,突出生态系统为国家及其人民带来的价值。 MEL 活动需要与 SDG 框架一起考虑这一点。对于 TIPC 方法中的 MEL – 本系列的博客 2 对此进行了详细说明 – Ginsburg 有许多相关的问题:

“数据限制在哪里?它如何为可持续发展目标制定指标?我们如何有效地传达自然账户?我们如何使用它们?有什么政策影响?”

 

Ginsburg 看到了在广泛的项目中扩展 TIPC 方法的潜力,并解释了她对这种新方法的动机和兴趣:

“我们正在制定自然会计国家战略,我想将 TIPC 方法应用于这一发展过程。我们还可以通过哪些其他方式来适应我们正在学习的内容?这就是我对 TIP 感兴趣的原因,并参与了将 TIPC 方法整合到我们的 Living Catchments 项目中的实验。”

 

第二位撰稿人亚历克斯·马什(Alex Marsh)描述了她如何为 SANBI 资源调动工作,在主要组成部分进行战略性工作,包括:政策建议和主流化实践;与个人和机构合作的方式,为此提供基于科学的政策建议。这是她参与该项目的过程:“我参与了 SANBI 生活集水区供水的第三部分 检查公共和政策过程的项目。”  

 

Marsh 对 TIP 的最初印象涉及“深深的好奇心”。她解释说: “能遇到以这些方式思考的人真是太好了。 SANBI 一直是主流化的开拓者……十五年来。然而,我们在学术界相对不为人知,因为我们不写论文。所以,互动很棒。关于研究如何在从业者的空间中有意义地工作。我们如何异花授粉?社会过程是关键。我们如何让经验改变我们的工作方式?在公共部门,步伐很快。与 TIPC 的持续关系有助于我们掌握所学知识。”

 

讨论首先围绕 MEL 的复杂性和这个全新的视角——SANBI 的团队对指标的概念发生了怎样的变化?在这里学到了什么?

首先,对于这个过程,Marsh 建议:

“我认为我们可以就设计指标进行额外的会议。这些指标非常务实,并与项目的成果挂钩。这是关于寻找改变实践的方法。很难以有意义的方式衡量影响和结果。它必须是定量和定性的。故事对于展示项目实施带来的转变很重要;以经验说话,而不是还原论者。”

“我必须管理对可能是‘结果’的期望。尝试从新信息中转移和衡量人们的行为,以展示共同学习模式中的学习。知识产品可以以深度协作的方式完成。以硬连线参与的方式制作材料是我正在做的主流工作的一部分。我已经采访了一些人,并将作为 MEL 的一部分回去做这件事。”

在将共同创造作为项目的一部分进行反思时,Marsh 捕捉到了团队的经验:

“我对此有强烈的意见! 第一次见面就像一场雷雨中的过山车!我不了解我所处的地形,然后我们开始滚动。建立信任的原则是允许协作。或许,TIPC 团队可以考虑如何软化入口,找到之前进行对话的方式,帮助我们大家以更有意义的方式找到彼此。一旦熟悉程度增加,谈论概念就容易得多,因为你知道人们来自哪里。我发现这种从业者-学术的动态非常迷人。我非常感谢这次经历。”

“我们谈了很多(关于变革的观点),在 SANBI 中进行了反思,我们是一群从业者的科学家,我们与学者合作,但我们非常强烈地感受到方法之间的差异,我认为探索房间很重要。”

“SANBI 在世界上最擅长的事情是在一个利基市场运作,利用深度社交过程并能够以一种让人们感觉自己在这个过程中拥有发言权的方式占据空间。”

 

Marsh 总结说,为共同创造过程进一步发展提供了建议: “如果我们在工作计划之前将我们的技能组合配对,我们可以更好地构建对话。例如,我们的深层社会过程与变革性结果一起工作。对于共同创造,这将有助于明确我们的希望。这会增加另一层魔法!”

 

金斯伯格支持这一观察,并解释说: “是的,在最初的几节课中,我很难找到自己的位置,尽管我阅读并‘掌握’了理论——这是怎么回事?这一切如何结合在一起? TIPC 过程和社会学习过程(我们使用的)的某种配对可能有助于为找到彼此提供空间。”

 

这表明,在原型项目之前或早期阶段,对 TIPC 实验团队使用的相关过程进行一些分析和映射,将有利于 MEL 开发,特别是对于概念阶段。这将使人们能够“定位自己”并了解每个团队所处的环境和话语。因此,这确实会在整个过程中出现,尽管在“入职”阶段强调这一点被强调为一种帮助策略通过及早建立信任、意识和融洽关系,更快地促进积极成果。

 

这将有助于团队动态和项目的初始化。在这里,该方法远离直接跳入“一切照旧”的方法,在这种方法中,通过密切关注中心的人际互动,团队可能不会以一种微妙的、最终更有成效的方式“组建”。要想成功,既需要时间投入,也需要动力。南非的水实验是第一次测试该方法,TIPC 团队也在学习。这是双方的实验。

 

在 TIPC 研究人员方面,TIP 非洲中心负责人 Chux Daniels 反映: “不仅一开始应该有更多的时间,而且之后的 MEL 会议本身也应该有更多的时间”. Daniels 建议在指导每个政策实验的 TIPC 方法论的结论部分中为 MEL 再增加两个会话。除了为测试和反思选定指标提供空间外,其他会议将侧重于指标的制定。进一步考虑这一点,他发现紧张和平衡是:可用的时间资源;保持必要的势头和结构;并充分探索团队的 MEL 经验。参考这些,丹尼尔斯完成: “影响这一切的因素有很多。这些是我们在船上需要注意的教训。而这一切都是在 COVID 增加挑战的时间内完成的!”

 

采访中涉及的另一个积极方面是“对反思的反思”。在制作南非水实验博客系列时,为了提供机会来说明团队的经验和观点,我们为这一重要的反思活动创造了一个重要的空间,得到了相关人员的赞赏。金斯伯格在采访结束时明确提出了这一点: “我想补充一下这是多么重要。这个过程是经过采访和反思的。我们已经谈到了“入职”。对我来说,这种“外聘”汇报对下一阶段的工作也很有帮助,特别是对于它如何与我正在制定的新的南非国家战略联系起来。从这次讨论中,我得到了提醒和指示。这是该过程的重要组成部分。”

马什继续说: “与实质性汇报的价值相关的另一点是,我们都对强度水平感到惊讶。作为一个团队,我们对每个人的情况进行了另一次深入的反思练习,这对我们非常有用。因此,建议政策团队将其纳入主要计划的一侧。我不得不说,这次会议非常漂亮。”

 

除了专注于团队之外,Marsh 和 Ginsburg 还观察到,通过与更广泛的受众分享团队的经验,在这种情况下,在 区域学习活动 在南非,于 2020 年 10 月 20 日至 22 日举行;有很多积极的 MEL 方面。

“在更广泛的南非论坛上,我们的同事 Shanna Nienaber 向更广泛的观众谈论了该计划,这为围绕重要对话开辟了空间——到底发生了什么?!”

 

Marsh 展示了对 TIPC 工作的长期看法以及已建立的积极关系,他总结道:

“这个汇报过程也很棒,因为我们知道我们已经在一起多年了......!”

 

在总结对团队学习的反思时,金斯伯格展示了这些经验将如何为南非其他重要工作领域提供信息:

“我想与其他合作伙伴更清楚地发展一种(变革性的)变革理论,因为这是一项有价值的练习。随着战略的发展,它吸引了更多的因素引起了我的注意。我们的社会过程的东西将是工作的基本要素,但现在重要的是它是如何进行的,以及它将实现什么。这是较软的元素。现在将有不同的解释共创。我们应该考虑如何阐明 TIPC 方法,以及如何与南非统计局等其他合作伙伴一起使用它。”

 

Marsh 热情地表达了她的最终想法:

“让新同事思考你如何制定战略和政策是最大的可能性!这种新兴的伙伴关系很棒。拥有一个可以与专家一起思考的领域,并拥有一个针对这一工作领域的实践社区。多年来,我们一直在思考变革理论——关于如何去做?!政府说他们想要更多关于变革的理论,而不是如何去做,所以这是一个非常活跃和有创造力的领域。其次,通过这种变革性变革理论,我与对我们所做的事情感兴趣的合作伙伴进行了对话,他们正在观察其中的结果,我们希望将其应用于更大项目的程序和流程设计。这是坐在地平线上。这个框架可以被强有力地应用。我们也想和团队一起写研究论文。我知道这对 TIPC 团队有多么重要。对于政策和研究,将这些结合在一起,使我们的工作更有意义,带来我们都希望在世界上看到的变化。”

 

进行 TIP 实验的主要要点:

对于政策团队:

  • 通过更多的活动和时间来软化理论,与 TIPC 项目团队建立信任和融洽关系,以便理论更容易落地,人们可以在其中“定位”自己。一开始,它可能感觉就像“雷雨中的过山车!”为视角的变化做好准备,不要“一切照旧”。
  • 信任和良好的合作是在这个过程的中途产生的。但一开始,就像许多事情一样,它是令人生畏的,并且存在不确定性。因此,请对此持开放态度,并为项目中内置的团队进行反思性会议。
  • 原型设计经验和学习可以带入其他关键项目。例如,南非正在将其应用于其自然资本核算国家战略 (NCA)。

对于 TIPC 研究团队:

  • 对于利益相关者管理层,与合作伙伴进行了更深入的对话和研讨会,以讨论他们的需求、对合作的共同期望、他们对 TIPC 的看法以及在整个过程中使用 MEL 的经验。
  • 阐明 TIPC 团队(不是顾问,而是合作伙伴)的角色以及 MEL 的目的,以实现变革性成果的共同创造。
  • 将更多时间用于翻译概念、中介活动和整体可访问性。重申与项目合作伙伴的工作和背景的联系。
  • 将理论概念转化为对合作伙伴有意义的东西,强调双向学习过程。
  • 将内部“团队学习”链添加到学习链中。
  • 让相同的人参与各种政策实验,以支持学习并促进知识和理解的转移。
  • 在项目中以相似的方式使用和理解理论概念,特别是因为泛化有助于识别不同环境中的共同挑战。
  • 开发超出 TIPC 生命周期的通用工具。

关于“Blog 3: Monitoring, Evaluation & Learning (MEL) from a Transformative Innovation Policy test project: Reflections from South Africa’s Water and Biodiversity Programme”的一个想法

  1. 多么美妙的故事和经历! TIPC 和团队干得好?

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注