Implemen'ng experimental governance: Implica'ons for the - PowerPoint PPT Presentation

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Implemen'ng ¡experimental ¡governance: ¡ Implica'ons ¡for ¡the ¡evalua'on ¡of ¡industrial ¡policy ¡ and ¡for ¡maximising ¡learning ¡from ¡industrial ¡ prac'ce ¡ ¡ ¡ Briefing ¡on ¡work-­‑in-­‑progress ¡ ¡ Presenta)on ¡to ¡the ¡OECD ¡Expert ¡Group ¡on ¡the ¡Evalua)on ¡of ¡Industrial ¡ Policy ¡ 16 ¡January ¡2014 ¡ Dr ¡Mark ¡MaDhews ¡ Execu)ve ¡Director ¡ HC ¡Coombs ¡Policy ¡Forum ¡ ¡ mark.maDhews@anu.edu.au ¡ 1 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Background ¡to ¡this ¡work ¡ • Confluence ¡of ¡three ¡strands ¡of ¡exploratory ¡work ¡rela)ng ¡to ¡ risk ¡issues: ¡ – aDempts ¡to ¡reduce ¡the ¡costs ¡and ¡)mes ¡required ¡for ¡evalua)on ¡and ¡reviews ¡of ¡ government ¡spending ¡by ¡learning ¡from ¡the ¡use ¡of ¡structured ¡hypothesis ¡ tes)ng ¡in ¡the ¡US ¡intelligence ¡community ¡(an ¡inherently ¡risk-­‑based ¡perspec)ve) ¡ – tensions ¡created ¡by ¡the ¡(risk-­‑averse) ¡manner ¡in ¡which ¡output-­‑outcome ¡ budge)ng ¡has ¡been ¡applied ¡in ¡the ¡public ¡sector ¡given ¡governments’ ¡role ¡as ¡ uncertainty ¡and ¡risk ¡manager ¡of ¡last ¡resort ¡ – (for ¡myself) ¡an ¡interest ¡in ¡the ¡investment ¡risk ¡management ¡dimension ¡of ¡ private ¡sector ¡and ¡defence ¡sector ¡innova)on ¡and ¡what ¡this ¡means ¡for ¡ government ¡science ¡and ¡innova)on ¡policy ¡(and ¡also ¡the ¡lessons ¡for ¡ implemen)ng ¡experimental ¡governance) ¡ Pu\ng ¡together ¡a ¡powerful ¡interna)onal ¡team ¡to ¡deliver ¡aspects ¡of ¡this ¡ • work: ¡Geoff ¡White ¡and ¡myself ¡have ¡just ¡been ¡joined ¡by ¡Ed ¡DeSeve ¡(a ¡ major ¡figure ¡in ¡US ¡public ¡management ¡who ¡oversaw ¡the ¡implementa)on ¡ of ¡the ¡American ¡Recovery ¡and ¡Reinvestment ¡act ¡for ¡President ¡Obama) ¡ 2 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ IMPLEMENTING ¡ Are ¡common ¡ EXPERIMENTAL ¡ Which ¡ evalua)on ¡methods ¡ GOVERNANCE ¡ aDributes ¡of ¡ aligned ¡with ¡ industrial ¡ experimental ¡ Does ¡the ¡ prac)ce ¡can ¡ governance ¡ Can ¡the ¡ experimental ¡ contribute ¡to ¡ principles? ¡ methods ¡used ¡ governance ¡ experimental ¡ ¡ to ¡evaluate ¡ perspec3ve ¡ governance? ¡ Do ¡we ¡need ¡to ¡do ¡ industry ¡policy ¡ have ¡anything ¡ anything ¡differently? ¡ inform ¡ to ¡offer ¡ experimental ¡ industrial ¡ governance? ¡ prac3ce? ¡ MAXIMISING ¡ IMPLICATIONS ¡ LEARNING ¡ FOR ¡ FROM ¡ EVALUATING ¡ INDUSTRIAL ¡ INDUSTRY ¡ PRACTICE ¡ POLICY ¡ Any ¡implica3ons ¡for ¡unfinished ¡ business ¡in ¡evalua3ng ¡industry ¡ policy ? ¡ 3 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Can ¡the ¡ methods ¡used ¡ Exploring ¡the ¡comprehensive ¡use ¡of ¡structured ¡hypothesis ¡tes'ng ¡ to ¡evaluate ¡ industry ¡policy ¡ inform ¡ Par'cularly ¡interested ¡in ¡ experimental ¡ designing ¡and ¡tes'ng ¡ ANALYSIS ¡OF ¡ governance? ¡ beSer ¡ways ¡of ¡managing ¡ EVIDENCE ¡ risk ¡management ¡via ¡the ¡ use ¡of ¡structured ¡ hypothesis ¡tes'ng. ¡ ¡ ¡ Reducing ¡the ¡risks ¡of ¡ ¡ STRUCTURED ¡ -­‑ misdiagnosis ¡of ¡ POLICY ¡ HYPOTHESIS ¡ EVALUATION ¡ DESIGN ¡ causes ¡of ¡problems ¡ TESTING ¡ FRAMEWOPRK ¡ -­‑ nega've ¡unintended ¡ consequences ¡ -­‑ wasted ¡spending ¡due ¡ to ¡low ¡efficacy ¡ PROGRAM ¡ DESIGN ¡ Aim ¡is ¡to ¡fully ¡integrate ¡evalua3on ¡into ¡wider ¡ governance ¡func3ons ¡ 4 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Can ¡the ¡ methods ¡used ¡ Diagnos'c ¡nes'ng ¡of ¡hypotheses ¡ to ¡evaluate ¡ industry ¡policy ¡ inform ¡ experimental ¡ governance? ¡ Currently ¡being ¡ trialed ¡by ¡the ¡ Produc3vity ¡ Commission ¡in ¡ Australia ¡(review ¡ of ¡business ¡ regula3on) ¡ 5 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Invented ¡(par'al) ¡illustra'on ¡(real ¡pilot ¡findings ¡are ¡ confiden'al) ¡ 6 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡

Crawford ¡School ¡of ¡Public ¡Policy ¡ HC ¡Coombs ¡Policy ¡Forum ¡ Australian ¡Na'onal ¡University ¡ A ¡Joint ¡Australian ¡Government ¡– ¡Australian ¡Na)onal ¡University ¡ini)a)ve ¡ Which ¡ aDributes ¡of ¡ Grasping ¡the ¡investment ¡risk ¡dynamics ¡of ¡the ¡innova'on ¡process ¡ industrial ¡ prac)ce ¡can ¡ Can ¡be ¡useful ¡for ¡highligh)ng ¡the ¡importance ¡of ¡a ¡well-­‑define ¡appe)te ¡for ¡ contribute ¡to ¡ risk ¡in ¡the ¡public ¡sector ¡and ¡for ¡specifying ¡this ¡appe)te ¡for ¡risk ¡in ¡clear ¡terms ¡ experimental ¡ governance? ¡ EV ¡= ¡P S ¡x ¡NPV S ¡– ¡P F ¡x ¡NPV F ¡ Where: ¡ ¡P S ¡ = ¡Probability ¡of ¡Success ¡ ¡P F ¡ = ¡Probability ¡of ¡Failure ¡(1-­‑ ¡P S ) ¡ ¡ NPV S ¡ = ¡Net ¡Present ¡Value ¡of ¡Success ¡ ¡NPV F ¡ = ¡Net ¡Present ¡Value ¡of ¡Failure ¡ ¡ ¡ Interested ¡in ¡improving ¡how ¡we ¡handle ¡ the ¡impact ¡on ¡investment ¡risk ¡of ¡ government ¡innova3on ¡support ¡(e.g. ¡ R&D ¡tax ¡concessions/credits ¡etc). ¡ Can ¡ we ¡assess ¡this ¡more ¡directly ¡than ¡at ¡ present? ¡ 7 ¡ The ¡HC ¡Coombs ¡Policy ¡Forum ¡receives ¡Australian ¡Government ¡funding ¡under ¡the ¡‘Enhancing ¡Public ¡Policy’ ¡Ini)a)ve ¡