begriffe, narrative und instrumente der ... · monitoring •begleitende datenerfassung in...
TRANSCRIPT
-
bmvit.gv.at
Orientierungslose Wirkungsorientierung?
Begriffe, Narrative und Instrumente der wirkungsorientierten
Haushaltsführung
-
bmvit.gv.at
Inhalt
• Begriffschaos
− Was gibt es für Begriffe?
− Was bedeuten diese Begriffe?
• Wirkung und Wirkungsnarrative
− Was wirkt tatsächlich?
• Instrumente zur Wirkungsmessung
− Wirkungsorientierung vs. Evaluierung
-
bmvit.gv.at
BEGRIFFSCHAOS
-
bmvit.gv.at
• Wie beschreibt/beziffert man die Welt?
• Zentrale Bezeichnungen reflexiv-iterativer Systeme (neben vielen weiteren Wortschöpfungen)
− Feedback
− Reporting
− Monitoring
− Controlling
− Evaluierung
-
bmvit.gv.at
• Wirkungsorientierung?
• Wirkungscontrolling?
• Wirkungsmonitoring?
• 2017 für 2016 nach BHG 2013?
-
bmvit.gv.at
„Wirkungscontrolling“
• Glossar:
-
bmvit.gv.at
„Wirkungscontrolling“
• Wirkungscontrolling-VO:
-
bmvit.gv.at
„Wirkungsmonitoring“
• Glossar:
-
bmvit.gv.at
„Evaluierung“ • Handbuch wirkungsorientierte Steuerung:
-
bmvit.gv.at
„interne Evaluierung“ • § 4 WFA-Grundsatz-VO:
• § 11:
-
bmvit.gv.at
„interne Evaluierung“
• WFA-Handbuch:
• Glossar:
-
bmvit.gv.at
„Wirkungsevaluation“
• Glossar:
-
bmvit.gv.at
Wirkungsorientierung im BHG: Begriffshierarchie
Wirkung, Folgen
• Grundprinzipien für Haushaltsführung, Rechtsetzung und Vorhaben
• Verankert in BHG sowie diversen VO und Begleitdokumenten
Controlling
• Organisation der Wirkungsorientierung in den Ressorts
• Verankert in BHG, VO und diversen Begleitdokumenten
Monitoring
• Begleitende Datenerfassung in Budgetvollzug und Abwicklung von Vorhaben
• Verankert in diversen Begleitdokumenten und www.wirkungsmonitoring.gv.at
Evaluierung
• Rückschauende Überprüfung von Mittelverwendung und durchgeführten Vorhaben
• Verankert in BHG, VO und diversen Begleitdokumenten
http://www.wirkungsmonitoring.gv.at/
-
bmvit.gv.at
WIRKUNG und WIRKUNGSNARRATIVE
-
bmvit.gv.at
„Folgenabschätzung“
• § 4 WFA-Grundsatz-VO:
• Handbuch:
-
bmvit.gv.at
(Er)zählen: Methoden
• § 12 WFA-Grundsatz-VO:
• WFA-Handbuch:
-
bmvit.gv.at
Evaluierungsprodukt Berichte • Wirkungscontrolling-VO:
-
bmvit.gv.at
„Wirkung“
• § 4 WFA-Grundsatz-VO:
• § 3 Angaben zur Wirkungsorientierung-VO:
-
bmvit.gv.at
Echte Wirkungen – BVA 2019
Globalbudget FTI/BMVIT, Gleichstellungsziel: eindeutige „Messung“, direkte Konsequenz
-
bmvit.gv.at
Wirkung in „echten“ Evaluierungen I • BRIDGE (Ausschreibung 2017)
-
bmvit.gv.at
Wirkung in „echten“ Evaluierungen II
• Frontrunner (Ausschreibung 2018)
-
bmvit.gv.at
Wettbewerb der Wirkungsnarrative
• Verwaltung vs. Politik
• Evidence based policy vs. policy based evidence?
− „One case is anecdotical, two cases are data“
• Fakten, Zahlen, Daten vs. Geschichten erzählen
-
bmvit.gv.at
Wer hat die schönste Wirkung im ganzen Land?
• BMDW/Strategiebericht UG33
• BMVIT/Strategiebericht UG34
-
bmvit.gv.at
INSTRUMENTE ZUR WIRKUNGSMESSUNG
-
bmvit.gv.at
Wirkung und Evaluierung
• Wirkungsorientierung und Evaluierung stehen in keiner Konkurrenz zueinander
• Worum soll es eigentlich bei Wirkungsorientierung (hauptsächlich) drehen?
• Wie sonst soll man Wirkungen überprüfen können?
− Das Gesamtsystem „Wirkungsorientierung“ von Haushalt, Regelungen und Vorhaben ist diesbezüglich etwas holprig und wenig stringent
− „Klassische“ Evaluierungen beschäftigen sich meist auch mit Wirkungen
-
bmvit.gv.at
Vergleich Haushaltsrecht zu Evaluierung in Forschung, Technologie und Innovation
BHG 2013 FTI
Wer? Intern + BMF, BMÖDS Extern
Was wird evaluiert? Wirkungsziele • Ex-ante
Zielsetzungen auf unterschiedlichen Ebenen
Wirkung • Terms of reference
Wie wird kommuniziert?
WFA, WFA Evaluierung, Bericht zur Wirkungsorientierung
Evaluierungsbericht
Welche Maxime? Budgetdarstellung und -Planung
Value for money
-
bmvit.gv.at
-
bmvit.gv.at
UG 34 – WZ 1 - Indikatoren
-
bmvit.gv.at
Eingabe Daten BFG-Evaluierung
-
bmvit.gv.at
Behauptete Wirkungen – BVA 2019
Zusammen-hang?
Anm.: Datenquelle FFG-Wirkungsmonitoring
Relevanz?
-
bmvit.gv.at
Low hanging fruits – WFA-Evaluierung
WFA-Evaluierung „Talente“: Abzählen, mehr=besser
-
bmvit.gv.at
FAZIT
• Tooling funktioniert: Ausfüllen von eWO-WFA, BVA-Angaben
• Gefahren
− Self-fulfilling prophecies (die meisten Wirkungsziele werden „automatisch“ erreicht Ambitionsniveau?)
− Pflichtübungen (die meisten WFAs und ihre Evaluierungen)
• Echte Steuerung (z.B. über DB-Zielindikatoren) &
• Verpflichtende Konsequenzen FEHLEN OFT
-
bmvit.gv.at
Vielen Dank für Ihre Aufmerksamkeit
Abteilung III/i2 Forschungs- und Technologieförderung
Dr. Rupert Pichler [email protected]
Dr. Mario Steyer [email protected]
mailto:[email protected]:[email protected]