Kategorie-Archiv: NPO

Wirkungsmessung in der Freien Wohlfahrtspflege – Methoden und ihre Grenzen

Dritter Sektor, Evaluation, impact, Nonprofit-Organisation, NPO, , , ,

Auch in der Freien Wohlfahrtspflege wird die Wirkungsmessung ein zunehmend wichtiges Thema, um die eigene Existenz und Effektivität vor Geldgebern, Politik und Gesellschaft zu legitimieren.

Um einen Überblick über die unterschiedlichen Methoden der Wirkungsmessung zu erhalten, hat das Heidelberger Centrum für soziale Investitionen und Innovationen (CSI) im Auftrag der Bundesarbeitsgemeinschaft der Freien Wohlfahrtspflege ein Transparenzgutachten durch Kehl/Glänzel/Then/Mildenberger erstellt, das im März 2016 veröffentlicht wurde und online verfügbar ist.

Die Forscher untersuchten insgesamt 48 (!) Ansätze zur Wirkungsmessung und zwar nach folgenden Kriterien: methodische Qualität, Quantifizierung und Monetarisierung von Wirkung, Wirkungsdimensionen und -ebenen, Standardisierungsgrad und Ressourcenaufwand, Einsatzfelder und Adressaten. Die Ergebnisse der Analyse sind in einer Tabelle im Anhang des Berichts (S. 71- 86 zusammengefasst).

Das Fazit der Forscher (siehe CSI-Gutachten S. 6f):

  • Die meisten Ansätze betrachten gar nicht den impact (= Nettowirkung) von Maßnahmen, sondern nur den output, d.h. die Leistungen und Güter, die eine Organisation erstellt.  Manche fokussieren auch auf den outcome (= Bruttowirkung), der entsteht, wenn unterschiedliche outputs zusammenkommen. Betrachtet man nur den outcome ist es nicht möglich, einen eindeutigen Zusammenhang zwischen einer einzelnen Maßnahme und einer konkreten Wirkung herzustellen
  • Die Mehrheit der Ansätze konzentriert sich auf nur eine Wirkungsdimension, nämlich die ökonomische, und lässt andere Wirkungsdimensionen (soziale, kulturelle, politische) außen vor
  • Die meisten Ansätze beschränken sich auf die Ebene der Klienten (Mikro) oder auf die gesamtgesellschaftliche Ebene (Makro) und vernachlässigen die Ebene der Organisation (Meso)

Keiner der Ansätze wird der Komplexität von Wohlfahrtsverbänden gerecht, die nicht nur soziale Dienstleistungen erbringen, sondern auch noch weitere Funktionen haben: nämlich Interessen zu vertreten, Menschen zu integrieren und Beteiligungsmöglichkeiten zu bieten.

Die Forscher raten deshalb dazu,  unterschiedliche Ansätze miteinander zu kombinieren. Sie selbst halten fünf davon für Methoden mit größerem Potenzial für Nonprofits, sofern diese Ansätze methodisch und inhaltlich erweitert  und kombiniert werden: Kosten-Nutzen-Analyse, Quality-of-Life-Analyse, IRIS, SROI, Politische Diskursnetzwerkanalyse.

Empfohlen wird auch, auf unterschiedlichen Verbandsebenen unterschiedliche Wirkungsdimensionen in den Blick zu nehmen, also bspw. auf Bundes- und Landesebene sich eher mit den den politischen und ökonomischen Wirkungsdimensionen zu befassen und auf der lokalen Ebene in den Einrichtungen selbst mit den sozialen und kulturellen Dimensionen.

Die Herausforderung liegt darin, dass innerhalb der Freien Wohlfahrtspflege das Thema “Wirkungsmessung” hoch umstritten ist. Analyse-Methoden mit einem rein ökonomischen Blickwinkel werden abgelehnt (und das ist auch gut so). Gleichzeitig fehlt es verbandsintern an den notwendigen Ressourcen und Kompetenzen, um Wirkungsmessungen durchzuführen.

Die Wissenschaftler schlagen deshalb ein mehrstufiges Verfahren der Wirkungsmessung vor, bei dem die Bundesebene der Freien Wohlfahrtspflege eine wichtige Rolle spielen würde, wenn es darum geht, festzulegen, was überhaupt im Rahmen einer Wirkungsmessung gemessen werden sollte (S. 63).

Tatsächlich ist die Erarbeitung einer Basis-Indikatorik, anhand derer die Wirkung gemessen werden kann, für die Freie Wohlfahrtspflege sinnvoll. Aber ich bin der Ansicht, dass diese nicht top down oder von Externen erabeitet werden sollte, sondern ausgehend von der lokalen Ebene, in enger Kooperation mit der Zivilgesellschaft.  Dass so etwas funktioniert, zeigt der Kommunale Index für Inklusion, der in der Praxis getestet und überarbeitet wurde.

Nutzer-Partizipation in Nonprofits – neue Daten aus der Forschung

Daten, Klienten, Nonprofit-Organisation, NPO, Partizipation, soziale Dienste, Sozialeinrichtung, Stakeholder, , , , ,

Welche Konsultations- und Partizipationsformen bieten gemeinnützige Organisationen ihren Nutzern an? Welchen Einfluss haben Nutzer auf  Entscheidungen von Nonprofits? Wie groß ist der Impact von Nutzern verglichen mit anderen Stakeholder-Gruppen, die für gemeinnützige Organisationen wichtig sind?

Diese Fragen untersucht die Studie von Lore Wellens /Marc Jegers, die im Frühjahr 2016 in der Zeitschrift Nonprofit Management & Leadership (Bd. 26, Heft 3, S. 295-312). veröffentlicht wurde . Die Forscher haben dafür die Antworten der Geschäftsführer/innen von 790 großen belgischen Nonprofit-Organisationen aus 14 Fachbereichen ausgewertet.

Der Studie zufolge bieten die meisten gemeinnützigen Organisationen ihren Nutzern Verfahren an, um deren Beschwerden oder Zufriedenheit abzufragen, nämlich 75% der Einrichtungen bzw. 67% (S. 300). Bedeutend weniger sehen einen Nutzerbeirat vor (31%) oder einen Sitz für einen Nutzer-Vertreter im Vorstand (22%). Wobei NPOs aus dem Gesundheits- und Sozialbereich führend sind, wenn es um Nutzer-Beiräte geht. 42% der Einrichtungen haben einen solchen Beirat, der allerdings auch immer häufiger vom Gesetzgeber vorgeschrieben wird.  Insgesamt gibt es viele gemeinnützige Einrichtungen (35%), die zwar keine formalen Verfahren anbieten, um Nutzer an ihrer Strategie- und Politikformulierung zu beteiligen, dafür aber informelle Beteiligungsmöglichkeiten. Generell wählen Nonprofits Verfahren mit geringem Personal- und Zeitaufwand, also eher Fragebögen als Beiräte (S. 299).

Trotz unterschiedlicher Konsultations- und Partizipationsverfahren schätzen die befragten Nonprofit-Geschäftsführer/innen den Impact der Nutzer auf die Entscheidungen einer NPO als geringer ein als den anderer wichtiger Stakeholdergruppen (S. 302):  51% der Befragten halten den Nutzer-Impact für wichtig/sehr wichtig/entscheidend.  Aber als noch viel wichtiger werden der Staat  (80%), der Vorstand (86%) und das Management (97%) wahrgenommen. Nur 7,3 % der Befragten sehen einen Impact von freiwillig Engagierten auf die Politikformulierung, ein interessantes Detail, das inhaltlich zu einem der letzten Artikel hier im Blog passt.

Die Autoren schließen aus diesem Ergebnis, dass es sich bei vielen der angebotenen Verfahren für die Nutzer-Partizipation und -Konsultation um symbolische Politik handelt, streng genommen sogar um eine “Zeit- und Geldverschwendung” (S. 308) seitens der Organisation und der Nutzer, wenn man allein den Impact der Verfahren im Auge hat.  Für die Autoren ist einer der Ansatzpunkte, um den Einfluss der Nutzer auf die Entscheidungen der Organisation zu erhöhen, die Qualität der Partizipations- und Konsultationsverfahren zu verbessern, um die es ihnen zufolge in Nonprofits nicht gut bestellt ist: “(…) the formal mechanisms in place are not perceived to be of good quality.” (Wellens/Jegers 2016, 302).

Literatur für Netzwerk-Knüpfer im Nonprofit-Sektor

Dritter Sektor, Netzwerke, Nonprofit-Organisation, NPO, Quartier, soziale Dienste, Sozialeinrichtung, Strategie, Wissen, , ,

Wie funktionieren Netzwerke aus Organisationen? Wie bilden sie sich und wie wachsen sie, welchen Mehrwert besitzen diese Netzwerke, wie kann man sie steuern und wie evaluieren? Da im Sozialsektor durch die De-Institutionalisierung bzw. durch die Vorgabe “ambulant vor stationär” und die Dezentralisierung von Angeboten der Bedarf nach Koordination unter den Diensten wächst, braucht die Praxis Wissen über Netzwerke als mögliche Steuerungsform.

Wer also Fragen im Hinblick auf interorganisationale Netzwerke hat, findet Antworten in den beiden folgenden Publikationen mit dem Anspruch, Wissen für Praktiker im Nonprofit-Sektor zu bieten:

Popp, J./MacKean, G./Casebeer, A./Milward, H.B./Lindstrom, R. (2013): Inter-organizational networks: A critical review of the literature to inform practice (online verfügbar)

Die Autoren haben 265 englischsprachige Aufsätze, die zwischen 2002 und 2012 zum Thema publiziert wurden, durchgesehen und davon 142 Arbeiten – auch graue Literatur, die nicht im Buchhandel zu finden ist – in ihren kritischen Literaturüberblick aufgenommen. Er soll das Wissen für Praktiker zusammentragen, das derzeit über Netzwerke aus Organisationen existiert.

Die Autoren beleuchten das Phänomen interorganisationaler Netzwerke  aus unterschiedlichen Blickwinkeln und bringen jeweils den aktuellen Stand der Forschung ein.  Sie machen deutlich, dass Netzwerke sehr komplexe Strukturen sind, über die noch zu wenig bekannt ist. Obwohl es schon seit 20 Jahren eine rege Netzwerk-Forschung gibt, sind viele Netzwerk-Eigenschaften immer noch unklar und gibt es zu wenig empirische Studien zum Thema. Die Autoren ermuntern deshalb auch die Netzwerk-Praktiker im Sozialbereich, ihr Wissen über Netzwerke zu veröffentlichen und mit anderen zu teilen.

Quilling, Eike/Nicolini, Hans J./Graf, Christine/Starke, Dagmar (2013): Praxiswissen Netzwerkarbeit. Gemeinnützige Netzwerke erfolgreich gestalten, Springer VS

Auch diese Veröffentlichung richtet sich explizit an Praktiker im Sozial- und Gesundheitsbereich, um diese zum professionellen Netzwerkaufbau und -management zu befähigen. Das Buch fängt an mit der Definition von Netzwerken und einer kurzen Einführung in die inhaltlichen Grundlagen zum Thema . Danach handeln die Autoren die einzelnen Schritte ab, die ein Netzwerk-Gründer im Dritten Sektor gehen sollte, befassen sich mit dem Netzwerkmanagement, der Presse- und Öffentlichkeitsarbeit, der Netzwerkevaluation und der Netzwerk-Finanzierung.

Im Mittelpunkt des Buches stehen Netzwerke, die von der Politik oder vom Gesetzgeber angestoßen wurden und professionell gesteuert werden über eine Steuerungsgruppe oder eine Geschäftsstelle, und weniger Netzwerke, die sich “bottom-up” bildeten und sich basisdemokratisch koordinieren.

Beide Publikationen, die englisch- und die deutschsprachige, bieten wertvolles Netzwerk-Wissen für Netzwerk-Knüpfer, wobei das Buch von Quilling u.a. die beste Wahl ist für jene, die konkret vor der Aufgabe stehen, ein Netzwerk aus Organisationen aufzubauen und die handlungsorientiertes Wissen benötigen.