Qualitätsmanagement

Das Kernstück der Wirkungsmessung sind die Wirkungsstudien, die an fünf Punkten des Lernzyklus – nämlich vor dem ersten ASA-Seminar, vor dem Projektpraktikum, nach dem RENew, ein Jahr nach dem RENew sowie fünf bis zehn Jahre nach der Teilnahme am ASA-Programm – die Zufriedenheit der Teilnehmenden, ihre Lernprozesse sowie die Erreichung der Lernziele messen.

Damit möchten wir erfahren, inwiefern die Programmteilnahme zu Wissenszuwachs, Kompetenzgewinn und zur persönlichen und beruflichen Entwicklung der Teilnehmenden beiträgt, und natürlich Feedback für die stetige Weiterentwicklung des Programms bekommen.

W0

• Einschätzung der Potentiale, Engagementbereitschaft und Erwartungen der Teilnehmenden

W1

• Konzeption, Methoden und Wirkung der Seminare und der Vermittlung von Gestaltungs- und Handlungskompetenzen
• Erwartungen an das Projektpraktikum
• Möglichkeiten und Ideen der Gestaltung einer Aktivität Globalen Lernens

W2

• Beurteilung verschiedener Aspekte der Seminare vor dem Projektaufenthalt unter Berücksichtigung der unterschiedlichen Wirkungsfelder und Programmformate
• Rückblickende Einschätzung der fachlichen und persönlichen Zusammenarbeit mit den anderen Team-Mitgliedern bzw. der_m Tandempartner_in.
• Reflexionen über den Projektaufenthalt
• Bewertung der ASA-Teilnahme sowie Einschätzung über den Transfer des erworbenen Wissens in die weitere Lebensplanung
• Reflexionen über die Aktivität Globalen Lernens und die Vorbereitung auf diese durch die Seminare
• Einschätzung über weiteres Engagement in der entwicklungspolitischen Bildungsarbeit beziehungsweise im Globalen Lernen und der Rolle des RENew-Seminars dafür.

W3

• Motivation für gesellschaftliches Engagement vor allem in der entwicklungspolitischen Bildungsarbeit
• Transfer der wissensbezogenen, sozialen und methodologischen Qualifikationen
• Allgemeine Bewertung der Teilnahme am und Gründe für oder gegen weiteres Engagement im ASA-Programm

W4

• Einfluss der ASA-Teilnahme auf Berufschancen, ehrenamtliche Tätigkeiten
• Wurde über das Projektpraktikum berichtet, ASA bekannt gemacht, weiterempfohlen?
• Persönliches/berufliches Netzwerk: bestehen noch Kontakte mit Mitgliedern des ASA-Netzwerks, wozu werden oder wurden diese genutzt?
• Einstellungen und Verhalten, zum Beispiel Einstellung zur Entwicklungszusammenarbeit, Konsumverhalten, Interesse an entwicklungspolitischen Fragestellungen, interkulturelle Sensibilität, Handlungsmotivation

Das ASA-Programm strebt für die Evaluation eine Vollerhebung an, das heißt alle Teilnehmende werden gebeten, alle Fragebögen auszufüllen, auch dann, wenn sich Fragen zu überschneiden scheinen. Überschneidungen kommen vor, damit wir die Ergebnisse der einzelnen Studien vergleichen und so Veränderungen nachvollziehen können. Gleichzeitig arbeiten wir stetig daran, die Studienteilnahme für die Teilnehmenden so effizient wie möglich zu gestalten.

Jede Wirkungsstudie lebt von den Perspektiven ihrer Teilnehmenden, denn nur wenn sich sehr viele beteiligen, haben wir die Möglichkeit, einen allgemeinen Eindruck über den jeweiligen Jahrgang zu gewinnen. Die Ergebnisse der Studien werden allen Teilnehmenden im ASA-Intranet natürlich zur Verfügung gestellt.

Eine Bestandsaufnahme, die 2014 durch die CEval GmbH 2014 durchgeführt wurde, hält fest, dass „das (der) im ASA-Programm etablierte W0-W4-Erhebungszyklus […] vom Ansatz her als idealtypisches Design eines Wirkungsmonitoring angesehen (werden kann) […]. Die wiederholte Datenerhebung bei den Zielgruppen über einen längeren Zeitraum erlaubt nicht nur die Messung kurzfristiger Effekte, sondern tatsächlich auch von langfristigen Wirkungen und deren Nachhaltigkeit“.

Neben dem Instrumentarium der Wirkungsstudien dient auch die systematische Befragung anderer Beteiligter am Programm, wie Gremienmitglieder, Teamende und Partnervertreterinnen, der kontinuierlichen Anpassung und Verbesserung des Programms. Insbesondere die routinemäßige Befragung von Projektpartnerorganisationen soll mittelfristig institutionalisiert werden. Die Ergebnisse und Empfehlungen werden in Form von Berichten und/oder didaktischen Materialien aufbereitet und zugänglich gemacht.