Refine
Year of publication
Document Type
- Article (9)
- Doctoral Thesis (6)
- Monograph/Edited Volume (5)
- Report (1)
Language
- German (21) (remove)
Keywords
- Evaluation (21) (remove)
PSI-Potsdam
(2023)
An der Universität Potsdam wird seit 2015 im Rahmen der „Qualitätsoffensive Lehrerbildung“ das Projekt „Professionalisierung – Schulpraktische Studien – Inklusion“ (PSI-Potsdam) durchgeführt und am Zentrum für Lehrerbildung und Bildungsforschung (ZeLB) koordiniert. Zur ersten Projektförderphase (2015-2018) erschien der Band „PSI-Potsdam – Ergebnisbericht zu den Aktivitäten im Rahmen der Qualitätsoffensive Lehrerbildung (2015-2018)“ zum Auftakt der Reihe „Potsdamer Beiträge zur Lehrerbildung und Bildungsforschung“.
Der vorliegende Band aus der gleichen Reihe gibt in den Kapiteln „Erhebungen“, „Lehrkonzepte“ und „Vernetzungen“ einen Überblick über alle Teilprojekte der zweiten Projektförderphase (2019-2023). Wissenschaftler:innen aus verschiedenen Fachdidaktiken, Fachwissenschaften sowie aus den Bildungswissenschaften und der Inklusionspädagogik haben im Rahmen des Projektes kooperiert. Sowohl praxisnahe Forschung als auch die Entwicklung neuer Lehrkonzepte sowie Strategien zur Vernetzung innerhalb der Lehrkräftebildung stehen im Fokus dieses Bandes. Die Praxisphasen, die im Rahmen des „Potsdamer Modells der Lehrerbildung“ eine zentrale Rolle spielen, wurden in einer großen Studie über alle Praxisphasen untersucht.
Der Band gibt interessante Einblicke in die Ergebnisse der Teilprojekte und Anregungen sowohl für die eigene Forschung als auch für Entwicklungsarbeit wie zum Beispiel die Entwicklung neuer Lehrkonzepte. Herausgegeben wird dieser Band von PD Dr. Jolanda Hermanns (Gesamtkoordinatorin PSI-Potsdam und Chemiedidaktikerin).
Empirische Studien und schulische Rechtsvorschriften betonen die Relevanz von Schulleiter*innen für die Schulentwicklung. Auf diese Aufgabe müssen Schulleiter*innen in Aus- und Fortbildungen vorbereitet werden. Der vorliegende Beitrag untersucht in einem längsschnittlichen Design Effekte der Fortbildungsreihe Werkstatt „Schule leiten“. Die Teilnehmer*innen bewerten die Werkstatt zumeist positiv und es zeigen sich geringe bis moderate Veränderungen in ihrem selbstberichteten beruflichen Handeln. Schulleiter*innen mit wenigen Jahren Leitungserfahrung berichten dabei über die größten Zuwächse. Der Beitrag diskutiert Implikationen für die Forschung und Fortbildung von Schulleiter*innen.
Der vorliegende Abschlussbericht umfasst die Ergebnisse der wissenschaftlichen Evaluation der Werkstatt „Schule leiten“. Bei dieser Werkstatt handelt es sich um ein 18-monatiges Fortbildungsangebot für Schulleitungen, das durch die Deutsche Schulakademie konzipiert und in Kooperation mit dem saarländischen Kultusministerium für Bildung und Kultur sowie dem saarländischen Landesinstitut für Pädagogik und Medien durchgeführt wurde. Im Zeitraum 2016–2020 absolvierten jeweils zwei Personen des Schulleitungsteams allgemeinbildender Schulen erstmalig in insgesamt drei Durchgängen verschiedene Angebote der Werkstatt. Weiterhin erhielten die Teilnehmenden die Aufgaben, im Zuge ihres Fortbildungsbesuches ein individuelles Schulentwicklungsprojekt zu planen, zu entwickeln und unter Anleitung der Werkstatt in der Schule zu implementieren. Zur Überprüfung der wahrgenommenen Qualität sowie der Wirksamkeit des Fortbildungsangebotes wurde die Universität Potsdam, Arbeitsbereich Prof. Dr. Dirk Richter, beauftragt. Der vorliegende Bericht präsentiert die Evaluationsergebnisse der Durchgänge 2 und 3.
Im Zentrum der Evaluation stehen die folgenden Forschungsfragen: (1) Wie beurteilen die Teilnehmenden die Qualität der Werkstatt „Schule leiten“? (2) Inwiefern hat die Werkstatt „Schule leiten“ dazu beigetragen, die Leitungskompetenzen (u.a. Einstellungen und Führungshandeln) der Teilnehmenden zu stärken? sowie (3) Wie haben sich schulische Strukturen und Prozesse zur Förderung von Schulentwicklung in den teilnehmenden Schulen durch die Werkstatt „Schule leiten“ verändert? Zur Beantwortung der Fragestellungen wurden eine Reihe schriftlicher Befragungen mit den teilnehmenden Schulleitungen sowie den Lehrkräften der teilnehmenden Schulen durchgeführt. Diese Befragungen erfolgten sowohl begleitend zum Fortbildungsprogramm (nach Absolvieren der einzelnen Angebote) sowie in einem Prä-Post-Follow-Up-Design. Weiterhin wurden im Rahmen einer qualitativen Begleitstudie verschiedene Personen (Schulleitung, Mitglieder des Schulleitungsteams, Lehrkräfte) von insgesamt fünf Schulen über drei Zeitpunkte dazu befragt, wie die Planung, Entwicklung und Implementation der Schulentwicklungsprojekte erfolgten.
Die Befunde der Evaluation deuten insgesamt darauf hin, dass die Qualität der Werkstatt „Schule leiten“ als Gesamtprogramm sowie die einzelnen Angebote der Werkstatt sehr positiv bewertet werden. Dabei nehmen die Teilnehmenden von Durchgang 2 die Werkstatt in einer Reihe von Merkmalen positiver wahr als die Teilnehmenden von Durchgang 3. Weiterhin deuten die Ergebnisse darauf hin, dass sich bestimmte Facetten des Führungshandelns der Teilnehmenden im zeitlichen Verlauf positiv verändert haben. Hierfür existieren Hinweise sowohl aus Perspektive der Teilnehmenden selbst als auch aus Perspektive der Lehrkräfte ihrer Schulen. Motivationale Merkmale der Teilnehmenden sowie Aspekte des Führungshandelns, die sich auf Tätigkeiten zur Unterstützung der innerschulischen Kooperation beziehen, bleiben aus Perspektive der Teilnehmenden hingegen weitestgehend konstant. Hinsichtlich der Veränderungen schulischer Strukturen zur Schulentwicklung deuten die Ergebnisse auf eine positive Entwicklung der wahrgenommenen Offenheit gegenüber Kooperation im Kollegium aus Perspektive der Lehrkräfte hin. Die Befunde der qualitativen Begleitstudie liefern weitere Informationen über die wahrgenommene Qualität der Werkstatt sowie über Veränderungen aufseiten der Teilnehmenden und der schulischen Strukturen.
Schulleitungen nehmen eine zentrale Rolle bei der Weiterentwicklung der schulischen Qualität ein. Hierfür existieren Hinweise empirischer Untersuchungen, die Schulleitungen attestieren, dass ihr berufliches Handeln im direkten Zusammenhang mit Strukturen und Prozessen der schulischen Arbeit und mit Merkmalen auf Ebene der Lehrkräfte steht (z.B. Berufszufriedenheit, professionelle Weiterentwicklung; Kim & Lee, 2020; Liu, Keeley, Sui & Sang, 2021). Über diese Zusammenhänge steht das Führungshandeln von Schulleitungen in einer indirekten Beziehung mit der Qualität des Unterrichts sowie mit den Leistungen von Schüler*innen (z.B. Grissom, Egalite & Lindsay, 2021; Özdemir, Gün & Yirmibes, 2021; Pietsch, Lücken, Thonke, Klitsche & Musekamp, 2016). Im Rahmen der schulischen Entwicklung tragen Schulleitungen wesentlich dazu bei, die Entwicklungsbedarfe der Schule zu identifizieren, konkrete Zielstellungen zu definieren sowie entsprechende Maßnahmen zur Erreichung dieser Ziele zu planen, zu implementieren und zu evaluieren (vgl. Dalin, Rolff & Buchen, 1998). In all diese Prozesse können Schulleitungen weitere Mitglieder ihres Leitungsteams sowie Lehrkräfte involvieren und ihnen somit indirekt Führungsverantwortung übertragen (Heck & Hallinger, 2010). Auch aus normativer Perspektive nehmen Schulleitungen eine wichtige Funktion für die schulische Qualität ein. So verfügen sie neben Aufgaben der Administration und Verwaltung der Schule auch zunehmend über die Verantwortung, die schulische Qualität weiterzuentwickeln (Schratz, Wiesner, Kemethofer, George, Rauscher, Krenn & Huber, 2016). In Anbetracht der hohen Relevanz schulischen Führungshandelns für die Schulentwicklung, müssen Schulleitungen über die Kompetenzen zur Ausübung entsprechender Tätigkeiten verfügen. Diese können sie im Zuge einer vorbereitenden Ausbildung sowie durch Angebote der berufsbegleitenden Fort- und Weiterbildung erwerben. Die vorliegende Dissertation schließt an bestehende Forschungsarbeiten an und untersucht mithilfe von insgesamt vier Teilstudien, (1) über welche Aufgaben Schulleitungen hinsichtlich der Schulentwicklung verfügen, (2) wie ihr Handeln mit der Kooperation von Lehrkräften zusammenhängt, (3) wie sie die Zusammenarbeit von Lehrkräften im Rahmen der Schulentwicklung fördern können und (4) wie Schulleitungen auf Tätigkeiten der Schulentwicklung im Rahmen einer Fortbildung vorbereitet werden können. Insgesamt unterstreichen die vier Teilstudien in vielfältiger Weise die Relevanz von Schulleitungen und ihrem beruflichen Handeln für Strukturen und Prozesse der Schulentwicklung. Die Befunde können zeigen, inwiefern Schulleitungen über Aufgaben im Bereich der Schulentwicklung verfügen, wir ihr Handeln mit der Partizipation und Zusammenarbeit und von Lehrkräften im Rahmen der Schulentwicklung zusammenhängt und wie Schulleitungen auf Tätigkeiten der Schulentwicklung im Kontext von Fortbildungen vorbereitet werden können. Diesen Befunden sollte in Zukunft Rechnung getragen werden, indem Schulleitungen einerseits mehr Zeiten und Möglichkeiten für Tätigkeiten der Schulentwicklung eingeräumt werden. Anderseits betonen die Befunde die hohe Relevanz grundständig ausgebildeter Schulleitungen, um die Qualität der schulischen Arbeit längerfristig und eigenverantwortlich weiterentwickeln zu können. Dies sollte im Rahmen der Aus- und Fortbildung von Schulleitungen berücksichtigt werden.
Dieser Band der Reihe „Potsdamer Geographische Praxis“ enthält drei Beiträge, die sich mit dem Handlungskonzept „Tolerantes Brandenburg“ der Brandenburgischen Landesregierung befassen. In allen Beiträgen wird auf der Grundlage empirischer Erhebungen analysiert, wie dieses Konzept zum Umgang mit Rechtsextremismus und Rechtspopulismus sowie zur Demokratieförderung in den letzten Jahren umgesetzt wurde. Die ersten beiden Beiträge haben die sogenannten Zukunftsdialoge „Tolerantes Brandenburg“ zum Gegenstand, die in den Jahren 2015 bis 2017 in allen kreisfreien Städten und Landkreisen Brandenburgs durchgeführt wurden. Der erste Beitrag von Schubarth, Kohlstruck und Rolfes beinhaltet die Ergebnisse der wissenschaftlichen Beobachtung der Zukunftsdialoge; die Ergebnisse beruhen überwiegend auf teilnehmenden Beobachtungen der Zukunftsdialoge und qualitativen Interviews mit Teilnehmenden. Der zweite Beitrag von Bode und Rolfes basiert auf einer quantitativen Methodik und enthält die Auswertungen einer standardisierten Befragung der Teilnehmer/innen der Zukunftsdialoge. Die Ergebnisse beider Untersuchungen liefern wichtige Erkenntnisse und gute Ansatzpunkte, wie einerseits die Institutionen des Beratungsnetzwerks „Tolerantes Brandenburg“ und das Handlungskonzept auf lokaler Ebene eine größere Bekanntheit erlangen könnten und andererseits, welche Schritte hilfreich wären, um eine (noch) stärkere Verankerung des Handlungskonzeptes in den Regionen zu erreichen. Beim dritten Beitrag von Schubarth, Kohlstruck und Rolfes handelt es sich eine Expertise aus dem Jahr 2019. Der Beitrag liefert einen mehrdimensionalen Blick auf das Handlungskonzept aus unterschiedlichen internen wie externen Perspektiven. Dabei wird vor allem auf die gesellschaftlichen und politischen Veränderungen fokussiert, die sich seit 2014 im Handlungsfeld „Demokratiestärkung und Auseinandersetzung mit dem Rechtsextremismus“ ergeben haben. Grundlage der Expertise waren leitfadenzentrierte Interviews.
Gut ausgebildete Schreibkompetenzen gelten als zentrale Voraussetzung für den schulischen Erfolg. Wenngleich die schriftliche Textproduktion unbestritten fester Bestandteil des Deutschunterrichts ist, wird vielfach beklagt, dass die vorhandenen Schreibkompetenzen unzureichend sind. Blickt man auf die fachdidaktische Forschung so zeigt sich, dass Schreibkompetenz ein schwer zu definierendes Phänomen bleibt und innerhalb der schreibdidaktischen Forschung strittig ist, wie Schreibkompetenz – insbesondere nach Erwerb der grundlegenden Schreibfertigkeiten – am Besten entwickelt werden kann. Zudem gilt für das Fach Deutsch, insbesondere den Aufgabenbereich „Texte verfassen“, das eine empirische Fundierung der Fachdidaktik bisher kaum realisiert wurde.
Vor diesem Hintergrund wurde in der vorgelegten Arbeit ein Programm zu Förderung der schriftlichen Erzählfähigkeit von Fünftklässlern entwickelt und anschließend in der regulären Unterrichtspraxis eingesetzt und begleitend evaluiert. Methodisch orientiert sich die Arbeit dabei im Hinblick auf die Konzeption, Umsetzung und Evaluation des Förderprogramms an den von Einsiedler postulierten „Standards der (didaktischen) Entwicklungsforschung“.
Bei der im ersten Schritt erfolgten Konzeption des Förderprogramms ging es darum eine spezifische, didaktische Konzeption, die Kombination sprachstruktur- und (lern)prozessbezogenener Elemente, sprachwissenschaftlich basiert und pädagogisch-didaktisch begründet zu entwickeln. Bei der hierzu notwendigen Integration verschiedener theoretischer Zugänge unterschiedlicher Fachdisziplinen galt es vorhandene Ansätze im Hinblick auf interne Anschlussmöglichkeiten auszuloten und auf diesem Wege einen sich gegenseitig ergänzenden, umfassenden Bezugsrahmen zu schaffen. Dabei gelang - unter Einbeziehung von Modellen und Befunden aus der Schreibentwicklungsforschung - die innerhalb der Schreibforschung vielfach geforderte, jedoch bisher fehlende Integration von strukturellen Ansätzen aus der linguistischen Schreibforschung mit den innerhalb der Kognitionspsychologie favorisierten prozessuellen Ansätzen.
Auf dieser Grundlage wurde ein aufgabenbasiertes Programm mit insgesamt acht verschiedenen Fördermodulen entwickelt, aufgabenbasiert deshalb, weil dies nicht nur einen lehrergesteuerten aber schülerzentrierten Unterricht ermöglicht, sondern auch einen adaptiven Unterricht, somit den spezifischen Anforderungen des Unterrichts in heterogenen Lerngruppen gerecht wird, was angesichts der zunehmenden (sprachlich-kulturellen) Heterogenität in regulären Schulklassen sinnvoll scheint.
In einem zweiten Schritt wurde innerhalb einer Pilotstudie die Umsetzbarkeit des Förderprogramms im schulischen Kontext erprobt. Unter Kontrolle seiner praktischen Umsetzbarkeit (Machbarkeitshypothese) wurde im Anschluss daran die Wirksamkeit des Förderprogramms im Hinblick auf eine Steigerung in den produktbezogenen Schreibmaßen (Wortschatzvarianz, Satzkomplexität, lexikalische Dichte, Kohäsionsgrade, Textlänge) und die Stabilität der Fördereffekte untersucht. Dies geschah mittels eines quasiexperimentellen Untersuchungsplans, genauer eines Zweigruppen-Pretest-Posttest-Follow-up-Plans mit Kontrollvariablen.
Grundlage hierfür war eine möglichst heterogene Stichprobe von knapp 200 Schüler/innen. Denn angesichts der angesprochenen zunehmenden Heterogenität in regulären Schulklassen galt es neben der Wirksamkeit und Nachhaltigkeit des Förderprogramms auch dessen Eignung für den Unterricht in heterogenen Lerngruppen zu prüfen. Die Ergebnisse dieser Prüfung sprechen dafür, dass es gelungen ist ein entsprechendes Förderprogramm zu entwickeln.
Trotz dem Auftreten von forschungsmethodischen Schwierigkeiten, die innerhalb der vorgelegten Arbeit ausführlich im Hinblick auf Ursachen und Wirkungen diskutiert werden, können, unter Berücksichtigung des explorativen Charakters der Studie, die Ergebnisse insbesondere zur Wortschatzvarianz und zur Satzkomplexität ebenfalls als Indizien für die Effektivität des Förderprogramms gelten.
This article distinguishes methodological problems in quality evaluation and measurement in two policy fields, namely higher education and public broadcasting. Both are characterized by similar external and internal basic conditions and are thus suitable for comparative research. The difficulties of quality measurement and evaluation are discussed with respect to three main features: (1) definition of quality, (2) operationalization of quality and (3) interpretation of quality. Furthermore the identified difficulties in both areas are not always the same, because they depend on different research criteria. Thus the debates of quality measurement and evaluation in higher education and public broadcasting can learn from each other and increase the understanding of quality measurement in general. In addition the comparative design provides opportunities for the development of methods and perspectives.
Evaluation komplexer Systeme
(2015)
Seit von Foerster können wir soziale Systeme als Black Boxes betrachten, zu deren Funktionsweise keine klaren Wenn-Dann-Aussagen möglich erscheinen und deren Operationsweise sich für den Beobachter immer nur sequenziell und sprunghaft – und folglich nie ganzheitlich – darstellt. Jedes Bemühen, ein soziales System tiefgründig verstehen und abbilden zu wollen, kann somit schnell ein Gefühl von Orientierungslosigkeit und Überforderung auslösen – ähnlich, wie während einer Achterbahnfahrt. Für die Evaluationsdebatte resultiert aus dieser Sichtweise die Kernfrage, wie nun also im Rahmen von Evaluationen mit sozialer Komplexität umgegangen werden kann.
An diese Frage anknüpfend stellt der vorliegende Band das Feld der systemischen Therapie- und Beratungsansätze als inspirierenden Fundus vor, aus welchem sich Konzepte, Methoden und Techniken zur Gestaltung von Evaluationsvorhaben ableiten lassen. Aber welche Möglichkeiten und Grenzen offenbaren sich dabei? Lässt sich sozialer Komplexität mit Hilfe dieser Ansätze besser begegnen? Welche Rahmenbedingungen sollten dabei erfüllt sein und wie lassen sich systemische von nicht-systemischen Ansätzen unterscheiden?
In den letzten 20 Jahren sind Evaluationen Schritt für Schritt zu einem festen und gleichzeitig kontrovers diskutierten Bestandteil politischer Förderung geworden. Auf der Basis langjähriger Beobachtungen der Evaluationspraxis des Förderprogramms „Soziale Stadt“ zeigt dieses Buch zunächst, dass Evaluationstätigkeiten in Ministerien, Kommunalverwaltungen und Planungsbüros mit ganz unterschiedlichen Erwartungen, Herausforderungen, Widersprüchen und Irritationen verknüpft werden. Evaluationen werden dabei sowohl als Hoffnungsträger, als auch als Schreckgespenst gesehen. Der Autor nimmt diese Beobachtungen zum Anlass, den Umgang mit Evaluationen in politischen Organisationen kritisch zu hinterfragen und systematisch zu erklären. Reduziert auf die Frage „Wozu Evaluation?“ wird auf der Basis eines systemtheoretischen Zugangs erklärt, welche unterschiedlichen Funktionen Evaluationen in Organisationen erfüllen können. Vertiefend wird dabei auf organisationales Lernen, auf politische Steuerungslogik und auf die Notwendigkeit von Symbolisierungen eingegangen.
Gegenstand der Studie ist die Evaluation eines kommunalen Sportprojekts. Die Forschungsarbeit entstand aus der wachsenden Erkenntnis heraus, dass es nicht mehr nur um die Entwicklung und Durchführung kommunaler oder sozialer Projekte geht, sondern zunehmend darauf ankommt, die Projektarbeit zu evaluieren, um ihren Einfluss auf die kommunale, soziale und personale Entwicklung zu prüfen und in der Folge die Implementierung zu optimieren. Die unterschiedlichen Schritte in der Definition des theoretischen Rahmens, der Datenanalyse sowie der Erarbeitung der evaluativen Empfehlungen wurden unternommen mit dem Anspruch auf Modellcharakter, um für zukünftige Evaluationsvorhaben entsprechende Standards zu setzen. Die Grundidee des kommunalen Sportprojekts „Straßenfußball für Toleranz“ ist innovativ: Mädchen und Jungen erobern durch gemeinsames Fußballspielen den öffentlichen Raum. Sie spielen ohne Schiedsrichter und nach speziellen Regeln. Das Projekt richtet sich ausdrücklich an sozial benachteiligte Jugendliche und bezieht gleichermaßen Jungen wie Mädchen ein.