Refine
Has Fulltext
- yes (18) (remove)
Year of publication
Document Type
- Article (7)
- Monograph/Edited Volume (5)
- Doctoral Thesis (5)
- Report (1)
Language
- German (18) (remove)
Keywords
- Evaluation (18) (remove)
PSI-Potsdam
(2023)
An der Universität Potsdam wird seit 2015 im Rahmen der „Qualitätsoffensive Lehrerbildung“ das Projekt „Professionalisierung – Schulpraktische Studien – Inklusion“ (PSI-Potsdam) durchgeführt und am Zentrum für Lehrerbildung und Bildungsforschung (ZeLB) koordiniert. Zur ersten Projektförderphase (2015-2018) erschien der Band „PSI-Potsdam – Ergebnisbericht zu den Aktivitäten im Rahmen der Qualitätsoffensive Lehrerbildung (2015-2018)“ zum Auftakt der Reihe „Potsdamer Beiträge zur Lehrerbildung und Bildungsforschung“.
Der vorliegende Band aus der gleichen Reihe gibt in den Kapiteln „Erhebungen“, „Lehrkonzepte“ und „Vernetzungen“ einen Überblick über alle Teilprojekte der zweiten Projektförderphase (2019-2023). Wissenschaftler:innen aus verschiedenen Fachdidaktiken, Fachwissenschaften sowie aus den Bildungswissenschaften und der Inklusionspädagogik haben im Rahmen des Projektes kooperiert. Sowohl praxisnahe Forschung als auch die Entwicklung neuer Lehrkonzepte sowie Strategien zur Vernetzung innerhalb der Lehrkräftebildung stehen im Fokus dieses Bandes. Die Praxisphasen, die im Rahmen des „Potsdamer Modells der Lehrerbildung“ eine zentrale Rolle spielen, wurden in einer großen Studie über alle Praxisphasen untersucht.
Der Band gibt interessante Einblicke in die Ergebnisse der Teilprojekte und Anregungen sowohl für die eigene Forschung als auch für Entwicklungsarbeit wie zum Beispiel die Entwicklung neuer Lehrkonzepte. Herausgegeben wird dieser Band von PD Dr. Jolanda Hermanns (Gesamtkoordinatorin PSI-Potsdam und Chemiedidaktikerin).
Der vorliegende Abschlussbericht umfasst die Ergebnisse der wissenschaftlichen Evaluation der Werkstatt „Schule leiten“. Bei dieser Werkstatt handelt es sich um ein 18-monatiges Fortbildungsangebot für Schulleitungen, das durch die Deutsche Schulakademie konzipiert und in Kooperation mit dem saarländischen Kultusministerium für Bildung und Kultur sowie dem saarländischen Landesinstitut für Pädagogik und Medien durchgeführt wurde. Im Zeitraum 2016–2020 absolvierten jeweils zwei Personen des Schulleitungsteams allgemeinbildender Schulen erstmalig in insgesamt drei Durchgängen verschiedene Angebote der Werkstatt. Weiterhin erhielten die Teilnehmenden die Aufgaben, im Zuge ihres Fortbildungsbesuches ein individuelles Schulentwicklungsprojekt zu planen, zu entwickeln und unter Anleitung der Werkstatt in der Schule zu implementieren. Zur Überprüfung der wahrgenommenen Qualität sowie der Wirksamkeit des Fortbildungsangebotes wurde die Universität Potsdam, Arbeitsbereich Prof. Dr. Dirk Richter, beauftragt. Der vorliegende Bericht präsentiert die Evaluationsergebnisse der Durchgänge 2 und 3.
Im Zentrum der Evaluation stehen die folgenden Forschungsfragen: (1) Wie beurteilen die Teilnehmenden die Qualität der Werkstatt „Schule leiten“? (2) Inwiefern hat die Werkstatt „Schule leiten“ dazu beigetragen, die Leitungskompetenzen (u.a. Einstellungen und Führungshandeln) der Teilnehmenden zu stärken? sowie (3) Wie haben sich schulische Strukturen und Prozesse zur Förderung von Schulentwicklung in den teilnehmenden Schulen durch die Werkstatt „Schule leiten“ verändert? Zur Beantwortung der Fragestellungen wurden eine Reihe schriftlicher Befragungen mit den teilnehmenden Schulleitungen sowie den Lehrkräften der teilnehmenden Schulen durchgeführt. Diese Befragungen erfolgten sowohl begleitend zum Fortbildungsprogramm (nach Absolvieren der einzelnen Angebote) sowie in einem Prä-Post-Follow-Up-Design. Weiterhin wurden im Rahmen einer qualitativen Begleitstudie verschiedene Personen (Schulleitung, Mitglieder des Schulleitungsteams, Lehrkräfte) von insgesamt fünf Schulen über drei Zeitpunkte dazu befragt, wie die Planung, Entwicklung und Implementation der Schulentwicklungsprojekte erfolgten.
Die Befunde der Evaluation deuten insgesamt darauf hin, dass die Qualität der Werkstatt „Schule leiten“ als Gesamtprogramm sowie die einzelnen Angebote der Werkstatt sehr positiv bewertet werden. Dabei nehmen die Teilnehmenden von Durchgang 2 die Werkstatt in einer Reihe von Merkmalen positiver wahr als die Teilnehmenden von Durchgang 3. Weiterhin deuten die Ergebnisse darauf hin, dass sich bestimmte Facetten des Führungshandelns der Teilnehmenden im zeitlichen Verlauf positiv verändert haben. Hierfür existieren Hinweise sowohl aus Perspektive der Teilnehmenden selbst als auch aus Perspektive der Lehrkräfte ihrer Schulen. Motivationale Merkmale der Teilnehmenden sowie Aspekte des Führungshandelns, die sich auf Tätigkeiten zur Unterstützung der innerschulischen Kooperation beziehen, bleiben aus Perspektive der Teilnehmenden hingegen weitestgehend konstant. Hinsichtlich der Veränderungen schulischer Strukturen zur Schulentwicklung deuten die Ergebnisse auf eine positive Entwicklung der wahrgenommenen Offenheit gegenüber Kooperation im Kollegium aus Perspektive der Lehrkräfte hin. Die Befunde der qualitativen Begleitstudie liefern weitere Informationen über die wahrgenommene Qualität der Werkstatt sowie über Veränderungen aufseiten der Teilnehmenden und der schulischen Strukturen.
Dieser Band der Reihe „Potsdamer Geographische Praxis“ enthält drei Beiträge, die sich mit dem Handlungskonzept „Tolerantes Brandenburg“ der Brandenburgischen Landesregierung befassen. In allen Beiträgen wird auf der Grundlage empirischer Erhebungen analysiert, wie dieses Konzept zum Umgang mit Rechtsextremismus und Rechtspopulismus sowie zur Demokratieförderung in den letzten Jahren umgesetzt wurde. Die ersten beiden Beiträge haben die sogenannten Zukunftsdialoge „Tolerantes Brandenburg“ zum Gegenstand, die in den Jahren 2015 bis 2017 in allen kreisfreien Städten und Landkreisen Brandenburgs durchgeführt wurden. Der erste Beitrag von Schubarth, Kohlstruck und Rolfes beinhaltet die Ergebnisse der wissenschaftlichen Beobachtung der Zukunftsdialoge; die Ergebnisse beruhen überwiegend auf teilnehmenden Beobachtungen der Zukunftsdialoge und qualitativen Interviews mit Teilnehmenden. Der zweite Beitrag von Bode und Rolfes basiert auf einer quantitativen Methodik und enthält die Auswertungen einer standardisierten Befragung der Teilnehmer/innen der Zukunftsdialoge. Die Ergebnisse beider Untersuchungen liefern wichtige Erkenntnisse und gute Ansatzpunkte, wie einerseits die Institutionen des Beratungsnetzwerks „Tolerantes Brandenburg“ und das Handlungskonzept auf lokaler Ebene eine größere Bekanntheit erlangen könnten und andererseits, welche Schritte hilfreich wären, um eine (noch) stärkere Verankerung des Handlungskonzeptes in den Regionen zu erreichen. Beim dritten Beitrag von Schubarth, Kohlstruck und Rolfes handelt es sich eine Expertise aus dem Jahr 2019. Der Beitrag liefert einen mehrdimensionalen Blick auf das Handlungskonzept aus unterschiedlichen internen wie externen Perspektiven. Dabei wird vor allem auf die gesellschaftlichen und politischen Veränderungen fokussiert, die sich seit 2014 im Handlungsfeld „Demokratiestärkung und Auseinandersetzung mit dem Rechtsextremismus“ ergeben haben. Grundlage der Expertise waren leitfadenzentrierte Interviews.
Gut ausgebildete Schreibkompetenzen gelten als zentrale Voraussetzung für den schulischen Erfolg. Wenngleich die schriftliche Textproduktion unbestritten fester Bestandteil des Deutschunterrichts ist, wird vielfach beklagt, dass die vorhandenen Schreibkompetenzen unzureichend sind. Blickt man auf die fachdidaktische Forschung so zeigt sich, dass Schreibkompetenz ein schwer zu definierendes Phänomen bleibt und innerhalb der schreibdidaktischen Forschung strittig ist, wie Schreibkompetenz – insbesondere nach Erwerb der grundlegenden Schreibfertigkeiten – am Besten entwickelt werden kann. Zudem gilt für das Fach Deutsch, insbesondere den Aufgabenbereich „Texte verfassen“, das eine empirische Fundierung der Fachdidaktik bisher kaum realisiert wurde.
Vor diesem Hintergrund wurde in der vorgelegten Arbeit ein Programm zu Förderung der schriftlichen Erzählfähigkeit von Fünftklässlern entwickelt und anschließend in der regulären Unterrichtspraxis eingesetzt und begleitend evaluiert. Methodisch orientiert sich die Arbeit dabei im Hinblick auf die Konzeption, Umsetzung und Evaluation des Förderprogramms an den von Einsiedler postulierten „Standards der (didaktischen) Entwicklungsforschung“.
Bei der im ersten Schritt erfolgten Konzeption des Förderprogramms ging es darum eine spezifische, didaktische Konzeption, die Kombination sprachstruktur- und (lern)prozessbezogenener Elemente, sprachwissenschaftlich basiert und pädagogisch-didaktisch begründet zu entwickeln. Bei der hierzu notwendigen Integration verschiedener theoretischer Zugänge unterschiedlicher Fachdisziplinen galt es vorhandene Ansätze im Hinblick auf interne Anschlussmöglichkeiten auszuloten und auf diesem Wege einen sich gegenseitig ergänzenden, umfassenden Bezugsrahmen zu schaffen. Dabei gelang - unter Einbeziehung von Modellen und Befunden aus der Schreibentwicklungsforschung - die innerhalb der Schreibforschung vielfach geforderte, jedoch bisher fehlende Integration von strukturellen Ansätzen aus der linguistischen Schreibforschung mit den innerhalb der Kognitionspsychologie favorisierten prozessuellen Ansätzen.
Auf dieser Grundlage wurde ein aufgabenbasiertes Programm mit insgesamt acht verschiedenen Fördermodulen entwickelt, aufgabenbasiert deshalb, weil dies nicht nur einen lehrergesteuerten aber schülerzentrierten Unterricht ermöglicht, sondern auch einen adaptiven Unterricht, somit den spezifischen Anforderungen des Unterrichts in heterogenen Lerngruppen gerecht wird, was angesichts der zunehmenden (sprachlich-kulturellen) Heterogenität in regulären Schulklassen sinnvoll scheint.
In einem zweiten Schritt wurde innerhalb einer Pilotstudie die Umsetzbarkeit des Förderprogramms im schulischen Kontext erprobt. Unter Kontrolle seiner praktischen Umsetzbarkeit (Machbarkeitshypothese) wurde im Anschluss daran die Wirksamkeit des Förderprogramms im Hinblick auf eine Steigerung in den produktbezogenen Schreibmaßen (Wortschatzvarianz, Satzkomplexität, lexikalische Dichte, Kohäsionsgrade, Textlänge) und die Stabilität der Fördereffekte untersucht. Dies geschah mittels eines quasiexperimentellen Untersuchungsplans, genauer eines Zweigruppen-Pretest-Posttest-Follow-up-Plans mit Kontrollvariablen.
Grundlage hierfür war eine möglichst heterogene Stichprobe von knapp 200 Schüler/innen. Denn angesichts der angesprochenen zunehmenden Heterogenität in regulären Schulklassen galt es neben der Wirksamkeit und Nachhaltigkeit des Förderprogramms auch dessen Eignung für den Unterricht in heterogenen Lerngruppen zu prüfen. Die Ergebnisse dieser Prüfung sprechen dafür, dass es gelungen ist ein entsprechendes Förderprogramm zu entwickeln.
Trotz dem Auftreten von forschungsmethodischen Schwierigkeiten, die innerhalb der vorgelegten Arbeit ausführlich im Hinblick auf Ursachen und Wirkungen diskutiert werden, können, unter Berücksichtigung des explorativen Charakters der Studie, die Ergebnisse insbesondere zur Wortschatzvarianz und zur Satzkomplexität ebenfalls als Indizien für die Effektivität des Förderprogramms gelten.
Evaluation komplexer Systeme
(2015)
Seit von Foerster können wir soziale Systeme als Black Boxes betrachten, zu deren Funktionsweise keine klaren Wenn-Dann-Aussagen möglich erscheinen und deren Operationsweise sich für den Beobachter immer nur sequenziell und sprunghaft – und folglich nie ganzheitlich – darstellt. Jedes Bemühen, ein soziales System tiefgründig verstehen und abbilden zu wollen, kann somit schnell ein Gefühl von Orientierungslosigkeit und Überforderung auslösen – ähnlich, wie während einer Achterbahnfahrt. Für die Evaluationsdebatte resultiert aus dieser Sichtweise die Kernfrage, wie nun also im Rahmen von Evaluationen mit sozialer Komplexität umgegangen werden kann.
An diese Frage anknüpfend stellt der vorliegende Band das Feld der systemischen Therapie- und Beratungsansätze als inspirierenden Fundus vor, aus welchem sich Konzepte, Methoden und Techniken zur Gestaltung von Evaluationsvorhaben ableiten lassen. Aber welche Möglichkeiten und Grenzen offenbaren sich dabei? Lässt sich sozialer Komplexität mit Hilfe dieser Ansätze besser begegnen? Welche Rahmenbedingungen sollten dabei erfüllt sein und wie lassen sich systemische von nicht-systemischen Ansätzen unterscheiden?
In den letzten 20 Jahren sind Evaluationen Schritt für Schritt zu einem festen und gleichzeitig kontrovers diskutierten Bestandteil politischer Förderung geworden. Auf der Basis langjähriger Beobachtungen der Evaluationspraxis des Förderprogramms „Soziale Stadt“ zeigt dieses Buch zunächst, dass Evaluationstätigkeiten in Ministerien, Kommunalverwaltungen und Planungsbüros mit ganz unterschiedlichen Erwartungen, Herausforderungen, Widersprüchen und Irritationen verknüpft werden. Evaluationen werden dabei sowohl als Hoffnungsträger, als auch als Schreckgespenst gesehen. Der Autor nimmt diese Beobachtungen zum Anlass, den Umgang mit Evaluationen in politischen Organisationen kritisch zu hinterfragen und systematisch zu erklären. Reduziert auf die Frage „Wozu Evaluation?“ wird auf der Basis eines systemtheoretischen Zugangs erklärt, welche unterschiedlichen Funktionen Evaluationen in Organisationen erfüllen können. Vertiefend wird dabei auf organisationales Lernen, auf politische Steuerungslogik und auf die Notwendigkeit von Symbolisierungen eingegangen.
Gegenstand der Studie ist die Evaluation eines kommunalen Sportprojekts. Die Forschungsarbeit entstand aus der wachsenden Erkenntnis heraus, dass es nicht mehr nur um die Entwicklung und Durchführung kommunaler oder sozialer Projekte geht, sondern zunehmend darauf ankommt, die Projektarbeit zu evaluieren, um ihren Einfluss auf die kommunale, soziale und personale Entwicklung zu prüfen und in der Folge die Implementierung zu optimieren. Die unterschiedlichen Schritte in der Definition des theoretischen Rahmens, der Datenanalyse sowie der Erarbeitung der evaluativen Empfehlungen wurden unternommen mit dem Anspruch auf Modellcharakter, um für zukünftige Evaluationsvorhaben entsprechende Standards zu setzen. Die Grundidee des kommunalen Sportprojekts „Straßenfußball für Toleranz“ ist innovativ: Mädchen und Jungen erobern durch gemeinsames Fußballspielen den öffentlichen Raum. Sie spielen ohne Schiedsrichter und nach speziellen Regeln. Das Projekt richtet sich ausdrücklich an sozial benachteiligte Jugendliche und bezieht gleichermaßen Jungen wie Mädchen ein.
Die Bedeutung der Themen Evaluation und Qualität ist für die zweite Phase der Lehrerbildung seit einigen Jahren enorm gestiegen. Dies gilt sowohl für die Inhalte der Ausbildung der Lehramtskandidatinnen als auch für die pädagogische Arbeit in den Studienseminaren selbst. Der vorliegende Beitrag gibt daher einerseits einen kurzen Überblick über den Stand der Evaluations- und Qualitätsdebatte in der zweiten Phase der Lehrerbildung in Deutschland (Referendariat). Verdeutlicht werden sowohl zentrale Kritikpunkte der Debatte als auch bestehende Aktivitäten und Ansätze der Studienseminare zur Evaluation und Qualitätsentwicklung. Andererseits werden Perspektiven für die fachliche Weiterentwicklung der Evaluations- und Qualitätsdebatte in der zweiten Phase der Lehrerbildung entwickelt. Plädiert wird für Strategien zur Förderung von Evaluation und Qualitätsentwicklung, ein komplexes Qualitätsverständnis, das über eine Output-Orientierung hinausgeht sowie kasuistische Verfahren zur Verbesserung des pädagogischen Handelns der Lehramtskandidatinnen, aber auch der Seminarleiter und Seminarleiterinnen.
In der Praxis der Lehrevaluation werden subjektive Urteile und Qualitätseinschätzungen zu Lehrveranstaltungen oder Studienprogrammen erhoben, um die Sicht der „betroffenen“ Teilnehmer und Teilnehmerinnen zu beschreiben und diese Sicht zum Ausgangspunkt für die Entwicklung von etwaigen Verbesserungsstrategien zu machen. Dabei muss aber berücksichtigt werden, dass subjektive Urteile Quellen potenzieller Verzerrungen der erhobenen Daten enthalten, woraus sich mögliche Bedrohungen ihrer Validität ergeben. Diese beziehen sich auf sachfremde Einflüsse bspw. von Persönlichkeitsmerkmalen der beurteilenden Personen auf ihr Urteil. Ein weiterer zentraler Valididtätsaspekt von Qualitätsmessungen besteht in der Frage, ob die als relevant unterstellten Beurteilungsdimensionen (bspw. zur „allgemeinen Organisationsqualität“) den Qualitätseinschätzungen der beurteilenden Personen tatsächlich zu Grunde liegen. Lassen sich solche Qualitätsdimensionen empirisch bestätigen, so können die entsprechend validierten Evaluationsergebnisse zu einer rational basierten Beurteilung und Weiterentwicklung des Beurteilungsgegenstandes – hier: der zweiten Phase der Lehrerbildung – beitragen.
Studierende der Lehrämter wurden zu Studienbedingungen in der Lehrerbildung an je einem Ausbildungsort in den alten und neuen Bundesländern befragt. Dabei wurden Einschätzungen zu Studium und Beruf sowie zu Gründen und Motiven der Studienwahl und zu Belastungen beim Studieren erhoben. Die persönlichen Ressourcen und das Belastungserleben der Studierenden wurden mit dem diagnostischen Inventar AVEM [Arbeitsbezogene Verhaltens- und Erlebensmuster, vgl. SCHAARSCHMIDT U. FISCHER 2003] bestimmt. Die empirischen Auswertungen folgten einer differentialpsychologischen Vorgehensweise, um den Einfluss person- und strukturbezogener Bedingungen genauer analysieren zu können. Die Ergebnisse zeigen persönlichkeitsgebundene Unterschiede bei der Bewältigung der Anforderungen in Studium und Beruf, und das insbesondere in Abhängigkeit von Studienort und –abschnitt. Weiterhin ergibt sich eine Wechselwirkung person- und strukturbezogener Bedingungen auf Gründe und Motive sowie auf Einschätzungen zu Studium und Beruf. Implikationen für eine psychologisch angeleitete Gestaltung der Lehrerbildung werden diskutiert.