Robuste Klassifikation von Argumentationskomponenten in Bürger*innenbeteiligungsverfahren zur Verkehrsplanung

In dieser Veröffentlichung des Workshop on Argument Mining befassen sich Julia Romberg und Stefan Conrad mit der Robustheit von Klassifikationsalgorithmen für Argument Mining, um zuverlässige Modelle zu erstellen, die über verschiedene Datensätze hinweg generalisieren.

Zusammenfassung

Öffentlichkeitsbeteiligungsverfahren ermöglichen es den Bürger*innen, sich an kommunalen Entscheidungsprozessen zu beteiligen, indem sie ihre Meinung zu bestimmten Themen äußern. Kommunen haben jedoch oft nur begrenzte Ressourcen, um eine möglicherweise große Menge an Textbeiträgen zu analysieren, welche zeitnah und detailliert ausgewertet werden müssen. Eine automatisierte Unterstützung bei der Auswertung kann daher hilfreich sein, z.B. um Argumente zu analysieren.

In diesem Paper befassen wir uns (A) mit der Identifizierung von argumentativen Diskurseinheiten und (B) mit deren Klassifizierung als Prämisse (premise) oder Schlussfolgerung (major position) in deutschen Bürger*innenbeteiligungsprozessen. Das Ziel unserer Arbeit ist es, Argument Mining für den Einsatz in Kommunen nutzbar zu machen. Wir vergleichen verschiedene Argument-Mining-Ansätze und entwickeln ein generisches Modell, das erfolgreich Argumentstrukturen in verschiedenen Datensätzen der verkehrsbezogenen Stadtplanung erkennen kann. Wir führen einen neuen Datenkorpus ein, der fünf Beteiligungsprozesse umfasst. In unserer Evaluierung erreichen wir hohe Makro-F1-Werte (0,76 – 0,80 für die Identifizierung argumentativer Einheiten; 0,86 – 0,93 für deren Klassifizierung). Darüber hinaus verbessern wir frühere Ergebnisse für die Klassifizierung von argumentativen Einheiten in einem ähnlichen deutschen Online-Partizipationsdatensatz.

Ergebnisse

  • Wir haben eine umfassende Evaluierung von Methoden des maschinellen Lernens in fünf Bürger*innenbeteiligungsverfahren in deutschen Kommunen durchgeführt, die sich in Format (Online-Beteiligungsplattformen und Fragebögen) und Prozessgegenstand unterscheiden.
  • BERT übertrifft bei beiden Aufgaben bisher veröffentlichte Argument-Mining-Ansätze für öffentliche Beteiligungsprozesse auf deutschsprachigen Daten und erreicht Makro-F1 Werte von 0,76 – 0,80 für die Identifizierung argumentativer Einheiten und Makro-F1 Werte von 0,86 – 0,93 für deren Klassifikation.
  • In einer datensatzübergreifenden Evaluierung können BERT-Modelle Argumentstrukturen in Datensätzen, die nicht Teil des Trainings waren, mit vergleichbarer Güte erkennen.
  • Eine solche Robustheit des Modells über verschiedene Beteiligungsprozesse hinweg ist ein wichtiger Schritt auf dem Weg zur praktischen Anwendung des Argument Mining in Kommunen.

Publikation

Romberg, Julia; Conrad, Stefan (2021). Citizen Involvement in Urban Planning – How Can Municipalities Be Supported in Evaluating Public Participation Processes for Mobility Transitions?. In: Proceedings of the 8th Workshop on Argument Mining: 89-99, Punta Cana, Dominican Republic. Association for Computational Linguistics. https://aclanthology.org/2021.argmining-1.9.

Neuer Arbeitskreis Mobilität, Erreichbarkeit und soziale Teilhabe in der ARL – Akademie für Raumentwicklung in der Leibniz-Gemeinschaft

Wir freuen uns, dass Laura Mark bei dem genannten Arbeitskreis dabei ist und unsere Forschung mit Kolleg*innen diskutieren kann. In dem Arbeitskreis treffen sich Praktiker*innen und Wissenschaftler*innen regelmäßig, um zu verschiedenen Themen rund um Mobilität und soziale Teilhabe zu arbeiten. Der Arbeitskreis ist Mitte 2021 gestartet und die inhaltliche Arbeit nimmt nun immer mehr Gestalt an: Schnittstellen zu unserer Forschung sind dabei unter anderem die Frage nach der prozeduralen Gerechtigkeit von Planungsverfahren für die Verkehrswende – wer beteiligt sich und wessen Stimmen werden gehört? Wie sollen Planungs- und Beteiligungprozesse für eine nachhaltige Verkehrswende in Zukunft gestaltet sein, um Alle mitzunehmen? An dieser Stelle werden wir von der weiteren Arbeit und Veröffentlichungen und Veranstaltungen berichten, die im Rahmen dieses Abeitskreises entstehen!

Interdisziplinäres Seminar zur Erforschung von sozialem Status und Sprache

In diesem Semester bieten wir online das Masterseminar „Die Erforschung von sozialem Status und Sprache mit Hilfe von automatisierten Auswertungsmöglichkeiten“ an der Heinrich-Heine-Universität Düsseldorf an.

Im Seminar wollen wir gemeinsam die Zusammenhänge von sozialem Status und Sprache am praktischen Beispiel von diskursiven Online-Beteiligungsverfahren untersuchen. Dabei soll die theoriebasierte Entwicklung einer soziologischen Fragestellung Hand-in-Hand mit der empirischen Untersuchung anhand von automatisierter Sprachverarbeitung (Natural Language Processing bzw. Text Mining) gehen. Dazu vermittelt das Seminar sowohl theoretische Hintergründe zur Beziehung von sprachlichem Kapital und sozialer Klasse sowie anderen demographischen Kategorien, als auch Fähigkeiten zur Untersuchung der Fragestellung durch automatisierte Inhaltsanalyse mit Hilfe von Verfahren des Natural Language Processing. Dazu werden sowohl die theoretischen Grundlagen dieser Techniken vermittelt, als auch deren Anwendung im Rahmen bestehender Softwarelösungen erprobt.

Zu Beginn des Seminars werden wir uns neben einer Einführung in die Soziolinguistik mit Theorien zum symbolischen Wert von sprachlichem Kapital und Macht von Bourdieu und Theorien zum machtfreien Diskurs in Anlehnung an Jürgen Habermas auseinandersetzen und diese auf das Thema politischer Beteiligung anwenden. Daran anschließend werden wir uns mit quantitativen Ansätzen zur Messbarkeit der verschiedenen Sprachindikatoren aus der Theorie auseinandersetzen, wie beispielsweise dem Informationsgehalt eines Beitrags oder dem verwendeten Vokabular. Diese sollen anhand existierender Softwarepakete in der Statistikumgebung R angewendet werden und auf ihre Nützlichkeit zur Beantwortung der Fragestellung von Sprache und Macht kritisch reflektiert werden.

Gegenstand der Untersuchung ist die Kommunikation im Rahmen von politischen Beteiligungsverfahren, konkret die von Bürger*innen verfassten Beiträge. Dazu nutzen wir Daten aus einer Befragung im Zusammenhang mit einem Beteiligungsverfahren in drei Städten in NRW, mit dem Bürger*innen Vorschläge zur Verbesserung des Radverkehrs in ihrer Stadt gemacht haben.

Kurs Mobilität und Nachhaltigkeit: Soziale Aspekte der Verkehrswende

In diesem Semester bieten wir online ein Masterseminar zu Mobilität und Nachhaltigkeit an der Heinrich-Heine-Universität Düsseldorf an.

Im Rahmen der Veranstaltung beschäftigen wir uns vorwiegend mit Mobilitätsforschung aus sozialwissenschaftlicher Perspektive. Unser besonderes Augenmerk gilt der Frage, was nachhaltige Mobilität ausmacht und welche sozialen Mechanismen im Zusammenhang mit der Verkehrswende wirksam werden. Dazu wird im ersten Teil der Veranstaltung ein grundlegendes Verständnis vermittelt über Struktur, Ursachen und Wirkungen des derzeitigen Mobilitätsverhaltens mit Schwerpunkt auf urbanen Kontexten in Deutschland. Im zweiten Teil der Veranstaltung wenden wir uns der Frage zu, wie Mobilität nachhaltig werden kann und betrachten, welche Potentiale konkrete Maßnahmen (z.B. Bepreisung, Sharing & Pooling, Bürgertickets) für die Verkehrswende haben.

Der Kurs ist wie folgt aufgebaut:

3.11.Einführung
10.11.Mobilität und Verkehr: Kennzahlen des Nutzungsverhaltens
17.11.Auswirkungen von Verkehr
24.11.Theorien zu Einflüssen auf Mobilitätsverhalten
1.12.Mobilität und Sozialstruktur
8.12.Stadtplanung und Mobilität
15.12.Auto-Kultur
22.12.Nachhaltigkeit & Mobilität
29.12. + 5.01.
12.01.Akzeptanz der Verkehrswende
19.01.nachhaltige Mobilität: Urban Design
26.01.nachhaltige Mobilität: City-Maut
02.02.nachhaltige Mobilität: Sharing & Pooling (eMobilität)
09.02.nachhaltige Mobilität: ländliche Mobilität

Auswertung des ersten Praxisworkshops der Nachwuchsforschungsgruppe CIMT

Als transdisziplinäres Forschungsprojekt möchten wir in regelmäßigen Abständen Vertreter*innen aus der Praxis der kommunalen Bürgerbeteiligung zu Workshops einladen, um mit Ihnen konkrete Fragestellungen im Zusammenhang mit unserer Forschung zu diskutieren. Im Mittelpunkt unseres ersten Praxisworkshops im Sommer 2020 stand die Frage, wie die Auswertung von Beiträgen technisch unterstützt werden kann und welche Anforderungen Praktiker*innen an eine Softwarelösung zur (teil-)automatisierten Unterstützung der Auswertung von Bürger*innenbeteiligung haben.

Bei kommunalen Beteiligungsverfahren geben Bürger*innen Vorschläge und Meinungen zu vorgegebenen Fragen ab. Damit diese in die weitere Planung einfließen können, müssen die Beiträge von den zuständigen Verwaltungen oder entsprechend beauftragten Dienstleister*innen ausgewertet werden. Gerade bei Partizipationsverfahren mit hoher Beteiligung kann die Auswertung ein hohes Maß an Ressourcen binden.

Im Ergebnis wird deutlich, dass es einen tatsächlichen Bedarf nach IT-Unterstützung bei der Auswertung gibt, da diese bislang in der Regel noch vorwiegend händisch erfolgt und entsprechend zeitaufwendig ist. Zu diesen Anforderungen gehört vor allem die Möglichkeit, Beiträge thematisch nach inhaltlichen Aspekten zu gruppieren. Weiterhin besteht Bedarf zur Unterstützung bei der Erkennung von Duplikaten und der Identifikation und Bewertung von konkreten Maßnahmen aus den Beiträgen. Dabei lauten zwei wesentliche Anforderungen, dass alle Beiträge gleichberechtigt berücksichtigt werden und dass automatisiert getroffene Entscheidungen transparent und nachvollziehbar sind.

Zusätzlich wurde durch den aktuellen Anlass im Rahmen des Praxisworkshops eine Befragung nach dem Einfluss der Covid-19-Pandemie auf die Arbeit mit Bürger*innenbeteiligung durchgeführt. Zusammenfassend zeigt sich eine hohe Verunsicherung, wie Bürger*innenbeteiligung während der Pandemie gut umgesetzt werden kann, sowie eine hohe Diskrepanz zwischen den verschiedenen Beteiligungsformaten. Während die Online-Beteiligung als kontaktloses Medium von der Lage profitieren kann, ist die Vor-Ort-Beteiligung stark betroffen.

Der ausführliche Bericht ist als Working Paper verfügbar.

Auftaktkonferenz der SÖF-Nachwuchsgruppen in Bonn

Am 9. & 10. März 2020 fand in Bonn die kombinierte Auftakt- und Statuskonferenz aller Nachwuchsgruppen statt, die im Rahmen des BMBF Programms Forschung für Nachhaltige Entwicklung (FONA) in der Sozial-ökologischen Forschung gefördert werden. Insgesamt werden aktuell fast 20 Nachwuchsgruppen gefördert, die sich im Rahmen der zweitägigen Konferenz vorstellten.

Als Teil der jüngsten Förderrunde aus dem Jahr 2019 haben wir uns den anderen Gruppen mit einem Kurzvortrag und einem Poster vorgestellt.

Eine Übersicht über alle aktuell geförderten Nachwuchsgruppen findet sich auf der Seite des BMBF.

Urban Change Maker Group – Workshop in Berlin

Der Austausch mit anderen Wissenschaftler*innen im Bereich nachhaltige Mobilität ist sehr wichtig für uns – er hilft uns dabei, Partizipation aus anderen Perspektiven zu betrachten und inspiriert uns, und oft tun sich Möglichkeiten zur Zusammenarbeit auf. Deswegen sind wir Teil der Urban Change Maker Group, eine interdisziplinären Gruppe aus PhD und Post-Doc Wissenschafter*innen aus verschiedenen Teilen der Welt, die zu Themen nachhaltiger Stadtentwicklung forschen. Dabei soll die Forschung zu einer nachhaltigen Transformation in der Praxis beitragen, hauptsächlich mit Fokus auf Governance, Akteurskonstellationen und soziale Gerechtigkeit.

Die Forschungsgruppe ist angegliedert an das Wuppertal Institut und die Technische Universität Berlin, sowie verschiedene andere Forschungseinrichtungen und Universitäten.

Am 6. März trafen wir uns zu einem kreativen Workshop um mögliche Synergien und gemeinsame Forschungsinteressen herauszuarbeiten. Zunächst stellten alle ihre individuellen Forschungsthemen und -interessen vor, woraus sich schon eine Diskussion um mögliche Zusammenarbeiten ergab. Darauf aufbauend wurden erste gemeinsame Veröffentlichungen geplant und Masterarbeitsthemen für Studierende der beteiligten Universitäten gesammelt.

Für unsere Forschungsgruppe könnte es beispielsweise interessant sein, unsere Fallstudien aus Deutschland mit ähnlichen Fällen von Bürger*innenbeteiligung in einer der Partnerstädte zu vergleichen und Ähnlichkeiten und Unterschiede zu untersuchen. Der Austausch soll über die folgenden Jahre fortgeführt werden. Dazu werden regelmäßige Workshops und eine jährliche Summer School für die ganze Gruppe stattfinden; zusätzlich wird es intensiveren Austausch in kleinen Gruppen zu konkreteren gemeinsamen Projekten geben. Der Austausch soll uns dabei helfen, unser Forschungsthema in einem weiteren thematischen und geographischen Kontext zu stellen.

Erstes Beiratstreffen der Nachwuchsforschungsgruppe CIMT in Berlin

Am 28. Februar 2020 veranstaltete die Nachwuchsforschungsgruppe das erste Treffen des Beirats. Das Zusammentreffen der Mitglieder aus Forschung und Praxis fand im Wissenschaftszentrum Berlin für Sozialforschung statt.

Beiratstreffen am WZB Berlin
Beiratstreffen am 28. Februar

Einen zentralen Punkt der Veranstaltung bildete die Vorstellung und das Kennenlernen der Beiratsmitglieder und der Mitglieder der Nachwuchsforschungsgruppe. Jun.-Prof. Tobias Escher stellte als Gruppenleiter das interdisziplinäre Forschungsprojekt im Gesamten vor. Laura Mark (Stadtplanung), Katharina Huseljić (Soziologie) und Julia Romberg (Informatik) erörterten anschließend detaillierter die Forschungsvorhaben der einzelnen Disziplinen. In den nachfolgenden Diskussionsrunden ergab sich ein konstruktiver Austausch zu den Anforderungen der Projektteile und des Gesamtprojekts. Zum Abschluss wurde in einer Feedback-Runde gemeinschaftlich beschlossen, den Austausch halbjährlich bis jährlich fortzuführen.

CIMT bedankt sich bei allen Beteiligten für einen gelungenen Tag!

Konferenz Zukunftsstadt 2019

Am 2. und 3. Dezember 2019 fand in Münster die Konferenz Zukunftsstadt 2019 des Bundesministerium für Bildung und Forschung statt. Die Gruppe CIMT stellte sich dort – vertreten durch Laura Mark und Katharina Huseljić – mit einem Poster vor.

Dabei lag das Ziel unserer Gruppe vor allem in der Vernetzung mit Wissenschaft und Praxis, die der zukünftigen Kooperation bei der Evaluation von Partizipationsverfahren dienen sollten. Es fand zudem ein starker Austausch mit ehemaligen und und aktuell geförderten Projekten aus der sozial-ökologischen Forschung statt. Dabei stand u.a. das inter- und transdisziplinäre Arbeiten in Nachwuchsforschungsgruppen im Fokus.

Und auch die inhaltliche Orientierung der Mitglieder der Nachwuchsforschungsgruppe kam dabei nicht zu kurz. So gab es im Rahmen der Konferenz die Möglichkeit diverse Workshops zu besuchen. Die Mitglieder der Nachwuchsforschungsgruppe besuchten in diesem Zuge Veranstaltung zur Arbeit mit Daten auf lokaler Ebene und zur Möglichkeit eines Klimaschutzes „Von Unten“.