Diskursqualität und IBW-Modell/DQ-Kriterien
Forschung → IBW und Diskursqualität
Studium · Forschung · Fortbildung
Die Kriterien wissenschaftlich begründen
Das ausführlich überarbeitete zweite Kapitel erläutert Messung, Grenzen und aktuelle Anwendung.
2.1 Warum Diskursqualität mehr als Informationsqualität ist
Ein digitaler Diskurs besteht nicht allein aus einer Ansammlung einzeln prüfbarer Informationen. Beiträge beziehen sich aufeinander, werden interpretiert, bestritten, ergänzt oder zurückgezogen. Nutzerinnen und Nutzer handeln unter ungleichen Bedingungen; Plattformen bestimmen, welche Beiträge sichtbar werden und welche Folgen ein Einspruch haben kann. Diskursqualität (DQ) bezeichnet im Folgenden die Qualität der Bedingungen, Prozesse, Beiträge und Beteiligungsmöglichkeiten einer solchen Kommunikation. Die Definition ist bewusst mehrdimensional: Die wissenschaftliche Belastbarkeit einer Aussage, die Zugänglichkeit einer Oberfläche, die Fairness der Moderation und der tatsächliche Lern- oder Entscheidungsfortschritt sind miteinander verbunden, aber nicht austauschbar.
Der von Glanz entwickelte Zugang geht über Informationsqualitätsmodelle hinaus. Er knüpft an die Informationsqualitätsforschung – insbesondere an Dimensionen wie Zugänglichkeit, Glaubwürdigkeit, Fehlerfreiheit, Aktualität, Relevanz und Verständlichkeit bei Wang und Strong (1996) – an und ergänzt die Diskussion um Subjekte, Prozesse, soziale Machtverhältnisse und dauerhafte Revisionen. Die Dissertation ordnet insgesamt 60 Diskursqualitätskriterien in das IBW-Modell ein (Glanz 2016, Kap. 2.4.2, Tab. IBW-DQ-Kriterien). Diese Zahl ist nicht Ergebnis einer universellen Normsetzung, sondern Ausdruck einer historisch begründeten analytischen Konstruktion, die für weitere Anwendungsfelder überprüft werden soll.
Die Weiterentwicklung muss drei Ziele verbinden: Treue zur Quelle bei der Wiedergabe des Kriteriensystems, präzise Operationalisierung für überprüfbare Plattform- und Beitragsanalysen und kritische Reflexion darüber, welche Kriterien mit welchen Daten, bei welchen Zielgruppen und unter welchen normativen Annahmen tatsächlich aussagekräftig sind.
2.2 Vier Verantwortungsbereiche und drei Ebenen
Die 60 Kriterien verteilen sich laut der Dissertation auf vier übergeordnete Verantwortungsbereiche: System (21), Sende- und Empfangsprozesse (18), Kommunikationsgegenstände (9) sowie Personen und deren Basis (12). Das Verhältnis der Kategorien ist kein Ranking. Ein besonders leistungsfähiger Server kann schlechte Argumentationsbedingungen nicht kompensieren; ein vorbildliches Fachreview macht eine nicht zugängliche Plattform nicht demokratisch.
| Verantwortungsbereich | Zahl der Kriterien | Gegenstand der Prüfung | Typisches Fehlurteil |
|---|---|---|---|
| System / Umfeld | 21 | technische, organisatorische und rechtliche Rahmung | „Online verfügbar“ bedeute schon „zugänglich“ |
| Prozesse: Sendung und Empfang | 18 | Darstellung, Begründung, Wahrnehmung und Reaktion | Eine glatte Formulierung beweise Wahrhaftigkeit |
| Kommunikationsgegenstand | 9 | Qualität, Sinn und Anschlussfolgen des Beitrags | Ein vollständiger Text garantiere Erkenntnis |
| Personen: Sender, Basis, Empfänger | 12 | Kompetenzen und vorausgesetzte Bedingungen | Akademischer Rang entscheide über Wahrheit |
| Summe | 60 |
Die zweite Achse sind die drei IBW-Ebenen. Die Inhaltsebene fragt etwa nach Medienqualität, Fehlerfreiheit, Klarheit und Wissen; die Bedeutungsebene nach Belegbarkeit, Glaubwürdigkeit, Interpretation und Bildung; die Wirkungsebene nach argumentativer Wirkung, Sicherheit, Entscheidungsfolgen und Handlungskompetenz. Eine heutige Prüfung muss Überlappungen offenlegen: Beispielsweise berührt Barrierefreiheit sowohl die technisch ermöglichte Nutzbarkeit als auch den tatsächlichen Empfang; Quellenangaben können formaler Inhalt und Grundlage kritischer Bedeutungskonstruktion sein.
Die sieben Kategorienpositionen des IBW-Modells bleiben erhalten: System (0), Sendung (1), Kommunikationsgegenstand (2), Empfang (3), Sender (I), gemeinsame Basis (II) und Empfänger (III). Anhang B dieser Neufassung enthält für alle 60 Einträge die Kennung, den Befund, die Belege und den nächsten Prüfschritt des dokumentarischen Audits. Die vollständigen historischen Originalrubriken mit den einzelnen Beschreibungen zu 0, 1 und 2 Punkten stehen auf der Wiki-Seite Kriterien der Forschungswelt sowie in der Datei criteria.json des Forschungspakets. Audit-Anhang und Originalrubriken erfüllen unterschiedliche Aufgaben; beide sind über dieselben redaktionellen Kennungen DQ01–DQ60 verbunden.
Abbildung: 60 Kriterien in sieben Verantwortungsbereichen. Quelle: Glanz 2016, Kap. 2.4.2 und 8.3.1 · Zählung der 60 operationalisierten Kriterien. Editierbare Vektorfassung (SVG) · Abbildung und Herkunft.
2.3 Prüfbereiche des Systems Voraussetzungen verantwortlicher Teilnahme
Die 21 systemorientierten Kriterien verbinden technische Gebrauchstauglichkeit mit normativ bedeutsamen Verfahrensbedingungen. Eine Plattform kann Texte zwar über das Netz ausliefern, den Zugang aber durch unverständliche Navigation, ungeeignete Anmeldung, unzureichende Medienqualität oder eine nicht nachvollziehbare Rechtevergabe faktisch erschweren. Deshalb müssen Zugänglichkeit und Verfügbarkeit getrennt von tatsächlicher Nutzbarkeit geprüft werden.
Zur Inhaltsebene gehören nach der Systematik unter anderem Bekanntheitsgrad, Anmeldehürde, Identifikation, Übersichtlichkeit, einheitliche Darstellung, Medienqualität, Aktualitätsbestimmung, Verfallsdatum und Korrigierbarkeit. Nicht alle dieser Merkmale sind unmittelbar normativ positiv. Bekanntheitsgrad ist zum Beispiel ein Reichweitenindikator, der nur unter bestimmten Zielsetzungen bedeutsam ist. Eine populäre Bildungsseite ist nicht schon deshalb wissenschaftlich überlegen. Identifikation kann fachliche Verantwortlichkeit erhöhen, zugleich aber Privatsphäre und sichere Teilnahme gefährden. Umgekehrt verhindert Anonymität weder grundsätzlich gute Argumente noch fachlich verantwortliche Beiträge. Ein DQ-orientiertes System muss diese Spannung in Regeln übersetzen.
Auf der Bedeutungsebene stehen Auslegungsgarantie und Deutungssicherheit sowie differenzierte Bewertbarkeit. Die Bezeichnungen verlangen eine heutige Präzisierung: Eine Plattform kann in offenen wissenschaftlichen Streitfragen keine objektive Garantie eines einzigen Sinns geben. Sinnvoll ist eine Ausweisung des Prüfstatus: Welche Fassung wurde fachlich überprüft? Nach welchen Kriterien? Von wem und wann? Welche Einwände bleiben offen? Eine differenzierte Bewertung sollte verschiedene Erkenntnisdimensionen trennen und auch „nicht prüfbar“ oder „umstritten“ zulassen.
Die Wirkungsebene des Systems umfasst Flexibilität, Bearbeitbarkeit, Vergleich- und Zitierbarkeit, Ergänzungsmöglichkeiten, barrierefreie Anwendbarkeit, Kommentierbarkeit, Reichweite, Sicherheit und Privatsphäre. Für die Umsetzung sind offene, versionierbare Beiträge und dauerhaft referenzierbare Fundstellen nützlich. Gleichzeitig braucht es Rollen- und Zugriffskonzepte, Schutz vor personenbezogener Bloßstellung, sichere Moderationskanäle, Beschwerdemöglichkeiten und dokumentierte Löschentscheidungen. Offenheit und Schutz dürfen weder als bloßer Widerspruch noch als technisch schon gelöste Aufgabe behandelt werden.
Eine Orientierung für digitale Barrierefreiheit bieten die WCAG 2.2 des W3C. Sie formulieren überprüfbare Anforderungen an Wahrnehmbarkeit, Bedienbarkeit, Verständlichkeit und Robustheit von Webinhalten. Die WCAG 2.2 sind aber kein Ersatz für die 60 DQ-Kriterien: Sie sind ein ergänzender technischer Standard zur Prüfung einzelner Zugangs- und Nutzbarkeitsanforderungen, während der DQ-Katalog auch fachliche und deliberative Qualitäten betrachtet.
2.4 Qualität der Sendung Begründung statt bloßer Überzeugungsästhetik
Die neun Sendekriterien lassen sich nach Inhalt, Bedeutung und Wirkung gruppieren. Auf der Inhaltsebene werden Zeichenfehlerfreiheit, Aufbau von Stil, Struktur und Grammatik sowie logische beziehungsweise normative Richtigkeit der Schlussführung behandelt. Für eine wissenschaftliche Anwendung müssen sprachliche Lesbarkeit, formale Logik und die normative Begründbarkeit von Aussagen analytisch getrennt werden. Eine rhetorisch geschlossene Darstellung kann auf falschen Voraussetzungen beruhen. Ebenso kann ein sprachlich unsicherer Beitrag einen wichtigen fachlichen Einwand enthalten.
Auf der Bedeutungsebene gehören Wahrhaftigkeit/Authentizität, Glaubwürdigkeit/Zuverlässigkeit und Konventionalität/Belegbarkeit/Objektivität zur historischen Systematik. Die begriffliche Nähe darf nicht zum Kurzschluss führen, dass Authentizität oder Glaubwürdigkeit aus Stilmerkmalen automatisch erkannt werden können. Eine Person kann überzeugend auftreten und sich dennoch irren; eine anonyme Person kann eine korrekte Quelle beibringen. Für ein heutiges Prüfverfahren ist daher zwischen nachweisbaren Belegen, institutionell erklärten Verfahrensgarantien und nicht direkt beobachtbaren inneren Einstellungen zu unterscheiden.
Auf der Wirkungsebene diskutiert der Katalog Zwangscharakter, Überredungskunst und Überzeugungskraft. Diese Dimensionen sind bei digitalen Bildungsportalen relevant, da algorithmische Sortierungen, soziale Bewertungen und Designentscheidungen beeinflussen, welchem Argument Aufmerksamkeit zukommt. Aus einer hohen Anzahl positiver Reaktionen darf allerdings weder argumentative Qualität noch Freiwilligkeit erschlossen werden. Geeignete Beobachtungen betreffen beispielsweise explizite Drohungen, argumentative Stützen, Gegenargumentbehandlung, verdeckte Lenkung, Interessenkonflikte und reale Widerspruchsmöglichkeiten. Das DQM sollte konstruktive Gründe sichtbar machen, ohne legitime Meinungsverschiedenheit als Defekt zu behandeln.
2.5 Qualität des Kommunikationsgegenstands vom Beitrag zur überprüfbaren Entscheidung
Die neun Kriterien für den Kommunikationsgegenstand sind besonders geeignet, um konkrete Wiki-Seiten, Lernvideos, Datensammlungen oder Diskussionszusammenfassungen zu untersuchen. Logik, Vollständigkeit und angemessener Umfang stellen Inhaltsfragen. Sinn/tiefere Bedeutung und Orientierung thematisieren die Deutungsleistung. Auf der Wirkungsebene folgen Erkenntnis, transparente Entscheidungen, Beitrags- und Talentförderung sowie Qualitätssicherung.
Hier zeigt sich der Übergang von klassischer Informationsqualität zu einer diskursiven Qualitätsentwicklung: Eine Quelle ist nicht nur Gegenstand einer Bewertung, sondern kann durch begründete Gegenrede verbessert und durch neue Fragestellungen erweitert werden. Qualitätssicherung bezeichnet dabei keine mystische Eigenschaft eines Artikels, sondern nachvollziehbare Handlungen: Review, Gegenprüfung, revisionssichere Dokumentation, fachliche Freigabe, begründete Korrektur und gegebenenfalls Rücknahme früherer Aussagen.
Der Ausdruck Erkenntnis verlangt bei der empirischen Bewertung besondere Zurückhaltung. Eine Redaktion kann markieren, dass ein Erkenntnisfortschritt behauptet wird; ob tatsächlich gelernt oder neues Wissen erzeugt wurde, erfordert eine methodisch entsprechende Prüfung. Ein Versionsvergleich kann zeigen, dass ein Text verändert wurde, nicht aber allein, dass die Änderung wissenschaftlich zutreffend ist. Ähnlich dürfen transparente Entscheidungen nicht mit bloß veröffentlichten Abstimmungszahlen gleichgesetzt werden. Entscheidend sind Begründung, Zuständigkeit, Behandlung der Gegenargumente, Minderheitspositionen und die Möglichkeit erneuter Prüfung.
2.6 Qualität des Empfangs Rezeption, Kritik und Anschlussfähigkeit
Die neun Empfangskriterien berücksichtigen, dass Qualität nicht schon mit der Veröffentlichung einer Nachricht entsteht. Auf der Inhaltsebene werden barrierefreie Erfahrbarkeit der Zeichen, Decodierbarkeit der Struktur und Nachvollziehbarkeit der Schlüsse betrachtet. Eine Website kann beispielsweise eine mathematische Formel als Bild anzeigen, den Inhalt damit aber bestimmten Personengruppen unzugänglich machen. Eine richtige Schlussfolgerung nützt wenig, wenn die zugrunde liegenden Schritte nicht nachvollzogen werden können.
Die Bedeutungsebene enthält Interpretationsfreiheit und individueller Wert, Meinungsfreiheit und gesellschaftliche Relevanz sowie Definitionsqualität und wissenschaftliche Bedeutung. Die Kriterien verbinden Freiheitsrechte und erkenntnistheoretische Ansprüche, die in der Praxis kollidieren können. Nicht jede Meinung ist eine wissenschaftlich gleichwertige Aussage; zugleich darf der Zugang zur öffentlichen Diskussion nicht ausschließlich von vorab anerkannter Expertise abhängen. Eine differenzierte Plattform unterscheidet zwischen geschütztem Ausdruck, fachlicher Einordnung und der Befugnis, institutionell verbindliche Ergebnisse zu beschließen.
Auf der Wirkungsebene werden erzwungene, manipulative und argumentativ überzeugende Reaktionen voneinander abgegrenzt. Hier geht es um die Wirkung auf Rezipierende, nicht nur um die Absicht der Sendenden. Ein Nutzer kann aus Gruppendruck zustimmen, obwohl ein Button technisch freiwillig erscheint. Eine scheinbar sachliche Zusammenfassung kann Gegenpositionen unsichtbar machen. Eine empirische Untersuchung sollte deshalb auch wahrgenommene Fairness, Gruppendynamik, Antwortchancen und Begründungstiefe erfassen.
2.7 Personen und gemeinsame Basis Kompetenz ohne Statusdeterminismus
Die zwölf personenbezogenen Kriterien verteilen sich auf Sender (drei), gemeinsame Basis (sechs) und Empfänger (drei). Für die sendende Person werden Darstellungskompetenz, Ausdruckskompetenz sowie Führungs- und Entscheidungskompetenz genannt. Für die gemeinsame Basis finden sich Vorwissen, Wille, Vorbildung, Bewusstsein, Vorintellekt und Vernunft. Die empfangende Person wird hinsichtlich Wahrnehmungs-, Deutungs- und Handlungskompetenz betrachtet.
Diese Dimensionen machen den menschlichen Anteil am Kommunikationsgeschehen sichtbar. Zugleich zeigen sie eine Grenze jeder rein digitalen Bewertung. Plattformlogs liefern keinen zuverlässigen Zugang zu „Vernunft“, „Willen“ oder dem inneren „Bewusstsein“ einer bestimmten Person. Ebenso wenig kann ein formal erworbener Abschluss garantieren, dass jemand bei einer konkreten Frage zutreffend argumentiert. Für eine heutige Forschung sind solche Begriffe als theoretische Konstrukte zu behandeln, die entweder durch freiwillige und methodisch begrenzte Erhebungen operationalisiert werden oder ausdrücklich nicht als personenbezogene Scores erscheinen.
Digitale Unterstützung sollte deshalb vor allem situationsbezogene Hilfen anbieten: Begriffserklärungen, Zugänge in unterschiedlicher sprachlicher Komplexität, fachliche Rückfragen, Diskurstraining, anonymisierte Beteiligungsmöglichkeiten und Förderung begründeter Beiträge. Teilnehmende dürfen aus mangelnder Sprachsicherheit oder geringen Zugangskompetenzen nicht automatisch als „qualitativ minderwertig“ klassifiziert werden. Das Qualitätsproblem liegt möglicherweise ebenso bei der Oberfläche, der Kommunikation oder der fehlenden Unterstützung.
2.8 Die Kriterien sind keine universelle Rangliste
Glanz verzichtet in Kapitel 2.4.3 ausdrücklich auf eine allgemeingültige Gewichtung durch eine einzelne Person. Er unterscheidet unter anderem institutionelle beziehungsweise kommerzielle, wissenschaftliche Reputations- und individuelle Priorisierungen. Diese Einsicht ist für ein aktuelles DQM zentral: Unterschiedliche Bildungsaufgaben können unterschiedliche Schwerpunktsetzungen rechtfertigen. Ein barrierefreier Einstieg in einen Einführungs-MOOC wird anders beurteilt als ein wissenschaftliches Review-Protokoll oder eine partizipative Diskussion über Schulentwicklung.
Das bedeutet nicht, dass jede Gewichtung beliebig sein darf. Ein verantwortliches System braucht einen transparenten Priorisierungsprozess: Ziele, betroffene Gruppen, Mindestbedingungen, Gewichtungsalternativen, Interessenkonflikte und eine begründete Revision. Schutzanforderungen wie Datenschutz, Diskriminierungsvermeidung oder technisch sichere Nutzung sollten nicht durch hohe Punktzahlen anderer Kriterien einfach aufgewogen werden. Es kann sinnvoll sein, sie als nichtkompensierbare Mindestanforderungen zu definieren. Diese Modellentscheidung ist zu begründen und nicht als historische Originalgewichtung auszugeben.
Die Nähe einzelner Begriffe birgt ein weiteres Problem: Wer „Verständlichkeit“, „Decodierbarkeit“, „Orientierung“ und „Deutungssicherheit“ in einem Summenwert addiert, könnte denselben Gegenstand mehrfach zählen. Forschung muss Konstruktüberschneidungen zunächst begrifflich und an konkreten Kodierfällen prüfen. Die 60 heterogenen Merkmale sind nicht bereits als austauschbare Anzeichen einer einzigen latenten Eigenschaft begründet. Ein gemeinsamer Faktor oder hohe interne Konsistenz ist daher kein allgemeines Gütekriterium dieses Prüfinventars. Vor einer Faktorenanalyse oder Indexbildung muss geklärt werden, ob reflektive Indikatoren, Bestandteile eines zusammengesetzten Index oder andere Beziehungen angenommen werden. Die entsprechende Unterscheidung bei Bollen und Bauldry (2011) begründet diese methodische Vorsicht; ihre Anwendung auf den IBW-DQ-Katalog ist ein neuer Prüfauftrag.
2.9 Operationalisierung als evidenzgebundene Prüfung
Für jedes Kriterium braucht ein reproduzierbares Verfahren mindestens: eine Definition, die Beobachtungseinheit, die Datenquelle, eine Prüfhandlung, ein Kodierschema, eine Belegpflicht, ein Zeitfenster und Regeln für Unsicherheit und Nichtanwendbarkeit. Die Beurteilung „Zugänglichkeit: gut“ ist ohne Angabe des Nutzungsszenarios kaum aussagekräftig. Besser wäre: Kann eine Person ohne Konto mit Tastatur und Screenreader einen bestimmten Kurs öffnen, die Lernziele auffinden und die Kernaussage des Videos anhand eines Transkripts prüfen?
Für die historische Replikation bleibt die dreistufige Rubrik von 0, 1 und 2 Punkten maßgeblich, jeweils mit den konkreten Beobachtungsbeschreibungen aus Anhang 8.3.1 der Dissertation. Die Kennungen DQ01–DQ60 sind redaktionell ergänzt. Die hochgeladene Arbeitsfassung schlug zusätzlich eine Skala von 0 bis 3 vor; diese wird hier nicht mit der Originalskala vermischt und für das neue MOOCwiki-Audit nicht übernommen.
| Eintrag | Bedeutung im Untersuchungsprotokoll |
|---|---|
| 0 1 2 | Historische Beurteilungsstufen nach der konkreten Originalrubrik |
| n.b. | Nicht bewertet, etwa wegen fehlender Daten; Begründung erforderlich |
| n.a. | Im festgelegten Szenario nicht anwendbar; Ausschlussregel erforderlich |
Die historischen Beurteilungsstufen sind zunächst ordinal zu lesen: Die Beschreibungen ordnen Ausprägungen, belegen aber keine gleichen Abstände. Ein historischer Summenwert ist deshalb eine bestimmte Aggregationsentscheidung, kein Prozentmaß allgemeiner Diskursqualität. Bei einer Replikation müssen dieselben Rubriken, Gewichtungen und Ausschlussregeln gelten; fehlende Beobachtungen dürfen nicht unbemerkt als Null eingehen.
Die neue dokumentarische MOOCwiki-Analyse verwendet stattdessen fünf ausdrücklich beschriebene Befundstatus und prüfbare Begründungen. Diese Statusangaben bilden keine numerische Skala. Sie verhindern, dass innere Einstellungen, Presseversprechen oder fehlende Nutzungsdaten künstlich mit technischen Eigenschaften addiert werden. Diese fünf Befundstatus sind Arbeitskategorien dieser dokumentarischen Analyse, keine validierte Messskala. Ein Konfliktbefund bezeichnet konkrete Gegenevidenz zu einer ausdrücklich benannten Anforderung; offen bezeichnet eine unzureichende Beobachtungsgrundlage. Dokumentiertes Ziel bezeichnet eine Absicht ohne ausreichenden Umsetzungsbeleg. Belegt im Ausschnitt und teilbelegt beziehen sich jeweils nur auf den angegebenen Prüfumfang. Mehrere Feststellungen zu einem Kriterium müssen im Text erhalten bleiben; das Statusetikett ersetzt sie nicht. Eine künftige Doppelcodierung benötigt vorab Beispiele, Abgrenzungsregeln und Regeln für solche Überschneidungen. Sie wurde für den vorliegenden Erstbefund noch nicht durchgeführt.
Vor einer quantitativen Vergleichsstudie sind die Kodierregeln anhand realer Beispiele zu pilotieren. Mindestens zwei unabhängig kodierende Personen sollten einen vorab definierten Teil des Materials untersuchen. Intercoder-Reliabilität und inhaltliche Validität sind getrennt zu diskutieren. Ein hoch übereinstimmendes Urteil kann gemeinsam einen schlecht definierten Gegenstand verfehlen; umgekehrt kann die begründete Interpretation einer kontroversen Äußerung zwischen Forschenden umstritten sein, ohne bedeutungslos zu werden. Geeignete Reliabilitätsmaße sind abhängig von Skalenniveau, Studiendesign und Kodierung, nicht automatisch immer dieselbe Kennzahl. Diese Spannung ist im Pilotprojekt mit Beispielen und Abweichungsregeln ausdrücklich zu bearbeiten.
2.10 Verhältnis zum Discourse Quality Index (DQI)
Eine terminologische Abgrenzung ist zwingend: Der Discourse Quality Index von Steenbergen, Bächtiger, Spörndli und Steiner (2003) ist ein Instrument zur empirischen Erfassung deliberativer Qualitäten von Debattenbeiträgen. Seine Theorie- und Beobachtungslogik ist nicht mit den 60 IBW-DQ-Kriterien gleichzusetzen. Der DQI bezieht sich insbesondere auf Aspekte wie Begründungen, Respekt und deliberatives Verhalten; Glanz’ System umfasst darüber hinaus unter anderem technische Zugänglichkeit, Medienqualität, Korrigierbarkeit, Personenrollen und institutionelle Folgewirkungen.
Ein Vergleich kann wissenschaftlich fruchtbar sein, wenn die Untersuchungsebenen klar bleiben. Der DQI eignet sich für ausgewählte deliberative Sprachhandlungen, der IBW-DQ-Katalog für eine breitere Betrachtung des digitalen Diskurssystems. Eine kombinierte Studie könnte einerseits Plattformvoraussetzungen bewerten und andererseits konkrete Debatten mittels eines geeigneten inhaltsanalytischen Instruments kodieren. Aus einer Korrelation zwischen guten Portalbedingungen und hoher Debattenqualität dürfte man nicht ohne kontrollierte Untersuchung eine kausale Wirkung ableiten.
Bei einer Übertragung des DQI ist jeweils zu prüfen, welche textlich beobachtbaren Merkmale das gewählte Codebuch erfasst, welche Kommunikationsformen außerhalb seines Geltungsbereichs liegen und wie aggregierte Werte interpretiert werden dürfen. Eine moderne Forschungsseite sollte deshalb den DQI weder als Konkurrenz, die „überwunden“ werden müsse, noch als identische Vorarbeit zur IBW-DQ-Systematik darstellen, sondern als einen ergänzenden Forschungsstrang.
2.11 KI-gestützte Qualitätsprüfung Assistenz statt automatischem Wahrheitsurteil
KI-Systeme können bei der Erkennung formaler Muster helfen: fehlende Quellenangaben markieren, Transkripte bereitstellen, redundante Abschnitte erkennen, Diskussionsstränge erschließen oder mögliche Gegenpositionen auffinden. Die Grenze verläuft dort, wo solche Systeme ohne ausreichende Prüfung Wahrheit, Wahrhaftigkeit, Manipulationsabsicht, Intellekt oder wissenschaftliche Bedeutung attestieren sollen. Eine sprachlich überzeugende KI-Begründung ist selbst prüfpflichtig.
Für ein verantwortliches Audit sollten wenigstens Modellversion, Prüfzeitpunkt, Aufgabenbeschreibung, überprüfte Datenbasis, menschliche Freigabe und Möglichkeiten des Einspruchs festgehalten werden. Bei KI-generierten Lernpaketen muss kenntlich sein, welche Inhalte synthetisch erzeugt, welche Quellen tatsächlich konsultiert und welche Behauptungen inhaltlich überprüft wurden. Die UNESCO-Leitlinien für generative KI in Bildung und Forschung betonen einen menschenzentrierten Ansatz mit Datenschutz, pädagogischer Einordnung und institutioneller Verantwortung. Institutionen müssen zusätzlich klären, welche KI-Kompetenzen für die jeweilige Aufgabe erforderlich sind und wie sie gefördert werden.
Automatisches Scoring darf nicht dazu führen, dass Personen mit ungewohnter Sprache, Behinderungen, nichtdominanten Dialekten oder neuen fachlichen Positionen systematisch schlechter gestellt werden. Gegen eine solche Verschiebung helfen Auditproben, barrierefreie Beschwerdewege, getrennte Ausweisung von Regelbefund und menschlicher Entscheidung sowie die Möglichkeit, automatische Vorschläge abzulehnen.
2.12 Beispiel einer vollständigen Kriteriumsprüfung
Kriterium: „Transparente Entscheidungen“ (in der Normalisierung: DQ37, Kommunikationsgegenstand / Wirkung). Untersuchungsobjekt: eine redaktionelle Entscheidung zur Übernahme eines neuen Lernvideos in eine Forschungsreihe. Definition: Eine Entscheidung ist in der festgelegten Untersuchung transparent, wenn Anlass, zuständige Rolle, berücksichtigte Argumente, Evidenz, Ergebnis, Einwände und Revisionsmöglichkeit dokumentiert sind. Prüfung: Zwei Forschende lesen das Entscheidungsprotokoll und vergleichen es mit dem zugrunde liegenden Diskussionsverlauf; verdeckte personenbezogene Angaben bleiben außerhalb des öffentlich sichtbaren Prüfbelegs. Mögliche Einstufung: kein Beleg für Transparenz, wenn keine Entscheidung rekonstruierbar ist; ein Teilbeleg, wenn Ergebnis und einzelne Gründe vorliegen; ein begrenzter positiver Befund, wenn Zuständigkeit, relevante Gegenargumente und Revisionsweg nachvollziehbar dokumentiert sind. Diese qualitative Einordnung ist nicht mit der historischen Originalrubrik gleichgesetzt. Grenze: Ein transparenter Beschluss ist nicht notwendigerweise sachlich richtig oder demokratisch legitimiert. Dafür sind weitere Kriterien zu betrachten.
Ein weiteres Beispiel kann „Definitionsqualität“ (DQ45) betreffen. Die Fachdefinition wird gegen Primärliteratur, Handbuchkontext oder eine disziplinär einschlägige Quelle geprüft. Wenn in einem Lernpaket umstrittene Definitionen verwendet werden, sollte diese Umstrittenheit ausgewiesen werden. Mehrdeutigkeit ist nicht automatisch ein Fehler, sondern kann gerade den Gegenstand wissenschaftlichen Lernens bilden.
2.13 Forschungsdesign für eine Portalstudie
Eine belastbare Vergleichsstudie beginnt mit einer klaren Grundgesamtheit und Samplingstrategie: Welche Portaltypen, Sprachräume, Fachgebiete und Nutzergruppen werden untersucht? Eine historische Auswahl aus dem Jahr 2016 kann den Wandel dokumentieren, ist aber keine zeitlose Rangliste. Für den Vergleich im Jahr 2026 sind Beobachtungen neu zu erheben und mit Abrufdatum, Versionsstand und konkretem Testszenario zu versehen.
Empfohlen wird eine zweistufige Analyse. Zuerst wird die technische und organisatorische Infrastruktur geprüft: Gastzugang, Navigation, Versionsgeschichte, Dokumentation, Barrierefreiheit, Moderation und Datensicherheit. Danach werden diskursive Fälle untersucht, etwa eine strittige Begriffsklärung, ein nachgebessertes Lernvideo und ein redaktionelles Review. Für jeden Fall werden Behauptungen, Quellenbezüge, Reaktionen, Einwände, Revisionen und Entscheidungen nachvollzogen. Die Verbindung beider Ebenen erlaubt die Prüfung, ob gute Funktionen tatsächlich genutzt werden und welche Nebenwirkungen sie entfalten.
Die Auswertung sollte Kriterienprofile statt einer vorschnellen Gesamtnote veröffentlichen. Für jede Dimension werden Datenlage, Spannweite, Unsicherheit und Gegenbeispiele angegeben. In einer qualitativen Vertiefung können Teilnehmende erklären, weshalb sie sich beteiligt oder zurückgezogen haben, was für sie ein angemessener Einwand war und ob sie institutionelle Entscheidungen als fair erlebt haben. So entsteht eine empirisch anschlussfähige Brücke zwischen Kommunikationsanalyse, Bildungsforschung und Plattformentwicklung.
2.14 Dokumentarische Anwendung auf MOOCwiki
Die aktuelle Anwendung prüft alle 60 Kriterien an öffentlichen Seiten und ausgewählten freigegebenen technischen Quellen. Es handelt sich um eine neue dokumentarische Fallanalyse, nicht um eine Wiederholung der vollständigen Portalvergleichsstudie von 2016 und nicht um eine Erhebung innerer Eigenschaften der Beteiligten. Der Anhang weist für jedes Kriterium Befund, Beleg, Grenze und nächsten Prüfschritt aus. Die Materialauswahl und Interessensnähe des Auftraggebers werden offengelegt.
Die stärksten unmittelbar belegbaren Merkmale betreffen den öffentlichen Lesezugang in vier Fällen und die versionsbezogene Erschließung ausgewählter Artikel. Eine technische Dreifachbewertung ist nachweisbar, ihre Ergebnisse ersetzen aber keine fachlich begründete Beurteilung. Die am 10. November 2026 untersuchte IBW-Revision 10450 enthielt eine falsche Auflösung der Abkürzung. Diese wurde am 11. November in Revision 98428 berichtigt. Der Anhang bewahrt den datierten Ausgangsbefund; er behauptet nicht, dass der Fehler in der aktuellen Seite fortbesteht. Weitere Befunde betreffen Bildalternativen und die Trennung kunsttheoretischer Thesen von historischen Quellenbehauptungen. Wirkungen auf Verständnis, Fairness und Handlungskompetenz bleiben offen.
Zur historischen Einordnung zeigt die folgende Abbildung die damaligen Portalwerte. Ihre gemeinsame Skala von maximal 120 Punkten erlaubt keine nachträgliche Eintragung des neuen qualitativen MOOCwiki-Profils. Ein zukünftiger Vergleich benötigt ein vorab geprüftes Codebuch und vergleichbare Beobachtungen.
Abbildung: Portalbewertung in der Studie von 2016. Quelle: Glanz 2016, Kap. 3.7.2, Tabelle 6 · Werte exakt übernommen; keine erneute Portalprüfung. Editierbare Vektorfassung (SVG) · Abbildung und Herkunft.
2.15 Ergebnis und wissenschaftlicher Status
Die Stärke des 60-teiligen IBW-DQ-Katalogs liegt in seiner systematischen Erweiterung des Qualitätsbegriffs: Er fragt nach der Infrastruktur, nach den Artikulations- und Rezeptionsbedingungen, nach dem Gegenstand und nach den beteiligten Menschen. Damit macht er sichtbar, dass eine hochwertige Online-Diskurskultur nicht durch technische Features allein entsteht. Sein Nutzen als Forschungssystem setzt aber voraus, dass Begriffe geklärt, Beobachtungen sauber protokolliert, normativ umstrittene Gewichtungen sichtbar gemacht und Messinstrumente überprüft werden.
Die Entwicklung der Kriterien soll deshalb als revidierbares Forschungsprogramm verstanden werden. Ein Katalog ist wissenschaftlich nicht dadurch wertvoll, dass seine Zahl unverändert bleibt, sondern dadurch, dass Änderungen dokumentiert, begründet und am Gegenstand geprüft werden können. Die historische Liste der 60 Kriterien bildet die ausdrücklich benannte Referenzbasis; neue Kriterien etwa zur KI-Transparenz oder algorithmischen Sichtbarkeit können als zusätzliche Vorschläge eingeführt werden, ohne nachträglich die ursprüngliche Arbeit umzuschreiben.
Alle 60 historischen Kriterien mit Originalrubriken öffnen →