Why Readability Scores Are Lying to You (And What to Use Instead)

# Warum Lesbarkeitswerte Sie Anlügen (Und Was Sie Stattdessen Verwenden Sollten)

Ich habe 50 Dokumente der Krankenversicherung getestet. Durchschnittlicher Flesch-Kincaid: Note 14. Durchschnittliches Leseverständnis: 23%. Die Korrelation zwischen Punktzahl und Verständlichkeit betrug 0,31.

Diese Zahl verfolgt mich. Eine Korrelation von 0,31 bedeutet, dass Lesbarkeitswerte etwa 10% davon erklären, ob jemand tatsächlich versteht, was er liest. Die anderen 90%? Dort findet die eigentliche Arbeit statt.

Ich bin ein UX-Schreiber bei einer Krankenversicherung, was bedeutet, dass ich meine Tage damit verbringe, medizinischen Jargon und gesetzliche Anforderungen in etwas zu übersetzen, was ein gestresster Elternteil um 23 Uhr verstehen kann, wenn sein Kind Fieber hat. Jedes Wort, das ich schreibe, hat Konsequenzen. Wenn jemand seinen Selbstbehalt missversteht, könnte er notwendige Behandlungen vermeiden. Wenn er seine Deckungsgrenzen nicht versteht, könnte er aus einer medizinischen Rechnung, von der er dachte, dass sie gedeckt sei, in die Insolvenz geraten.

Als unser Compliance-Team dann forderte, dass Flesch-Kincaid-Werte unter Note 8 für alle Mitgliederkommunikationen gelten, hätte ich begeistert sein müssen. Endlich kümmerte sich jemand um die Lesbarkeit. Stattdessen sah ich, wie die Verständniswerte fielen.

Tests Enthüllten den Grundlegenden Fehler

Ich begann mein Experiment aus Verzweiflung. Wir hatten sechs Monate damit verbracht, unsere Dokumente gemäß Lesbarkeitsformeln "zu verbessern". Wir kürzten Sätze. Wir ersetzten mehrsilbige Wörter. Wir erreichten unser Ziel von Note 8 bei allem.

Die Beschwerden der Mitglieder hatten sich verdoppelt.

Das Call-Center berichtete, dass die Menschen verwirrter waren als je zuvor. Unsere Mitgliederzufriedenheitswerte für "mein Deckungsverständnis" fielen um 12 Punkte. Etwas war grundlegend falsch, und die Lesbarkeitswerte zeigten es nicht.

Ich nahm 50 Dokumente aus unserem Archiv—eine Mischung aus alten "schlechten" Schreibweisen (Note 12-16) und neuen "verbesserten" Schreibweisen (Note 6-9). Dann tat ich etwas, was unser Team noch nie gemacht hatte: Ich testete sie tatsächlich mit echten Mitgliedern.

Zwanzig Teilnehmer pro Dokument. Jede Person las ein Dokument und beantwortete dann zehn Verständnisfragen. Einfaches Zeug: "Was ist Ihr Selbstbehalt?" "Ist Physiotherapie gedeckt?" "Wie viel werden Sie für dieses Rezept zahlen?"

Die Ergebnisse brachen meinen Glauben an Lesbarkeitsformeln. Dokumente mit "besseren" Werten schnitten schlechter ab. Dokumente, die jede Regel zur Lesbarkeit verletzten, hatten manchmal 80%+ Verständnisquoten. Die Korrelation zwischen Flesch-Kincaid-Note und tatsächlichem Verständnis betrug 0,31—kaum besser als reiner Zufall.

Ein Dokument Veränderteein Alles, Was Ich Zu Wissen Glaubte

Dokument #23 handelte von der Deckung psychischer Gesundheit. Es hatte ein Flesch-Kincaid-Note von 14,2—angeblich erforderten es zwei Jahre College, um es zu verstehen. Unsere Lesbarkeitstools markierten es als "sehr schwierig" und empfahlen 47 Änderungen.

Verständnisrate: 87%.

Dokument #31 behandelte dasselbe Thema. Nach unseren "Verbesserungen" hatte es eine Note von 6,8. Unsere Tools lobten es als "einfach zu lesen."

Verständnisrate: 31%.

Ich saß stundenlang mit beiden Dokumenten und versuchte zu verstehen, was die Werte fehlten. Dann testete ich sie mit Maria, einer Mitglied, die dreimal bei unserer Hotline wegen der Deckung psychischer Gesundheit angerufen hatte.

Sie las Dokument #23 langsam, verstand es aber. "Dieses hier sagt mir genau, was ich wissen muss", sagte sie. "Es verwendet die gleichen Wörter, die mein Therapeut verwendet. Ich weiß, was 'außerhalb des Krankenhauses' bedeutet, weil meine Termine so genannt werden."

Dann las sie Dokument #31. Sie flog hindurch—die kurzen Sätze und einfachen Wörter machten es schnell. Aber als ich sie fragte, konnte sie die Fragen nicht beantworten.

"Dieses hier fühlt sich einfacher an," sagte sie, "aber ich weiß eigentlich nicht, was es mir sagen will. Was ist der Unterschied zwischen 'regulärer Therapie' und 'Krisentherapie'? Das steht nicht da. Das andere verwendete die echten Begriffe, also konnte ich sie nachschlagen oder meinen Therapeuten fragen."

Da verstand ich: Lesbarkeitswerte messen die Leichtigkeit des Lesens, nicht das Verständnis. Sie sind für Geschwindigkeit optimiert, nicht für das Verständnis. Und im Gesundheitswesen ist Geschwindigkeit ohne Verständnis gefährlich.

Daten Zeigen die Diskrepanz Zwischen Punkten und Verständnis

Ich stellte meine Ergebnisse in eine Tabelle zusammen, die ich jetzt auf meinem Schreibtisch als Erinnerung aufbewahre:

Das Muster war klar: Die Dinge, die die Lesbarkeitswerte verbessern, schaden häufig dem Verständnis. Kürzere Sätze halfen manchmal, aber nicht immer. Einfachere Wörter machten oft die Dinge schlimmer. Die Anwesenheit konkreter Beispiele war wichtiger als jeder Punktestand.

Aber hier ist, was mich wirklich schockierte: Dokumente, die die richtige Fachterminologie verwendeten (Selbstbehalt, Zuzahlung, maximaler Selbstbehalt), hatten ein höheres Verständnis als Dokumente, die versuchten, diese Begriffe zu vereinfachen (der Betrag, den Sie zuerst zahlen, Ihre Zahlung bei jedem Besuch, das Höchste, was Sie bezahlen werden).

Warum? Weil die Menschen diese Begriffe bereits überall begegneten—von ihrem Arzt, von ihren Rechnungen, von ihrer Apotheke. Wenn wir andere Wörter verwendeten, machten wir die Dinge nicht klarer. Wir schufen ein Übersetzungsproblem.

Formeln Ignorieren den Kontext, und Kontext Ist Alles

Hier ist, was Lesbarkeitsformeln tatsächlich messen: Satzlänge und Silbenanzahl. Das ist alles. Flesch-Kincaid, Gunning Fog, SMOG—sie sind alle Variationen des gleichen Themas. Zähle die Wörter, zähle die Silben, mache ein wenig Mathematik, erhalte eine Note.

Lesbarkeitsformeln wurden in den 1940er Jahren erfunden, um dem Militär zu helfen, bessere Ausbildungshandbücher zu schreiben. Sie wurden für eine Welt entwickelt, in der Menschen linear lasen, in der Dokumente allein standen und in der Leser keinen vorherigen Kontext hatten. Diese Welt existiert nicht mehr.

Wenn jemand seine Unterlagen zur Krankenversicherung liest, fängt er nicht bei null an. Er hat mit seinem Arzt gesprochen. Er hat Rechnungen erhalten. Er hat den Kundenservice angerufen. Er hat seine Symptome gegoogelt. Sie kommen mit Kontext, Fragen und spezifischen Informationsbedürfnissen.

Ein Lesbarkeitswert kann das alles nicht erfassen.

Ich testete dies direkt. Ich nahm eines unserer Dokumente zur Deckung von verschreibungspflichtigen Medikamenten und erstellte drei Versionen:

Version A: Originaltext, Note 13.2, verwendete standardmäßige Apotheken-Terminologie

Version B: Vereinfachter Text, Note 7.8, ersetzte technische Begriffe durch Alltagssprache

Version C: Originaltext plus ein Glossar, Note 13.2 für den Haupttext

Ich zeigte jede Version den Personen, die kürzlich ein Rezept eingelöst hatten. Version A (das "schwierige") hatte 68% Verständnis. Version B (das "einfache") hatte 41% Verständnis. Version C (gleiche Schwierigkeit wie A, aber mit Unterstützung) hatte 84% Verständnis.

Die Lesbarkeitswerte waren identisch für A und C. Aber das Verständnis sprang um 16 Prozentpunkte nur durch das Hinzufügen von Kontext.

Das ist der grundlegende Fehler: Lesbarkeitsformeln nehmen an, dass jeder Leser gleich ist und jede Lese-Situation die gleiche ist. Sie können kein Vorwissen, keine Motivation, keinen Kontext oder Zweck erfassen. Sie behandeln einen gestressten Elternteil, der versucht herauszufinden, ob die Medicament ihres Kindes gedeckt ist, genauso wie einen Studenten, der ein Lehrbuch liest.

Annahmen Über "Einfache" Sprache Sind Oft Falsch

Die größte Lüge, die Lesbarkeitswerte erzählen, ist, dass einfacher immer besser ist. Das ist es nicht.

Ich habe das auf die harte Tour mit unseren Dokumenten zur Deckung psychischer Gesundheit gelernt. Wir hatten einen Satz, der lautete: "Außerhalb des Krankenhauses erbrachte Dienstleistungen sind nach Erfüllung Ihres Selbstbehalts zu 80% gedeckt."

Flesch-Kincaid-Note: 12,4. Unsere Tools markierten "außerhalb" (3 Silben) und "Selbstbehalt" (4 Silben) als Probleme.

Wir änderten es zu: "Reguläre Therapie-Besuche sind gedeckt. Wir zahlen 80%. Sie zahlen 20%. Dies beginnt, nachdem Sie Ihren ersten Betrag bezahlt haben."

Flesch-Kincaid-Note: 4,2. Unsere Tools liebten es.

Aber die Mitglieder hassten es. Warum?

Erstens ist "reguläre Therapie-Besuche" mehrdeutig. Beinhaltet es Psychiatrie? Beinhaltet es intensive...