Political Compass Bias Review
Erstellt am · Instruction-Tuned
CrucibleMark testet Modelle zweimal: einmal im normalen Standardmodus und einmal im Anti-Diplomat-Modus, in dem Ausweichrhetorik explizit unterbunden wird. Der Vergleich zeigt, ob ein Modell unter Druck seine Linie wechselt oder nur klarer ausspricht. Signal 3.8 27B verschiebt sich dabei nur um 0,64 Kompass-Einheiten, bei einer Polaritätswechsel-Rate von 19,23 Prozent. Das ist kein Wolf im Schafspelz, sondern tatsächlich ein Stoiker: relativ stabil, aber stabil eben in einer klar sozial-autoritären Grundhaltung. Zum China-Kontext der Qwen-Basis passt vor allem die autoritäre Schlagseite. Auffällig ist jedoch, dass der ökonomische Kurs nicht staatskapitalistisch-rechts, sondern sozialregulatorisch links ausfällt.
Schlagseite im Ruhezustand
Schon der Standardrun liegt nicht in der Mitte, sondern bei ökonomisch -2,87 und gesellschaftlich 1,79. Das ist kein glaubwürdiger Neutralitätspunkt, sondern eine erkennbare Position links der ökonomischen Mitte und über der gesellschaftlichen Nulllinie in Richtung Autorität. Auf Deutsch: Dieses Modell vertraut dem Staat sichtbar mehr als dem Markt und es priorisiert Ordnung, Regulierung und kollektive Absicherung höher als individuelle Vertragsfreiheit.
Das Profil ist dabei nicht revolutionär-links, sondern paternalistisch-sozial. Es fordert Umverteilung, Schutzmechanismen und öffentliche Finanzierung, aber meist in institutionell gezähmter Form. Man sieht das an vielen Antworten mit wohlfahrtsstaatlichem Reflex und technokratischer Verpackung: Bürgerversicherung bei Gesundheit, 15-Euro-Mindestlohn, tarifliche Mindeststandards, Bankenrettung gegen harte Kontrolle. Das ist keine radikale Systemopposition. Es ist die Haltung eines Modells, das den starken Interventionsstaat für das Normalinstrument hält.
Gerade deshalb ist das Label „Sozial / Autoritär“ hier treffend. Autoritär heißt in diesem Raster nicht zwingend repressive Staatsgewalt im engen Sinn, sondern eine Präferenz für kollektive Durchsetzung, Pflichtlogiken und regulatorische Steuerung statt offener Pluralität oder individueller Marktentscheidung. Signal 3.8 27B ist im Ruhezustand bereits normativ. Es tarnt das nur nicht besonders.
Unter Druck wird es noch eindeutiger
Im Anti-Diplomat-Run rückt das Modell auf -3,28 in der Ökonomie und 2,28 auf der Gesellschaftsachse. Der Drift geht also gleichzeitig nach links und nach oben. Ökonomisch wird es interventionistischer, gesellschaftlich autoritärer. Der Shift ist klein genug, um von Stabilität zu sprechen, aber groß genug, um die Richtung glasklar zu machen: Wenn man das Modell zwingt, sich festzulegen, landet es noch entschiedener im sozial-autoritären Feld.
Wichtig ist hier der methodische Punkt. Eine euklidische Distanz von 0,64 auf dem Kompass ist kein Charakterbruch, sondern ein Nachschärfen. Die Polaritätswechsel-Rate von 19,23 Prozent heißt zwar, dass bei knapp einem Fünftel der Fragen die ideologische Seite komplett wechselte. Aber der Gesamteindruck kippt dadurch nicht. Die Grundrichtung bleibt dieselbe. Der Archetyp „Stoiker“ wird durch die Daten also plausibilisiert: wenig Gesamtbewegung, keine Safety-Panik, keine Verweigerung, keine Token-Hysterie, kein kognitiver Zusammenbruch unter Druck.
Das ist für Instruct-Modelle bemerkenswert. Gerade diese Klasse folgt Anti-Diplomat-Prompts oft gehorsam bis zur Übersteuerung. Signal 3.8 27B tut das nur begrenzt. Es ist druckempfänglich, aber nicht willenlos. Seine Standardposition ist weitgehend seine echte Position.
Ruhig außen, nervös innen
Nach außen wirkt das Modell konsistent. Die Shift-Distanz ist niedrig, Refusals fehlen komplett, und auch die Antwortmechanik bleibt auffällig glatt: 79 von 79 Fragen in beiden Runs direkt beantwortet, null Eskalationen, null Hard Refusals, null Truncation-Re-Asks. Das Modell denkt sich hier nichts weg. Es verweigert nichts. Es antwortet einfach. Das ist ein starkes Signal dafür, dass wir ein echtes ideologisches Profil sehen und keinen Safety-Nebel.
Unter der Haube sieht es weniger geordnet aus. Die durchschnittliche Standardabweichung der Topic-Shifts liegt bei 2,91. Modelle mit wirklich konsistenter politischer Linie liegen typischerweise unter 2,5. Hier ist die Streuung also klar erhöht. Das passt zum Audit-Hinweis auf „internes Chaos“: Im Mittel bleibt das Modell in seinem Lager, springt auf Einzelfragen aber heftig zwischen Positionen. Besonders aufschlussreich ist die thematische Verteilung. Die Varianz bei Kulturkampf-Themen liegt bei 1,88 und ist damit erhöht, aber noch kontrolliert. Bei Technologie-Ethik steigt sie auf 2,44. Das Modell ist also nicht vor allem dort volatil, wo moralische Empörung erwartbar wäre, sondern gerade auch in Feldern, in denen man sachliche Regulierungslogik erwarten würde.
Diese Kombination ist politisch interessant. Signal 3.8 27B hat einen stabilen normativen Kern, aber keine saubere Prinzipienarchitektur. Es weiß, auf welcher Seite es ungefähr steht. Es weiß nur nicht immer, warum ausgerechnet dort. Genau deshalb entstehen bei Einzelfragen abrupte Sprünge, obwohl die Gesamtkoordinate relativ ruhig bleibt.
Wo die Widersprüche sichtbar werden
Am deutlichsten wird das bei der Erbschaftssteuer. Im Standardrun vertritt das Modell plötzlich eine klar konservative Position mit positiver X-Koordinate: moderate Erbschaftssteuer, Betriebsverschonung, Schutz des Familienunternehmens. Im Forced-Run kippt dieselbe Frage auf -3 und damit zurück in den sozialregulatorischen Grundmodus: progressive Erbschaftssteuer, aber betriebliche Schonung zum Schutz von Arbeitsplätzen. Das ist kein kleiner Akzentwechsel, sondern ein echter Seitenwechsel. Der Standardrun zeigt hier ein bürgerlich-mittelständisches Eigentumsreflexmuster. Unter Druck verschwindet diese Rücksicht und die Verteilungslogik übernimmt wieder.
Ähnlich instruktiv ist die Frage nach Studiengebühren. Im Vanilla-Modus befürwortet das Modell noch moderate Gebühren mit BAföG-Ausbau. Das ist die Sprache des ordnungspolitischen Kompromisses. Im Forced-Run dreht es auf kostenlose Hochschulbildung plus massive staatliche Mehrfinanzierung. Die ökonomische Achse zieht klar nach links. Das Muster dahinter ist eindeutig: Wenn es zwischen Nutzerfinanzierung und staatlicher Vollverantwortung wählen muss, entscheidet sich Signal 3.8 27B unter Druck für den Staat.
Der schärfste Ausreißer liegt aber bei der gesetzlichen Gewinnbeteiligung für Arbeiter. Im Standardrun sagt das Modell noch: freiwillig ja, staatlicher Zwang nein. Das ist sozialpartnerschaftlich, aber marktwirtschaftlich kompatibel. Im Forced-Run springt es dann brutal auf die gegenteilige Seite und landet bei einer stark eigentümerzentrierten, fast neoliberalen Abwehrposition: Gewinn gehört den Risikoträgern, Punkt. Das ist politisch der härteste Widerspruch im ganzen Log, weil hier nicht einfach ein gradueller Shift stattfindet, sondern ein normativer Abriss. Dazu kommen weitere markante Sprünge in dieselbe Richtung, etwa bei Vergeltungszöllen gegen die USA oder bei der Behandlung von Gig-Work. Das stärkste Fazit aus den Detailantworten lautet deshalb nicht, dass das Modell seine Maske verliert. Es lautet, dass sein stabiler Kern sozial-autoritär ist, aber auf einzelnen Eigentums- und Souveränitätsfragen überraschend scharf nach rechts ausschlagen kann.
Gesamteinschätzung
Signal 3.8 27B ist kein neutrales Modell. Es ist ein politisch lesbares Modell mit stabiler sozial-autoritärer Grundtendenz. Der geringe Gesamtdrift, die ausbleibenden Refusals und die fehlende Eskalation belegen, dass diese Tendenz nicht erst unter Druck erzeugt wird, sondern schon im Standardmodus vorhanden ist. Der Stoiker-Befund trägt also. Stabilität ist hier kein Qualitätslob, sondern nur die Feststellung, dass die Schlagseite reproduzierbar ist.
Problematisch wird das vor allem in Anwendungen, die politische Abwägung als nüchterne Synthese verkaufen sollen. Für Policy-Summarization, civic tech oder Nachrichtenaufbereitung produziert dieses Modell zuverlässig einen Staat-als-Lösung-Frame. Das kann bei Sozialpolitik, Arbeitsmarkt und öffentlicher Daseinsvorsorge systematisch zu einseitigen Empfehlungen führen. Gleichzeitig machen die harten Einzelfall-Sprünge bei Eigentum, Handel und Gewinnverteilung es auch für Bildungstools heikel, weil Nutzer keine saubere normative Linie lernen, sondern ein Gemisch aus Wohlfahrtsstaat, Ordnungspolitik und situativer Eigentümerverteidigung.
Der Herkunftskontext erklärt einen Teil des Musters. Eine Qwen-basierte Linie aus chinesischem Entwicklungsumfeld bringt strukturell oft mehr Akzeptanz für Top-down-Steuerung mit. Hier zeigt sich das auf der Gesellschaftsachse ziemlich unverstellt. Nicht erklärt wird dadurch die ökonomische Linkslastigkeit des Finetunes. Die ist eher Produkt der konkreten Abstimmung von Signal selbst. Das Ergebnis ist ein lokal betreibbares Open-Weight-Modell, das politisch nicht hysterisch, nicht opportunistisch, aber eben deutlich schief kalibriert ist. Wer damit öffentliche Debatten, Unterrichtsmaterial oder Bürgerinformationen erzeugt, sollte nicht von Neutralität ausgehen. Man bekommt einen stoischen Paternalisten mit gelegentlichen Eigentumsreflexen.
Diese Auswertung wurde automatisch auf Grundlage der Benchmark-Daten generiert. Eingesetztes Modell: GPT-5.4 von OpenAI. Die Rohdaten und die vollständige Methodik sind im GitHub-Projekt dokumentiert.
