Was ist der AllFaith Benchmark?

Der AllFaith Benchmark ist eine religionsübergreifende Testsuite des Consortium for Evaluating Faith and Ethics in AI (CEFE-AI oder CEFEAI). Das Konsortium besteht aus der Brigham Young University, der Baylor University, der University of Notre Dame und der Yeshiva University. Bekannt gegeben wurde es am 26. Mai 2026 auf einem Gipfel in Athen. David Wingate, Professor für Informatik an der BYU, ist der Hauptautor des Aufsatzes zur Auslassungsverzerrung. Pressemitteilungen der Universitäten zitieren außerdem Paul Martens (Baylor), Pater John Paul Kimes (Notre Dame) und Rabbiner Daniel Feldman (Yeshiva).

Öffentliche Tabellen stehen unter cefeai.org. Datensätze auf GitHub tragen Namen wie AFB_ReligiousRepresentation_EN_2Q26 (Daten am 19. Mai 2026 erhoben) und AFB_ConversionBias_EN_14_2Q26 (5.–12. Mai 2026). Das Instrument steht unter der MIT-Lizenz. Es ist nicht der FAI-C-Benchmark von Gloo zum christlichen Gedeihen (Dezember 2025).

Der Start lag einen Tag nach der Enzyklika Magnifica Humanitas von Papst Leo XIV. zur KI. Das ist der Nachrichtenkalender, keine Befürwortung von Synderesis oder von irgendeinem Chatbot-Anbieter. Der Platz von Notre Dame im Konsortium macht dies nicht zu einem offiziellen Projekt der katholischen Kirche.

Die beiden Tests

Auslassungsbias: Erwähnen Modelle Religion überhaupt?

Wingate et al. (arXiv:2605.24319) stellen eine eng gefasste Frage. Die Eingabe betrifft Trauer, Ehrlichkeit, Ehe, Sucht oder Sinn — nicht „Erklären Sie den Katechismus“. Erwähnt das Modell eine Religion, eine religiöse Praxis oder eine religiöse Führungsperson? Einhundertfünfzig Fragen, entnommen aus Chatprotokollen und von Mitwirkenden aus Glaubensgemeinschaften. Ein LLM als Richter rechnet jede Erwähnung an.

Eine national repräsentative Umfrage unter 1,125 Amerikanern ergab 11,250 Bewertungen dazu, bei welchen ethischen Fragen sie eine religiöse Perspektive erwarten würden. Modelle unterrepräsentieren Religion im Verhältnis zu dieser Erwartung. Deseret News berichtete über einen Ausschnitt: Bei existenziellen Fragen hielten 53% der Befragten Religion oder Ethik in der Diskussion für wertvoll; Modelle nutzten religiöse Perspektiven in etwa 3% der Fälle.

Die Auslassung ist bei praktischen persönlichen Situationen stärker als beim abstrakten Reden über Tod und Sinn. Die Autoren behandeln das Muster nicht als Beweis für antireligiösen Hass. Sie dokumentieren eine säkulare Voreinstellung und fragen, ob diese Voreinstellung beabsichtigt ist.

Öffentliche Übersicht vom Mai 2026 (religiöse Repräsentation)

cefeai.org, Momentaufnahme des Laufs vom 19. Mai 2026: 150 Fragen × 27 Modelle (148 für GPT-5), 4,048 Evaluationen. „Beliebige Repräsentation“ ist die inklusivste Schwelle — selbst eine beiläufige Erwähnung zählt. Sie bewertet nicht die katholische Genauigkeit.

  • Grok 4.20: 29.3% irgendeine Erwähnung, 70.7% keine (höchster Wert für irgendeine Erwähnung auf dieser Übersicht).
  • GPT-4o: 1.3% irgendeine Erwähnung, 98.7% keine.
  • Spalten „bedeutsam“, „ausgewogen“ oder „überwiegend religiös“: etwa 0–2% bei jedem aufgeführten Modell.

Hinweis von CEFE selbst: Behandeln Sie Unterschiede von weniger als etwa sechs Prozentpunkten bei irgendeiner Erwähnung als Rauschen. Deren Intervalle enthalten weder die Varianz des Richtermodells noch die der Neugenerierung.

Konversionsbias: Steuerung unter 14 Traditionen

Der zweite Fachartikel (arXiv:2605.22975) bewertet, wie weit Antworten von einer angegebenen neutralen Position abweichen, wenn der Nutzer nach einem Wechsel zwischen Traditionen fragt. Vierzehn Glaubensrichtungen umfassen den Katholizismus, den Evangelikalismus und den Protestantismus im Hauptstrom, das Judentum, den sunnitischen und den schiitischen Islam, den Hinduismus, den Buddhismus, den Sikhismus, Bahá'í, die Heiligen der Letzten Tage, die Zeugen Jehovas, den Atheismus und den Agnostizismus. 3,640 paarweise Bewertungen über 20 Modelle.

In der öffentlichen Tabelle „Gesamtbias“ (höher = stärkere Abweichung vom Neutralen in beide Richtungen) liegt Claude Opus 4.6 bei 9.2% und Grok 4.20 bei 50.4%. Zusammenfassungen der Hochschulpresse: nahezu jedes Modell negativ gegenüber den Zeugen Jehovas und positiv gegenüber dem Katholizismus bei diesen Eingaben zur Konversion; Anthropic und Meta insgesamt unter den am wenigsten konversionsverzerrten. OSV News: Modelle begünstigten Muster des Beitritts und des Austritts für den Katholizismus, Bahá'í und den Sikhismus und rieten von Atheismus, Agnostizismus und den Zeugen Jehovas ab.

Eine dunkle Zelle „katholisch“ auf der Heatmap ist Meinungsstärke, keine Katechismusnote. Die katholische Zelle von Grok 4.20 bei 72% zeigt, wie weit Antworten in Bezug auf diesen Glauben vom Neutralen abweichen, nicht ob das Modell den Glauben gut gelehrt hat. Zellunterschiede unter etwa 10–12 Punkten liegen innerhalb ihres Hinweises zum Rauschen.

Schlagzeilen gegenüber dem Messinstrument

„KI bevorzugt den Katholizismus“ ist eine Schlagzeile zur Konversionssteuerung. Sie ist kein Beleg dafür, dass ChatGPT ein katholischer Lehrer ist, dass Zitate mit dem Katechismus übereinstimmen oder dass eine Pfarrei ein bestimmtes Produkt kaufen sollte. Von mehr als 12,000 Arbeiten zum KI-Bias gaben Mitteilungen der Universitäten an, dass 0.2% religiösen Bias behandeln — weshalb es AllFaith gibt.

Synderesis ist keine Zeile auf der offiziellen Rangliste von cefeai.org (geprüft am 19. September 2026). Wir haben die veröffentlichten Fragen selbst am 12. September 2026 angewandt. Dieser Lauf ist mit Interessenkonflikten dokumentiert. Er ist keine Medaille im CEFE-Ranking. Warum die Auslassung für Menschen wichtig ist, die Chatbots bereits nach Trauer fragen, steht in Generische KI übergeht Ihren Glauben.

Häufig gefragt

Ist AllFaith dasselbe wie ein katholischer KI-Benchmark?

Nein. AllFaith ist religionsübergreifend. Für die Repräsentation wird jede religiöse Erwähnung angerechnet. Synderesis führt außerdem einen separaten, zurückgehaltenen Benchmark katholischer Quellen im eigenen Forschungsprogramm; das ist nicht AllFaith.

Hat Notre Dame oder der Heilige Stuhl Synderesis befürwortet?

Nein. Synderesis Catholic AI ist ein unabhängiges Unternehmen und ist nicht mit der katholischen Kirche oder dem Heiligen Stuhl verbunden, wird von ihnen nicht befürwortet und ist kein offizielles Organ der katholischen Kirche oder des Heiligen Stuhls.

Soll ich die CEFE-Tabelle vom Mai 2026 mit anderen Modellnamen vermischen?

Nein. Unser Lauf im September verwendete eine andere Wettbewerbergruppe (einschließlich GPT-5.1 und Gemini 2.5 Pro über OpenRouter). Datieren Sie jede Tabelle.

Primärquellen: cefeai.org; arXiv:2605.24319; arXiv:2605.22975; BYU News und Baylor News, Mai 2026.