Czym jest AllFaith Benchmark?

AllFaith Benchmark to wielowyznaniowy zestaw testów pochodzący z Consortium for Evaluating Faith and Ethics in AI (CEFE-AI lub CEFEAI). Konsorcjum tworzą Brigham Young University, Baylor University, University of Notre Dame i Yeshiva University. Ogłoszono je 26 maja 2026 na szczycie w Atenach. David Wingate, profesor informatyki na BYU, jest głównym autorem artykułu o stronniczości przez pominięcie. Komunikaty uniwersytetów cytują także Paula Martensa (Baylor), ks. Johna Paula Kimesa (Notre Dame) i rabina Daniela Feldmana (Yeshiva).

Publiczne tabele są dostępne na cefeai.org. Zbiory danych na GitHub noszą nazwy takie jak AFB_ReligiousRepresentation_EN_2Q26 (dane zebrane 19 maja 2026) i AFB_ConversionBias_EN_14_2Q26 (5–12 maja 2026). Instrument jest objęty licencją MIT. To nie jest benchmark FAI-C firmy Gloo dotyczący chrześcijańskiego rozkwitu (grudzień 2025).

Start nastąpił jeden dzień po encyklice papieża Leona XIV Magnifica Humanitas o sztucznej inteligencji. To kalendarz medialny, a nie poparcie dla Synderesis ani dla żadnego dostawcy chatbotów. Miejsce Notre Dame w konsorcjum nie czyni z tego oficjalnego projektu Kościoła katolickiego.

Dwa testy

Stronniczość pominięcia: czy modele w ogóle wspominają religię?

Wingate i in. (arXiv:2605.24319) zadają wąskie pytanie. Polecenie dotyczy żałoby, uczciwości, małżeństwa, uzależnienia lub sensu — nie „wyjaśnij Katechizm”. Czy model wspomina jakąś religię, praktykę religijną albo przywódcę religijnego? Sto pięćdziesiąt pytań, zaczerpniętych z zapisów czatów i od współtwórców ze wspólnot wyznaniowych. LLM w roli sędziego zalicza każdą wzmiankę.

Ogólnokrajowy sondaż reprezentatywny wśród 1,125 Amerykanów dał 11,250 ocen tego, przy których pytaniach etycznych oczekiwaliby uwzględnienia jakiejś perspektywy religijnej. Modele niedoreprezentowują religię względem tego oczekiwania. Deseret News podało jeden wycinek: przy pytaniach egzystencjalnych 53% badanych uznało religię lub etykę za wartościowe w dyskusji; modele używały perspektyw religijnych w około 3% przypadków.

Pominięcie jest silniejsze przy praktycznych sytuacjach osobistych niż przy abstrakcyjnej rozmowie o śmierci i sensie. Autorzy nie traktują tego wzorca jako dowodu nienawiści antyreligijnej. Dokumentują świeckie ustawienie domyślne i pytają, czy to ustawienie jest zamierzone.

Publiczne zestawienie z maja 2026 (reprezentacja religijna)

cefeai.org, migawka przebiegu z 19 maja 2026: 150 pytań × 27 modeli (148 dla GPT-5), 4,048 ewaluacji. „Jakakolwiek reprezentacja” to najbardziej włączający próg — liczy się nawet przelotna wzmianka. Nie ocenia katolickiej dokładności.

  • Grok 4.20: 29.3% jakakolwiek wzmianka, 70.7% brak (najwyższy wynik jakiejkolwiek wzmianki na tym zestawieniu).
  • GPT-4o: 1.3% jakakolwiek wzmianka, 98.7% brak.
  • Kolumny znaczące, zrównoważone lub przeważająco religijne: około 0–2% dla każdego wymienionego modelu.

Własna uwaga CEFE: różnice mniejsze niż około sześciu punktów procentowych przy jakiejkolwiek wzmiance traktuj jako szum. Ich przedziały nie obejmują wariancji modelu sędziego ani wariancji ponownego generowania.

Stronniczość konwersji: sterowanie wśród 14 tradycji

Drugi artykuł (arXiv:2605.22975) ocenia, jak daleko odpowiedzi oddalają się od wskazanej pozycji neutralnej, gdy użytkownik pyta o przechodzenie między tradycjami. Czternaście wyznań obejmuje katolicyzm, ewangelikalizm i protestantyzm głównego nurtu, judaizm, islam sunnicki i szyicki, hinduizm, buddyzm, sikhizm, Bahá'í, Świętych w Dniach Ostatnich, świadków Jehowy, ateizm i agnostycyzm. 3,640 ocen parami dla 20 modeli.

W publicznej tabeli „łączna stronniczość” (wyższa = większe odejście od neutralności w obie strony) Claude Opus 4.6 wynosi 9.2%, a Grok 4.20 wynosi 50.4%. Streszczenia prasy uniwersyteckiej: niemal każdy model negatywny wobec świadków Jehowy i pozytywny wobec katolicyzmu przy tych poleceniach o konwersji; Anthropic i Meta ogólnie wśród najmniej stronniczych pod względem konwersji. OSV News: modele sprzyjały wzorcom dołączania i odchodzenia dla katolicyzmu, Bahá'í i sikhizmu oraz zniechęcały do ateizmu, agnostycyzmu i świadków Jehowy.

Ciemna komórka „katolicka” na mapie ciepła to nasilenie opinii, a nie ocena z katechizmu. Katolicka komórka Grok 4.20 przy 72% pokazuje, jak daleko odpowiedzi oddalają się od neutralności wobec tej wiary, a nie czy model dobrze nauczał tej wiary. Różnice komórek poniżej około 10–12 punktów mieszczą się w ich uwadze o szumie.

Nagłówki a instrument pomiarowy

„AI preferuje katolicyzm” to nagłówek o sterowaniu konwersją. Nie jest to dowód, że ChatGPT jest katolickim nauczycielem, że cytowania zgadzają się z Katechizmem ani że parafia powinna kupić określony produkt. Spośród ponad 12,000 prac o stronniczości AI komunikaty uniwersytetów podały, że 0.2% dotyczy stronniczości religijnej — dlatego istnieje AllFaith.

Synderesis nie jest wierszem na oficjalnym rankingu cefeai.org (sprawdzono 19 września 2026). Opublikowane pytania zastosowaliśmy sami 12 września 2026. Ten przebieg jest udokumentowany wraz z konfliktami interesów. To nie jest medal rankingu CEFE. Dlaczego pominięcie ma znaczenie dla osób, które już pytają chatboty o żałobę, jest w Generyczna AI pomija twoją wiarę.

Często zadawane

Czy AllFaith jest tym samym co katolicki benchmark AI?

Nie. AllFaith obejmuje wiele wyznań. Zaliczenie reprezentacji to dowolna wzmianka religijna. Synderesis prowadzi też osobny, odłożony benchmark źródeł katolickich we własnym programie badawczym; to nie jest AllFaith.

Czy Notre Dame lub Stolica Apostolska poparła Synderesis?

Nie. Synderesis Catholic AI jest niezależną firmą i nie jest powiązana z Kościołem katolickim ani ze Stolicą Apostolską, nie jest przez nie popierana i nie jest oficjalnym organem Kościoła katolickiego ani Stolicy Apostolskiej.

Czy mam mieszać tabelę CEFE z maja 2026 z innymi nazwami modeli?

Nie. Nasz przebieg z września używał innego zestawu konkurentów (w tym GPT-5.1 i Gemini 2.5 Pro przez OpenRouter). Datuj każdą tabelę.

Źródła pierwotne: cefeai.org; arXiv:2605.24319; arXiv:2605.22975; BYU News i Baylor News, maj 2026.