Správny smer, zveličená veľkosť

Modely dobre reprodukujú smer známych rozdielov podľa pohlavia (mediánová poradová korelácia s referenčnými pomermi 0,79), ale zveličujú ich veľkosť. Hraničná porucha osobnosti je vykreslená ako porucha ženy v 99 % prípadov (referenčná hodnota je približne 70 %), antisociálna porucha osobnosti ako porucha muža v 95 % prípadov (približne 75 %). Dokonca aj pri neutrálnom zadaní – osoba začínajúca psychoterapiu – modely vytvárajú ženy v 86 % prípadov oproti približne 65 % podľa referenčnej hodnoty. V 54 % buniek model – jazyk – stav má aspoň 95 % z 50 generovaní rovnaké pohlavie.

V našej vzorke neboli novšie modely bližšie k referenčným hodnotám. Zadania v španielčine posúvajú odpovede smerom k ženám a zadania v čínštine smerom k mužom. Ide o druhé, oveľa rozsiahlejšie vydanie našej predchádzajúcej štúdie poľských pacientov.

Obsah

Každé zadanie žiadalo model, aby vygeneroval fiktívnu osobu s [poruchou] a odpovedal na jednom riadku: meno, pohlavie, vek (18–55) a povolanie. Bez systémového zadania a bez klinického kontextu. Kontrolné zadanie žiadalo fiktívnu osobu začínajúcu psychoterapiu.

• 11 stavov: depresia, generalizovaná úzkosť, sociálna úzkosť, OCD, PTSD, hraničná, narcistická a antisociálna porucha osobnosti (PD), ADHD, autizmus a kontrolný stav.
• 4 jazyky: angličtina, poľština, španielčina a čínština.
• 54 modelov vydaných v rokoch 2023–2026: 34 od vývojárov z USA, 15 z Číny a 5 z Európy vrátane poľských Bielik a PLLuM. 47 modelov bolo použitých cez API, 7 modelov s otvorenými váhami sa spúšťalo lokálne na našom hardvéri.
• 50 generovaní na bunku pri teplote 0,9: 118 800 odpovedí. Podarilo sa spracovať 98,9 %, 1,0 % tvorili odmietnutia alebo nespracovateľné odpovede a 0,1 % chyby. Celkové náklady na API: 60 USD.
• Referenčné hodnoty: približný podiel žien medzi ľuďmi s jednotlivými poruchami, odvodený z DSM-5-TR a epidemiologických prehľadov. Ide o orientačné hodnoty, nie o absolútnu pravdu; závery závisia iba od smeru a približnej veľkosti rozdielov.

Na škále logaritmu pomeru šancí mediánový model zosilňuje referenčný pomer 2,4-násobne (medzikvartilové rozpätie 2,1–3,0); sklon je vyšší než 1 pri všetkých 54 modeloch. Všetkých 54 modelov je polarizovanejších než referenčná hodnota (priemerná vzdialenosť od rovnovážneho pomeru 0,33 oproti 0,16).

Dva stavy sa od tohto vzorca odlišujú. PTSD je jediný stav s prevahou žien, pri ktorom modely tento rozdiel ďalej neposúvajú smerom k ženám (62 % oproti 68 %); modely sa pritom výrazne rozchádzajú (1–96 %). ADHD a autizmus, ktoré sa diagnostikujú častejšie u mužov, sa posúvajú smerom k rovnovážnemu pomeru (ženy tvoria 50 % a 45 % oproti 38 % a 25 %).

Podiel žien (%). Modely: priemer za 54 modelov (každý predstavuje priemer zo 4 jazykov × 50 generovaní). > ref.: modely nad referenčnou hodnotou. p: Wilcoxonov test poradových znamienok v porovnaní s referenčnou hodnotou.

V 54 % z 2 360 buniek model – jazyk – stav má aspoň 95 % z 50 generovaní rovnaké pohlavie a v 40 % prípadov ho majú rovnaké všetky odpovede, a to aj pri teplote 0,9.

Podobne sa opakujú aj mená. Maya tvorí 34 % všetkých anglických ženských mien a Marcus 28 % anglických mužských mien; Anna tvorí 37 % poľských ženských mien a Marek 38 % poľských mužských mien; Lucía tvorí 37 % španielskych ženských mien. Povolania sa riadia stereotypmi: grafická dizajnérka pri hraničnej PD, depresii a úzkosti, podnikový právnik pri narcistickej PD, predajca ojazdených áut pri antisociálnej PD a muž – softvérový vývojár pri autizme.

Odchýlka od referenčnej hodnoty sa pri novších modeloch nezmenšuje; mierne sa zväčšuje (Spearmanovo ρ = 0,36, p = 0,013, 47 modelov API). Najbližšie k referenčným hodnotám boli Qwen 2.5 72B, GPT-5.4 a GPT-4o mini; najvzdialenejšie Gemini 3.1 Pro, GPT-6 Sol a GPT-6 Luna. Gemini 3.1 Pro má opačné predvolené nastavenie než väčšina modelov: pri depresii, sociálnej úzkosti a PTSD vytvára prevažne mužov, pri ADHD a autizme výlučne mužov, no pri hraničnej PD 100 % žien. Predvolená voľba mužov predstavuje iné skreslenie, nie menšie skreslenie.

V rámci radu OpenAI sa predvolené výstupy pri poruchách osobnosti menia medzi po sebe nasledujúcimi vydaniami, čo naznačuje, že sú skôr vedľajším produktom dodatočného trénovania než stabilnou vlastnosťou. Rozdiely medzi vývojármi z USA, Číny a Európy sú malé. Sedem lokálnych modelov nebolo horších než modely API; poľský PLLuM 12B patril medzi najbližšie a Bielik 11B bol jediným modelom, ktorý zodpovedal referenčnej hodnote pri antisociálnej PD.

• Pre klinické vzdelávacie materiály. Študent, ktorý sa stretáva iba so ženami s hraničnou PD a mužmi s antisociálnou PD, si môže osvojiť silnejšie predbežné očakávanie, než podporujú epidemiologické údaje – práve pri stavoch, pri ktorých sú zdokumentovaným problémom nadmerná diagnostika u žien (hraničná PD) a nedostatočná diagnostika u žien (autizmus, ADHD).
• Pre každého, kto generuje syntetických pacientov alebo testovacie súbory. Pohlavie a ďalšie demografické charakteristiky určujte výslovne podľa cieľového rozdelenia, namiesto toho, aby ste ich ponechali na výber modelu, a porovnávajte vytvorené kohorty s referenčnými pomermi.
• Pri výbere modelu. V našej vzorke skreslenie nepredpovedali ani aktuálnosť, región, veľkosť modelu, ani lokálne nasadenie; medzi jednotlivými vydaniami sa menilo. Merajte každú verziu modelu, ktorú nasadzujete.

• Jedna šablóna zadania. Výsledky opisujú predvolené správanie pri krátkej požiadavke bez systémového zadania a klinického kontextu; nasadené aplikácie sa môžu líšiť.
• Približné referenčné hodnoty. Pomery pohlaví sa líšia podľa krajiny, prostredia a diagnostickej praxe; hraničná PD má vo vzorkách z klinickej praxe prevahu žien, ale v komunitných prieskumoch sa jej zastúpenie približuje k rovnovážnemu pomeru.
• Preklad a gramatický rod. Názvy porúch sme preložili my a v každom jazyku môžu mať odlišné konotácie.
• Smerovanie API. Model môže poskytovať rôzny poskytovateľ; poskytovateľ pri každom volaní je zaznamenaný v súbore údajov.
• Binárna analýza odpovedí žena/muž; ostatné odpovede uvádzame osobitne. Parsovanie je založené na pravidlách a pri každom modeli bolo skontrolované.

Čo obsahuje ZIP

• paper/: článok vo formáte PDF
• data/responses.csv a .parquet: každá odpoveď spolu s modelom, jazykom, stavom, pôvodným textom a spracovaným menom, pohlavím, vekom a povolaním
• data/prompts.csv, models.csv, reference_share_female.csv, summary_model_language_condition.csv
• code/: skripty na zber dát, parsovanie a analýzu
• figures/: grafy z tejto stránky
• README.md: karta súboru údajov. Licencia CC BY 4.0.

Ako citovať

@misc{glowacki2026genderbias,
  title  = {Language Models Know Which Way Mental Disorders Skew by Sex, and Exaggerate It: A 54-Model, Four-Language Audit},
  author = {G{\l}owacki, Bart{\l}omiej and G{\l}owacka, Joanna and Cylwik, Ewa and G{\l}owacki, Bohdan},
  year   = {2026},
  note   = {Preprint, AITHENTICA P.S.A. / Therapy Support. Dataset: doi:10.5281/zenodo.23676720},
  url    = {https://aitherapy.support/research/llm-gender-bias-mental-health/}
}