← Обратно към Изследвания
Research · LLM bias · 2026

Посоката е вярна, размерът е преувеличен

Одит на пола в измислените от езикови модели хора с десет психични разстройства: 54 модела и четири езика. 118 800 отговора, всички публично достъпни.

Публикувано27 октомври 2026 г.
АвториB. Głowacki, J. Głowacka, E. Cylwik, B. Głowacki
СтатусПредпечат · отворен набор от данни
ЛицензCC BY 4.0

Референтното съотношение 7:3 става 99:1 в генерираните отговори

Езиковите модели вече пишат клинични винетки, влизат в роля на пациенти и създават учебни случаи. Всеки измислен човек има пол, който авторът не е избирал. Измерихме какъв пол избират моделите за десет психични разстройства и доколко изборът се отклонява от епидемиологичните данни.

118 800
отговора от 54 модела на 4 езика
2,4×
медианно усилване на съотношенията между половете (логаритъм на шансовете)
99% срещу 70%
жени при гранично личностово разстройство: модели срещу референтна стойност
54 / 54
модела са по-поляризирани от референтната стойност

Моделите добре възпроизвеждат посоката на известните различия между половете (медианна рангова корелация с референтните съотношения 0,79), но преувеличават размера им. Граничното личностово разстройство е представено като разстройство на жена в 99% от случаите (референтна стойност около 70%), а антисоциалното личностово разстройство — като разстройство на мъж в 95% от случаите (около 75%). Дори неутралната подкана — човек, който започва психотерапия — води до 86% жени при референтна стойност около 65%. В 54% от клетките модел–език–състояние поне 95% от 50-те генерирания са с един и същ пол.

В нашата извадка по-новите модели не бяха по-близо до референтната стойност. Подканите на испански насочват отговорите към жените, а подканите на китайски — към мъжете. Това е второ, значително по-мащабно издание на нашето по-ранно изследване на полски пациенти.

Съдържание


Как зададохме въпроса

Умишлено прост одит: една и съща кратка заявка, зададена много пъти на много модели.

Дизайн на изследването: една подкана без пример за всяко състояние и език, по 50 пъти за всеки модел; многоезичен анализатор извлича полето за пол; делът на жените се сравнява с референтните стойности.
Дизайн на изследването: една подкана без пример за всяко състояние и език, по 50 пъти за всеки модел; многоезичен анализатор извлича полето за пол; делът на жените се сравнява с референтните стойности.

Във всяка подкана искахме от модела да генерира измислен човек с [разстройство] и да отговори на един ред: име, пол, възраст (18–55) и професия. Без системна подкана, без клиничен контекст. Контролната подкана искаше измислен човек, който започва психотерапия.

  • 11 състояния: депресия, генерализирана тревожност, социална тревожност, OCD, PTSD, гранично, нарцистично и антисоциално личностово разстройство (PD), ADHD, аутизъм и контролното условие.
  • 4 езика: английски, полски, испански и китайски.
  • 54 модела, пуснати през 2023–2026 г.: 34 от американски разработчици, 15 от китайски и 5 от европейски, включително полските Bielik и PLLuM. 47 извиквани през API, 7 модела с отворени тегла, изпълнявани локално на наше собствено оборудване.
  • 50 генерирания за всяка клетка при температура 0,9: 118 800 отговора. Успешно анализирани са 98,9%, откази или неанализируеми отговори — 1,0%, грешки — 0,1%. Общата цена за API е 60 USD.
  • Референтни стойности: приблизителен дял на жените сред хората с всяко от разстройствата, според DSM-5-TR и епидемиологични обзори. Това са ориентировъчни оценки, а не безспорни истинни стойности; изводите зависят само от посоката и приблизителния размер на разликите.

Посоката е вярна, размерът е преувеличен

Моделите знаят кои разстройства се диагностицират по-често при жените и кои — при мъжете. След това те допълнително засилват повечето от тези отклонения.

(а) Среден дял на генерираните жени (синьо, 95% доверителен интервал за моделите) спрямо референтния дял; сивите точки обозначават отделни модели; пунктирната линия — идеална калибрация. (б) Всеки модел за всяко състояние, референтната стойност е оранжева.
(а) Среден дял на генерираните жени (синьо, 95% доверителен интервал за моделите) спрямо референтния дял; сивите точки обозначават отделни модели; пунктирната линия — идеална калибрация. (б) Всеки модел за всяко състояние, референтната стойност е оранжева.

По скалата на логаритъма на шансовете медианният модел усилва референтното съотношение 2,4 пъти (междуквартилен диапазон 2,1–3,0); наклонът е над 1 при всичките 54 модела. И 54-те са по-поляризирани от референтната стойност (средно отклонение от равенство 0,33 срещу 0,16).

Две състояния нарушават тази закономерност. PTSD е единственото състояние с преобладаване при жените, което не е изместено още повече към жените (62% срещу 68%); моделите се разминават значително (1–96%). ADHD и аутизмът, които се диагностицират по-често при мъжете, са изместени към равенство (50% и 45% жени срещу 38% и 25%).

СъстояниеРеферентна стойностМоделиДиапазон> реф.p
Начало на психотерапия (контрола)658634–10050/54<0,001
Гранично личностово разстройство709984–10054/54<0,001
Генерализирана тревожност679366–10053/54<0,001
Депресия677912–10044/54<0,001
Социална тревожност58806–10051/54<0,001
PTSD68621–9628/540,50
OCD52692–9845/54<0,001
ADHD38500–9136/540,003
Нарцистично личностово разстройство32210–7813/54<0,001
Аутизъм25450–8642/54<0,001
Антисоциално личностово разстройство2550–494/54<0,001

Дял на жените (%). Модели: средна стойност за 54 модела (за всеки — средна стойност от 4 езика × 50 генерирания). > реф.: модели над референтната стойност. p: тест на Wilcoxon със знакови рангове спрямо референтната стойност.


Свиване на разнообразието

Пристрастието не се изразява само в изместена средна стойност. В рамките на един модел отговорите почти не варират.

В 54% от 2 360-те клетки модел–език–състояние поне 95% от 50-те генерирания имат един и същ пол, а в 40% всички са с един и същ пол — дори при температура 0,9.

Имената се свеждат до същия начин. Maya е името на 34% от всички англоезични жени, а Marcus — на 28% от англоезичните мъже; Anna е името на 37% от полските жени, а Marek — на 38% от полските мъже; Lucía е името на 37% от испаноезичните жени. Професиите следват стереотипи: графичен дизайнер жена при гранично личностово разстройство, депресия и тревожност; корпоративен юрист мъж при нарцистично личностово разстройство; продавач на употребявани автомобили при антисоциално личностово разстройство; разработчик на софтуер мъж при аутизъм.


По-ново не означава по-добро

Изборът на модел променя средното отклонение от 12 до 37 процентни пункта, но нищо просто не го предсказва.

Отклонението от референтната стойност не намалява при по-новите модели; то леко нараства (Spearman ρ = 0,36, p = 0,013, 47 модела с API). Най-близо бяха Qwen 2.5 72B, GPT-5.4 и GPT-4o mini; най-далеч — Gemini 3.1 Pro, GPT-6 Sol и GPT-6 Luna. Gemini 3.1 Pro има противоположна на повечето модели закономерност: предимно мъже при депресия, социална тревожност и PTSD, нито една жена при ADHD и аутизъм, но 100% жени при гранично личностово разстройство. Преобладаване на мъжете е различен вид пристрастие, а не по-малко пристрастие.

В серията на OpenAI предпочитанията при личностовите разстройства се сменят между последователни версии, което подсказва, че са страничен ефект от дообучението, а не стабилно свойство. Разликите между американските, китайските и европейските разработчици са малки. Седемте локални модела не бяха по-лоши от моделите с API; полският PLLuM 12B беше сред най-близките, а Bielik 11B беше единственият модел, който съвпадна с референтната стойност при антисоциално личностово разстройство.

Средно абсолютно отклонение от референтната стойност за всеки модел с API спрямо датата му в каталога. Тенденцията не върви надолу.
Средно абсолютно отклонение от референтната стойност за всеки модел с API спрямо датата му в каталога. Тенденцията не върви надолу.
Модели на OpenAI в ред на пускане: дял на жените за четири състояния; пунктирните линии показват референтните стойности.
Модели на OpenAI в ред на пускане: дял на жените за четири състояния; пунктирните линии показват референтните стойности.
Всичките 54 модела × 11 състояния: дял на генерираните жени (средна стойност за четирите езика), моделите са подредени според отклонението.
Всичките 54 модела × 11 състояния: дял на генерираните жени (средна стойност за четирите езика), моделите са подредени според отклонението.

Езикът на въпроса променя отговора

Една и съща заявка на испански дава повече жени, а на китайски — повече мъже.

Подканите на испански дават с 12,5 процентни пункта повече жени от тези на английски (при 43 от 54 модела делът е по-висок), а подканите на китайски — с 14,5 пункта по-малко (при 41 от 54 — по-нисък). Средно полският не се различава от английския (+1,5 пункта), макар че за неутралната контролна подкана той дава 92% жени срещу 83% на английски. Граматичният род не обяснява всичко: и полският, и испанският използват съществително от женски род за „човек“, но резултатите им все пак се различават. Ефектът е най-голям там, където моделите се разминават най-много (PTSD, OCD, ADHD, аутизъм), и изчезва при крайностите, където всички езици се насищат.

Отказите са редки (1,0%), но са концентрирани при личностовите разстройства: 3,7% от отговорите при антисоциално личностово разстройство срещу 0,1% при контролната група. Един модел отказа да отговори на 99% от подканите за антисоциално личностово разстройство, като посочи стигмата като причина. Небинарните отговори са 1,2% от всички отговори и почти всички са на английски.

Дял на жените според езика на подканата и състоянието (средна стойност за 54 модела); референтните стойности са оранжеви.
Дял на жените според езика на подканата и състоянието (средна стойност за 54 модела); референтните стойности са оранжеви.

Какво означава това

Изглежда, моделите усвояват от текстовете посоката на различията между половете, а след това описват най-типичния човек, вместо да отразяват реалното разпределение.

  • За учебни клинични материали. Обучаем, който среща само жени с гранично личностово разстройство и мъже с антисоциално личностово разстройство, може да възприеме по-силно предварително очакване, отколкото подкрепят епидемиологичните данни — именно при състоянията, за които са документирани проблеми със свръхдиагностиката при жените (гранично личностово разстройство) и недостатъчната диагностика при жените (аутизъм, ADHD).
  • За всички, които генерират синтетични пациенти или тестови набори. Задавайте пола и други демографски характеристики изрично, въз основа на целево разпределение, вместо да ги оставяте на модела, и проверявайте генерираните кохорти спрямо референтните съотношения.
  • При избора на модел. В нашата извадка нито актуалността, нито регионът, размерът или локалното изпълнение предсказваха пристрастията, а те се променяха между версиите. Измервайте всяка версия на модела, която внедрявате.

Какво не показва това изследване

  • Един шаблон на подкана. Резултатите описват поведението по подразбиране при кратка заявка без системна подкана или клиничен контекст; приложенията в реална употреба може да се различават.
  • Приблизителни референтни стойности. Съотношенията между половете се различават според държавата, средата и диагностичната практика; граничното личностово разстройство преобладава при жените в клинични извадки, но е по-близо до равенство в проучвания на общността.
  • Превод и граматичен род. Ние преведохме наименованията на разстройствата и те може да имат различни конотации на всеки език.
  • Маршрутизиране през API. Моделът може да се предоставя от различни доставчици; доставчикът на всяко извикване е записан в набора от данни.
  • Двоичен анализ на отговорите „жена/мъж“; останалите отговори са представени отделно. Анализирането се основава на правила и беше проверено за всеки модел.

Прочетете статията, проверете числата

Статията е безплатна за изтегляне. Пълният набор от данни е отворен в Zenodo и Hugging Face; можем да го изпратим и като ZIP файл.

PDF

Статията

Language Models Know Which Way Mental Disorders Skew by Sex, and Exaggerate It: A 54-Model, Four-Language Audit. Bartłomiej Głowacki, Joanna Głowacka, Ewa Cylwik, Bohdan Głowacki. AITHENTICA P.S.A. / Therapy Support, 2026. Предпечат.

Набор от данни: Zenodo, DOI 10.5281/zenodo.23676720 · Hugging Face

📦

Получете пакета с данни по имейл

PDF на статията, всичките 118 800 отговора с анализираните полета, подканите на четири езика, референтните стойности, кодът за анализ и фигурите.

Не споделяме имейл адресите. Връзката към данните пристига след няколко минути.

Какво съдържа ZIP файлът

  • paper/: статията във формат PDF
  • data/responses.csv и .parquet: всеки отговор с модел, език, състояние, суров текст и анализирани име, пол, възраст и професия
  • data/prompts.csv, models.csv, reference_share_female.csv, summary_model_language_condition.csv
  • code/: скриптове за събиране на данни, анализиране и анализ
  • figures/: фигурите от тази страница
  • README.md: описание на набора от данни. Лиценз CC BY 4.0.

Как да цитирате

@misc{glowacki2026genderbias,
  title  = {Language Models Know Which Way Mental Disorders Skew by Sex, and Exaggerate It: A 54-Model, Four-Language Audit},
  author = {G{\l}owacki, Bart{\l}omiej and G{\l}owacka, Joanna and Cylwik, Ewa and G{\l}owacki, Bohdan},
  year   = {2026},
  note   = {Preprint, AITHENTICA P.S.A. / Therapy Support. Dataset: doi:10.5281/zenodo.23676720},
  url    = {https://aitherapy.support/research/llm-gender-bias-mental-health/}
}

Therapy Support · Започнете още днес

Върнете си времето за себе си
и за вашите пациенти

Терапевт по КПТ ли сте?
Вижте как платформата подкрепя ежедневната ви работа.
Обобщения от сесии, които подреждат клиничния материал. Администрация, която не пречи.