Поставьте 1 919 американских соискателей перед двумя системами ИИ-скрининга и заставьте выбрать: сильнее всего на них влияет не частота ошибок. А то, принимает ли решение проверяющий человек. В предварительно зарегистрированном conjoint-эксперименте, опубликованном в сентябре, участие человека повысило вероятность выбора системы скрининга на 0,272 — статистически неотличимо от 0,285, которые даёт снижение ошибочных отказов с 30% до 10%, причём доверительный интервал разницы перекрывает нуль (Wang, Sturgis & de Kadt, 2026).
Прочитайте этот обмен дважды. Две трети ваших ложных отказов — или имя человека под решением. Кандидаты оценивают их примерно одинаково.
Этот результат интересен. Следующий дорого стоит операционно, потому что большинство путей отказа в среднем бизнесе построены на обратном.
Что оценили 1 919 соискателей, когда выбор был принудительным
Дизайн — причина отнестись к этому серьёзно. Каждый респондент сделал восемь выборов между парами профилей систем ИИ-скрининга — всего 30 704 профиля — с шестью атрибутами, рандомизированными независимо друг от друга: полномочие решения, частота ошибок, объяснение, право отказаться, апелляция и независимый аудит предвзятости.
Независимая рандомизация — методологический смысл работы. Предыдущие исследования обычно меняют процедуру и качество вместе, поэтому не могут сказать, ценят ли соискатели апелляцию саму по себе или только за ошибки, которые она исправляет. Этот дизайн их разделяет и был зарегистрирован до сбора данных.
Выборка — работающие люди, не студенты: средний возраст 36,6 года, 35,0% безработных в активном поиске, 74,9% уже проходили оценку ИИ на каком-то этапе поиска.
Вот прайс-лист — изменение вероятности быть выбранным (Wang, Sturgis & de Kadt, 2026):
| Атрибут системы | Влияние на вероятность выбора |
|---|---|
| ИИ предлагает, человек решает | +0,287 |
| ИИ сначала отбирает, человек решает | +0,257 |
| Участие человека (объединённо) | +0,272 |
| Доступна апелляция | +0,156 |
| Доступен отказ от участия | +0,129 |
| Доступно объяснение | +0,128 |
| Независимый аудит предвзятости | +0,068 |
| Снижение частоты ошибок с 30% до 10% | +0,285 |
Объединённое участие человека превзошло апелляцию, право отказа и аудит предвзятости — каждое при p < 0,001. Участие человека, апелляция и право отказа превзошли аудит предвзятости, снова при p < 0,001.
Человек на решении стоит примерно вчетверо дороже независимого аудита предвзятости.
Апелляция не стала ценнее, когда система стала хуже
Это тот результат, который переворачивает обычный порядок исправлений.
Если процедурные гарантии — страховка от ошибок, если апелляция ценна тем, что перехватывает ошибочные отказы, то её ценность должна расти по мере роста ошибочных отказов. Эксперимент проверил именно это, с предварительно зарегистрированной границей эквивалентности ±0,05.
Ценность апелляции не выросла. Как и ценность права отказа, аудита предвзятости и объяснения. Апелляция и право отказа прошли более строгую границу ±0,03; аудит предвзятости и объяснение прошли зарегистрированные ±0,05. Гипотеза исправления ошибок не подтвердилась ни для одного из атрибутов.
Апелляция — самый показательный случай, поскольку её корректирующая функция самая прямая из четырёх. Её взаимодействие с частотой ошибок было незначимым, с 90-процентным доверительным интервалом внутри ±0,03. Атрибут сообщал респондентам, что повторное рассмотрение доступно. Он ничего не говорил о том, насколько хорошо оно работает, — и этого хватило при каждой проверенной частоте ошибок.
Участие человека оказалось единственным атрибутом за пределами границы, и авторы здесь осторожны: его преимущество составило 0,285 при частоте ошибок 10%, 0,289 при 20% и 0,239 при 30% — немонотонно, чувствительно к шкале и незначимо в логит-модели (p = 0,21). Они прямо отказываются читать это как потерю ценности человеческой проверки при росте ошибок. Не стоит и вам.
Применимый вывод уже и твёрже: работа над качеством и работа над процедурой отвечают на разные требования, и одна не покупает другую. Работодатель, который ставит более точную модель, убирая человека из решения, выигрывает по одному измерению и проигрывает по другому.
Аудит предвзятости — не то, на что кандидат может опереться
Посмотрите снова на разрыв между апелляцией (+0,156) и аудитом предвзятости (+0,068). Трактовка авторов — самая переносимая фраза исследования: полномочие решения определяет, кто решает; апелляция и право отказа дают кандидату то, на что можно опереться; аудит же изучает результаты по совокупности случаев, не давая ни одному человеку пути.
Это три разные функции, и режимы соответствия обращаются с ними очень по-разному. Нью-йоркский Local Law 144 требует аудита предвзятости плюс уведомления о том, как запросить альтернативную процедуру, — и подзаконные правила не обязывают работодателя эту процедуру фактически предоставить (NYC DCWP, 2023). EU AI Act идёт другим путём, требуя человеческого надзора за определёнными системами подбора согласно Приложению III(4)(a) и статьям 14 и 26(2), тогда как статья 22 GDPR даёт ограниченное право не быть субъектом исключительно автоматизированного решения, с правом на вмешательство человека и на оспаривание результата (EU AI Act, 2024).
Если ваш стек ИИ-скрининга строился под первый режим, у вас есть документация на уровне системы. Документацию 1 919 респондентов оценили ниже всего протестированного.
Где на самом деле должен находиться проверяющий человек
Последний контраст имеет реальный вес для проектирования. Респонденты предпочли «ИИ предлагает, человек решает» (+0,287) варианту «ИИ сначала отбирает, человек решает» (+0,257) на 0,030 при p < 0,001 — и это предпочтение не менялось с частотой ошибок (изменение по всему диапазону +0,005, 95% ДИ [−0,026, 0,036]).
Разница между этими уровнями мала на словах и велика на практике: только в первом человек видит заявки, которые ИИ отклонил бы. Кандидаты заплатили за это измеримую премию.
Поведенческие данные указывают туда же. Среди американских кандидатов 38% хотя бы раз выходили из процесса найма именно потому, что он включал интервью с ИИ, а самый часто называемый триггер отказа — его указали 33% — предзаписанное видеоинтервью, оцениваемое ИИ без присутствия человека (Greenhouse, 2026).
Усиливают ли атрибуты друг друга? Едва заметно
Было бы удобно, если бы человек-решающий и апелляция перемножались. Доказательств этому мало. Апелляция ценилась выше, когда человек уже был вовлечён, — +0,025, 95% ДИ [0,004, 0,047], — но то же взаимодействие теряет значимость в логит-спецификации объединённой модели (p = 0,31). Взаимодействие права отказа было фактически нулевым: −0,0003.
Поэтому считайте атрибуты аддитивными, а не синергичными. Вы покупаете не пакет, где один элемент усиливает другой, а четыре отдельные вещи, которые кандидаты оценивают по четырём разным ценам. Вытекающий отсюда совет по последовательности неэффектен: покупайте сначала дорогое.
Честное возражение
Три ограничения, прямо.
Это заявленный выбор, а не заявки. Гипотетический парный выбор без опции статус-кво и без возможности отвергнуть оба варианта — чистый инструмент, а не ведомость по зарплате. И атрибуты предъявлялись как бесплатные: у апелляции в опросе нет очереди, задержки и неопределённого исхода, и это не та апелляция, которую вы бы реально вели.
Номинальный человек — не человек. Авторы прямо называют очевидный режим сбоя: проверяющий внутри контура может согласиться с рекомендацией, которую должен проверять. Полевые данные делают это резче. В эксперименте Harvard Business School с 228 экспертами и 48 реальными заявками рекомендации ИИ «чёрного ящика» улучшили качество решений, а те же рекомендации с нарративным объяснением — нет: эксперты непропорционально часто следовали рекомендациям об отказе, увеличивая число ложноотрицательных решений (Lane et al., HBS, 2026). Человек плюс убедительное обоснование может быть хуже каждого по отдельности. Кандидатам нужен тот, кто решает; вашей воронке нужно, чтобы он действительно решал.
Кандидаты всё равно будут откликаться, и это введёт вас в заблуждение. Намерение откликаться на вакансии работодателей, использующих ИИ в найме, составило в среднем 3,24 по пятибалльной шкале — выше веры в легитимность ИИ в найме, 2,85 (p < 0,001); 7,8% респондентов сочетали оценку легитимности ниже середины шкалы с намерением откликаться выше середины (Wang, Sturgis & de Kadt, 2026). Объём заявок — несовершенный индикатор того, что кандидаты считают ваш процесс легитимным. Здоровый вход воронки не доказывает согласия.
Что изменить в пути отказа до закрытия квартала
Четыре шага, ни один не требует новой статьи бюджета.
- Перестаньте записывать портал апелляций как работу над точностью. Если ваш план реакции на жалобы о доверии кандидатов — «подкрутить модель и добавить форму апелляции», то у вас две статьи отвечают на одно требование и ни одна — на другое. Оценивайте их отдельно: кандидаты так и делают.
- Переведите человека из надзора в решение — именно на стороне отказа. Вариант, который даёт +0,287 вместо +0,257, — это человек, который видит то, что модель отклонила бы, до отклонения. Устойчивым это делает не политика, а правило маршрутизации: оценки ниже статистического порога для своей когорты роли и грейда автоматически уходят к проверяющему человеку, в очередь, которую нанимающий рекрутёр не может закрыть сам. Scovai публично документирует эту маршрутизацию и лежащие за ней веса на своей странице платформы, если нужен конкретный ориентир.
- Никогда не обменивайте повторное рассмотрение на аудит. Добавить аудит на уровне системы, убрав индивидуальное повторное рассмотрение, — значит изменить то, что может сделать кандидат, а не только то, что вы можете задокументировать: это обмен атрибута ценой 0,156 на атрибут ценой 0,068.
- Замените объём заявок как метрику справедливости. Измеряйте долю отказов кандидатов на шаге ИИ-скрининга и долю завершения оцениваемых ИИ тестов. Они двигаются, когда кандидаты возражают. Количество заявок — нет.
Процедурные права оправдывают себя сами по себе. Они не хедж против вашей частоты ошибок, и ваша частота ошибок их не заменяет. Проверяющий человек — не гарантия, которую добавляют, когда модель оказалась ненадёжной: по этим данным именно его кандидаты оценивали с самого начала, и это единственный атрибут, который ничто другое в списке не заместило.
Откройте на этой неделе свой путь отказа и найдите шаг, где появляется имя человека. Если единственное имя там принадлежит форме, у вас есть документация — но не решение.
