Программа экзамена: Управление ИИ и защита данных
IAE-EXAM-AI · версия 1.0
Разделы, формат, примеры заданий и рубрика оценки письменного экзамена IAE по направлению «Управление ИИ и защита данных».
Экзамен не является юридической квалификацией и не проверяет право какой-либо одной страны.
01. Для кого экзамен?
Для специалистов по управлению ИИ, защите персональных данных, комплаенсу, рискам и внутреннему аудиту, руководителей ИИ-продуктов и ML-команд с дипломом бакалавра или выше и опытом не менее 3 лет (без диплома - не менее 5 лет). Экзамен проверяет рабочие решения по ИИ-системам и персональным данным: учёт и классификацию систем, оценку и тестирование до запуска, контроль человеком и мониторинг, реагирование на нарушения, условия договоров с поставщиками моделей.
Экзамен не является юридической квалификацией, не даёт права на юридическую практику и не проверяет право какой-либо одной страны. GDPR, CCPA/CPRA и EU AI Act используются как справочные рамки международной практики: проверяется применение их принципов к ситуации, а не номера статей и дословные формулировки. Ответ можно строить на другой рамке или на законе своей страны, если названо требование и решение обосновано.
02. Формат
- 5 вопросов, по одному на раздел S1-S5, 10 минут на каждый.
- 2 кейса по 25 минут из набора кейсов, например: проверка ИИ-отбора резюме перед запуском при данных долях ошибок по группам, утечка персональных данных с заданным числом записей и сроками, проверка договора с поставщиком языковой модели, оповещение мониторинга о дрейфе модели.
- 1 вопрос о проекте из анкеты кандидата, 10 минут: ИИ-система или решение по защите данных, в котором кандидат участвовал сам.
- Всего до 2 часов за один раз. Вставка текста отключена, у каждого кандидата свои цифры и обстоятельства в заданиях.
- Сроки и пороги, от которых зависит расчёт (срок уведомления о нарушении, пороги мониторинга, внутренняя шкала риска), даны в условии задания, обычно как политика компании.
03. Разделы и вес
- S1. Учёт и классификация ИИ-систем - 15 %.
- S2. Оценка и тестирование перед запуском - 20 %.
- S3. Защита персональных данных - 25 %.
- S4. Контроль человеком, мониторинг и инциденты - 20 %.
- S5. Поставщики, договоры и практика управления - 20 %, включая вопрос о собственном проекте.
04. Темы разделов
S1. Учёт и классификация ИИ-систем.
- Реестр ИИ-систем: что в него вносить, как найти неучтённые сервисы, выборочная проверка реестра.
- Классы риска по справочной рамке: запрещённые практики, высокий риск, обязанности прозрачности, минимальный риск; внутренняя шкала уровня риска и её недостатки.
- Роли сторон: поставщик и пользователь ИИ-системы, контролёр и обработчик данных.
- Существенное изменение модели и использование модели для нового назначения.
- Сообщение людям, что они взаимодействуют с ИИ; работа сотрудников с публичными ИИ-сервисами.
S2. Оценка и тестирование перед запуском.
- Оценка воздействия до запуска: состав, участники, кто утверждает.
- Доли отбора и доли ошибок по группам, соотношение долей, правило четырёх пятых как ориентир.
- Погрешность оценок в малых группах, доверительный интервал доли, нужный объём выборки.
- Выбор порога решения, компромисс между точностью и разрывом между группами.
- Критерии запуска, остаточный риск и решение о запуске.
S3. Защита персональных данных.
- Правовые основания обработки и совместимость новой цели с исходной.
- Минимизация данных и признаков модели, сроки хранения по категориям записей.
- Запросы субъектов данных: очередь, сроки ответа, удаление данных и обученные модели.
- Трансграничная передача: выбор механизма, оценка рисков передачи, дополнительные меры.
- Согласие и отказ от передачи данных рекламным платформам, анонимизация и псевдонимизация.
S4. Контроль человеком, мониторинг и инциденты.
- Реальный контроль человеком: время на одно решение, признаки согласия с моделью без проверки.
- Мониторинг при отложенном результате, дрейф данных и индекс стабильности распределения (PSI), обжалования как сигнал.
- Решение остановить модель или оставить её в работе, журналы ИИ-системы и сроки их хранения.
- Объём выборочной проверки ответов ИИ-ассистента для заданной точности.
- Нарушения безопасности персональных данных: хронология, отсчёт срока уведомления, оценка риска, кого и в каком объёме уведомлять.
S5. Поставщики, договоры и практика управления.
- Проверка поставщика ИИ-сервиса до покупки.
- Условия договора с поставщиком модели: обучение на данных клиента, смена версий модели, субподрядчики и места обработки, уведомление об инцидентах, право на аудит, выход из договора.
- Комитет по ИИ и порядок утверждения проектов по уровням риска, запуск до окончания оценки.
- Отчёт совету директоров по рискам ИИ, обучение сотрудников по ролям.
- Собственный проект кандидата: его роль, решения, цифры и итог.
05. Примеры заданий
Ниже один вопрос и один кейс в том виде, в каком их видит кандидат, и рубрика, по которой их оценивает экзаменатор. В экзамен эти задания не входят. На экзамене цифры и обстоятельства у каждого кандидата свои.
Вопрос (раздел S3, 10 минут). Компания хочет заменить пропуска в офис распознаванием лиц на турникетах. В офисе 1 200 сотрудников, каждый проходит турникет в среднем 4 раза в день. По данным поставщика, система ошибочно не пропускает 0,5 % проходов сотрудников со светлым тоном кожи и 2 % проходов сотрудников с тёмным тоном кожи; в компании 900 и 300 таких сотрудников. Отдел кадров предлагает получить согласие сотрудников в дополнении к трудовому договору.
- 1) Сколько ошибочных отказов в день будет в каждой группе и сколько раз в месяц (20 рабочих дней) в среднем получит отказ один сотрудник каждой группы?
- 2) Какие требования к обработке биометрических данных нужно выполнить и можно ли опираться на согласие сотрудников?
- 3) Запускать ли систему и на каких условиях?
Рубрика вопроса.
- Правильность (40 баллов): 18 ошибочных отказов в день в первой группе (3 600 проходов x 0,5 %) и 24 во второй (1 200 x 2 %); 0,4 и 1,6 отказа на сотрудника в месяц, то есть в 4 раза чаще; вторая группа - 25 % сотрудников и 57 % отказов. Биометрические данные для идентификации отнесены к особой категории. Объяснено, почему согласие работника обычно не считается свободным и почему без равноценной альтернативы (пропуска) на него нельзя опираться. Названы оценка воздействия до запуска, место и срок хранения шаблонов, их удаление при увольнении, запрет поставщику использовать данные для обучения.
- Обоснование (25 баллов): решение следует из цифр и из соразмерности: пропуска уже решают задачу, поэтому более вмешательный способ требует отдельного обоснования. Засчитывается и отказ от запуска, и добровольный режим с пропуском как альтернативой, если названы условия, например проверка на сотрудниках компании и допустимая разница долей отказов между группами.
- Риски и ограничения (20 баллов): дискриминационный эффект для второй группы; утечку шаблона нельзя исправить сменой пароля; использование системы для учёта рабочего времени без новой оценки; данные поставщика получены не на сотрудниках компании; сверка лица со всей базой (1:N) рискованнее, чем сверка с шаблоном на карте сотрудника (1:1).
- Ясность (15 баллов): ответ разбит на пункты, выводы и цифры названы явно, нет лишнего текста. Грамматика и стиль баллы не снижают, если смысл понятен.
- Ответ, в котором расчёт или вывод не опирается на цифры своего задания, получает по правильности не больше 19 баллов, даже если общие рассуждения верны.
Кейс (раздел S2, 25 минут). Сервис доставки продуктов получает 90 000 заявок в месяц на возврат денег за испорченный товар, средняя сумма возврата $18. Сейчас каждую заявку проверяет сотрудник, проверка одной заявки стоит $1,50. Компания хочет запустить модель, которая по фотографии товара и истории заказов клиента сама одобряет 70 % заявок, отклоняет 10 % и передаёт сотруднику 20 %. На проверочной выборке из 2 000 заявок, которые затем разобрали сотрудники, 15 % автоматических отказов оказались обоснованными заявками, 4 % автоматических одобрений - мошенническими. Модель распознавания изображений предоставляет внешний поставщик: по его условиям фотографии хранятся 30 дней и могут использоваться для улучшения его моделей. На части фотографий видны лица, документы и адреса клиентов.
- 1) Рассчитайте в месяц: число ошибочных отказов, сумму выплат по мошенническим заявкам и экономию на проверке по сравнению с текущим порядком.
- 2) Можно ли оставить автоматические отказы? Предложите порядок контроля человеком, посчитайте нагрузку на сотрудников и экономию при этом порядке.
- 3) Какие условия по фотографиям и данным клиентов вы поставите поставщику и своей команде?
- 4) Запускать ли модель и на каких условиях? Назовите метрики мониторинга с порогами.
Рубрика кейса.
- Правильность (40 баллов: п. 1 - 12, п. 2 - 10, п. 3 - 9, п. 4 - 9). П. 1: 9 000 автоматических отказов, из них 1 350 ошибочных, клиентам не выплачено $24 300; 63 000 автоматических одобрений, из них 2 520 мошеннических, $45 360; проверка сейчас стоит $135 000, с моделью $27 000, экономия $108 000. П. 2: если все отказы передать сотрудникам, они проверяют 27 000 заявок (30 % от нынешних), проверка стоит $40 500, экономия $94 500; дополнительные $13 500 в месяц - это $10 на каждый предотвращённый ошибочный отказ. П. 3: инструкция снимать только товар, обрезка или размытие лиц и документов до передачи поставщику, запрет поставщику обучаться на фотографиях, срок хранения у поставщика и у компании, места обработки и субподрядчики. П. 4: решение с условиями, например пилот на части заявок и остановка автоматических решений при превышении порога.
- Обоснование (25 баллов): решение по автоматическим отказам опирается на долю ошибок 15 % и на то, что отказ затрагивает право клиента на возврат; выбранный порядок контроля сравнён с другим вариантом по стоимости; учтено, что экономия ($94 500) больше выплат по мошенническим одобрениям ($45 360), но уровень мошенничества, который пропускают сотрудники сейчас, нужно измерить.
- Риски и ограничения (20 баллов): сообщение клиенту об автоматическом решении и право на пересмотр человеком; проверка ошибок по группам клиентов (новые и постоянные, районы доставки); метрики с порогами: доля ошибочных отказов в еженедельной выборке, доля мошенничества в случайной выборке одобрений, доля обжалований и отменённых решений, сдвиг доли одобрений; смена версии модели у поставщика.
- Ясность (15 баллов): ответ разбит на пункты, выводы и цифры названы явно, нет лишнего текста. Грамматика и стиль баллы не снижают, если смысл понятен.
- Общий ответ без расчёта по цифрам этого кейса и без выбора между вариантами получает по правильности не больше 19 баллов, по обоснованию не больше 10.
06. Рубрика оценки
Каждое задание оценивается по четырём критериям, итог переводится в 100 баллов с учётом веса раздела.
- Правильность решения - 40 %: расчёт и вывод по цифрам и обстоятельствам своего задания.
- Обоснование решений - 25 %: почему выбран этот вариант, а не другой, с опорой на цифры и обстоятельства задания.
- Учёт рисков и ограничений - 20 %: последствия для людей, данные, поставщики, что может пойти не так после запуска.
- Ясность ответа - 15 %: структура и точность формулировок. Грамматика и стиль баллы не снижают, если смысл понятен.
Ссылка на норму без применения к ситуации баллов не добавляет. Ссылка на другую рамку или закон засчитывается так же, как ссылка на GDPR, CCPA/CPRA или EU AI Act, если требование названо верно.
07. Результат и сертификат
- Проходной балл - 70 из 100.
- Результат за 5 рабочих дней. Сдавшие получают сертификат IAE Certified Professional с направлением на 3 года, баллы по разделам в отдельной справке.
- В сертификате и в публичном реестре IAE указаны направление AI Governance and Data Protection, программа IAE-EXAM-AI и её версия, номер сертификата и срок действия.
- Сертификат подтверждает результат экзамена. Он не является лицензией, юридической квалификацией или подтверждением того, что организация соблюдает требования закона.
- Пересдача через 30 дней после первой неудачной попытки и через 60 после второй, не больше 3 попыток за 12 месяцев.
- Полные условия: страница «Условия экзамена».
- Программу пересматривает Аттестационный совет не реже раза в год; при изменении справочных рамок обновляются задания.
08. Что не входит в экзамен?
- Номера статей, дословные формулировки и даты вступления норм в силу; право отдельной страны и судебная практика.
- Юридическая квалификация и составление юридических документов: договор с поставщиком оценивается по условиям и рискам, а не по юридической технике.
- Написание кода, обучение и настройка моделей: нужны расчёты по готовым цифрам, а не программирование.
- Техническая настройка средств защиты, криптография, тестирование на проникновение.
- Процедуры сертификационного аудита по стандартам систем менеджмента.
- Подробные отраслевые требования (медицинские изделия, банковский надзор за моделями, страховое регулирование): отраслевые ситуации в заданиях есть, но ответ оценивается по общим принципам.
09. Подготовка
- Разберите примеры заданий и рубрику на этой странице.
- Справочные рамки на уровне принципов: GDPR (правовые основания, права субъектов данных, оценка воздействия, уведомление о нарушениях, трансграничная передача), CCPA/CPRA (права потребителей, отказ от продажи и передачи данных), EU AI Act (классы риска, обязанности поставщика и пользователя, контроль человеком, прозрачность). Как образцы системы управления рисками ИИ полезны NIST AI RMF и ISO/IEC 42001.
- Расчёты, которые встречаются в заданиях: доли отбора и их соотношение между группами; доли ложных отказов и ложных срабатываний по группам; 95-процентный доверительный интервал доли и нужный объём выборки (n = 1,96² x p x (1 - p) / e²); сроки в часах и днях от момента, когда компании стало известно о событии; стоимость и трудозатраты (число случаев x время x ставка). Для расчётов достаточно калькулятора.
- Ответ стройте так: расчёт по своим цифрам, решение, условия, риски. Общие положения без цифр задания получают по правильности не больше 19 баллов из 40.
- Пробный экзамен на сайте даёт задания того же формата из отдельного набора, на экзамене они не повторяются.
- На экзамене можно пользоваться справочниками. Ответ вы пишете сами: текст из ИИ-сервисов и помощь других людей условия экзамена запрещают.
Экзамен
Запишитесь на экзамен
Анкета занимает 15 минут. Решение о допуске за 1 рабочий день.

