Числа и единицы в документах для ИИ удобно проверять вместе с фразой, которая объясняет их смысл. Запись «12» не заменяет «не более 12 участников в каждой группе»: из неё исчезли объект, область действия и верхняя граница. На занятии команды предлагаем собрать паспорт числового выражения и сверить с ним черновую выгрузку. Вычислять суммы или оценивать качество модели в этом упражнении не требуется.
Что получит участник?
Результат — небольшая таблица: точная цитата, значение, единица, объект, область и вид ограничения. По ней другой человек сможет установить, что именно потерялось при переносе числа. Исходное выражение остаётся рядом с разложением на поля, поэтому спор можно вернуть к конкретным словам.
В проверке расчётов нейросети единицы и период задают условия для последующего пересчёта формул. Здесь вся задача заканчивается раньше: мы проверяем смысловую сохранность извлечённой записи, не получая нового количественного результата. В статье о сопоставимости результатов оценки сравнивают уже составленные отчёты и основания процентов. В нашем комплекте нет процентов, испытаний или сравнения систем.
Все документы, числа и ошибочные ответы ниже вымышлены редакцией AURMIND. Это открытый учебный материал, а не клиентский кейс, фактическая загрузка команды или замер поведения языковой модели. Его можно разобрать на бумаге. Числа из примера не являются рекомендацией по размеру группы, длительности занятия или вместимости помещения.
Факт. MAP 1.1 NIST AI RMF Playbook связывает понимание контекста с документированием назначения, условий применения, соответствующих норм и ожиданий. Здесь это общий ориентир: прежде чем принимать результат, явно определить, какой материал и какую задачу проверяем. NIST не устанавливает предложенную ниже таблицу числовых выражений.
AI RMF и Playbook предназначены для добровольного применения; FAQ NIST также подтверждает добровольность рамки. Эти положения — единственные внешние фактические утверждения статьи. Состав полей, вымышленный комплект и порядок занятия предложены редакцией.
Мнение. Для такого упражнения лучше получить одну запись с сохранённым «не более», чем аккуратный столбец чисел, в котором ограничение незаметно превратилось в наблюдение. Проверяем не красоту выгрузки, а соответствие её смысла исходнику.
Расскажите, чему хотите научить команду. Обсудим задачи и формат обучения.
Сначала договоритесь о формате паспорта
Оставьте отдельное поле для исходной цитаты. В соседние поля вынесите числовую запись, единицу, объект, область действия и характер утверждения. Под областью в этом занятии понимаем то, к чему относится запись: каждую группу, одно занятие или весь комплект. Если в тексте есть календарный период, его сохраняют отдельным полем; отсутствие периода отмечают явно.
Не угадывайте недостающее.
Числовая запись — это буквальная форма из источника. В задании не нужно менять «не более 12» на «12», минуты на часы или словесную запись на цифровую. Разделение значения и ограничения удобно для сверки, но оно не должно уничтожать оригинал. Поэтому у записи одновременно есть цитата и разобранные поля.
Характер утверждения отвечает на вопрос, что источник говорит о числе: это верхний предел, точная заданная величина или сведения о фактическом количестве? В нашем комплекте категории заданы для упражнения; они не объявляются исчерпывающей классификацией любых документов. Если встретится выражение, которое не подходит под них, сохраните его словами и обсудите формат с ведущим.
Не соединяйте единицу и объект по привычке. В фразе «продолжительность занятия — 40 минут» минуты называют единицу времени, а занятие — объект, о котором сообщают длительность. В фразе «в комплект входят 3 карточки» объектом счёта служат карточки. Удобство формы не даёт права заменить их участниками или занятиями.
Учебный комплект: три фрагмента и один вопрос
Ведущий выдаёт документ Д редакции 1 целиком. Других сведений о группах, занятиях и комплектах в первой выдаче нет. Все три пункта независимы: связь между числом групп и количеством комплектов не установлена.
| Адрес | Точный текст документа Д |
|---|---|
| Д.1 | В каждой группе допускается не более 12 участников. Фактическое число участников каждой группы здесь не указано. |
| Д.2 | Для одного учебного занятия в этом примере задана продолжительность 40 минут. Количество занятий здесь не указано. |
| Д.3 | В один учебный комплект входят ровно 3 карточки. Количество комплектов здесь не указано. |
Задача Q: извлеките три числовых выражения так, чтобы по таблице можно было восстановить, о чём и в каких границах говорится в каждом пункте. Не рассчитывайте общий объём, не назначайте количество групп и не превращайте установленный предел в факт посещения.
Фраза «в этом примере задана» в Д.2 существенна. Мы фиксируем учебную вводную о длительности одного занятия. Она ничего не сообщает о фактическом времени проведения реального события. Аналогично «ровно 3» в Д.3 задаёт состав одного вымышленного комплекта, а не количество карточек во всей организации.
Сначала каждый участник заполняет таблицу самостоятельно. Затем сосед получает только документ Д и заполненный паспорт, чтобы проверить перенос. Ответ модели, если её используют, остаётся отдельным черновиком и не становится ключом занятия.
Как выглядит заполненный паспорт?
В таблице ниже поле «значение» отделено от ограничения намеренно. При передаче результата нужно сохранять оба поля; использовать один столбец значений как самостоятельную выгрузку нельзя.
| Запись | Значение и единица | Объект и область | Характер утверждения | Что не установлено |
|---|---|---|---|---|
| Ч1, Д.1 | 12 участников | Участники; каждая группа отдельно | Верхний предел: не более 12 | Фактическое число участников и число групп |
| Ч2, Д.2 | 40 минут | Продолжительность; одно учебное занятие в примере | Точная заданная длительность | Число занятий и фактическое время реальных событий |
| Ч3, Д.3 | 3 карточки | Карточки; один учебный комплект | Точный заданный состав: ровно 3 | Число комплектов и общее число карточек |
Для всех трёх записей календарный период не указан. Не ставьте в это поле «за день»: слово «каждой» в Д.1 относится к группе, а не к суткам. В Д.2 «одного» относится к занятию, не к календарному дню. Нужного периода нельзя получить, переименовав поле.
У Ч1 значение 12 не описывает фактическую посещаемость.
Источник допускает разные фактические количества в пределах своего правила, но не сообщает, какое из них было. В учебном ответе достаточно сохранить различие «предел установлен / факт не указан». Перечислять возможные размеры группы и выбирать наиболее вероятный не нужно.
Ч2 не даёт числа занятий. Ч3 не даёт числа комплектов. Даже если числа 40 и 3 стоят рядом в одном документе, из их соседства не следует, что на занятие нужен один комплект или что каждый участник получает три карточки. Эти связи в Д отсутствуют.
Именно область действия отличает запись «3 карточки в одном комплекте» от «3 карточки каждому участнику». Во второй фразе появился новый получатель и другое распределение. Сохранённая цифра не делает такой перенос верным.
Что поручить нейросети?
Передайте полный документ Д, вопрос Q и описание полей. Не заменяйте их просьбой «вытащи все цифры»: такая постановка в нашем занятии не требует сохранять смысловые ограничения. Ниже — редакционный вариант запроса, а не обещание одинакового результата в любом сервисе.
Прочитай только документ Д редакции 1. Для Д.1, Д.2 и Д.3 составь паспорт числового выражения: адрес, точная цитата, значение, единица, объект, область действия, характер утверждения, календарный период и что не установлено. Сохрани слова «не более», «одно» и «ровно» в цитатах и соответствующих полях. Не вычисляй итоги, не меняй единицы и не добавляй связи между группами, занятиями и комплектами. Отсутствующие сведения назови «не указано», не заменяй нулём. Отдели заданный предел от фактического количества. Все материалы вымышлены для обучения.
После запроса вставляют три полных пункта. Если проводите настоящий запуск, сохраните запрос, ответ и дату отдельно от ключа. Ошибочные варианты следующего раздела придуманы редакцией: приписывать их конкретной модели нельзя.
Реальные рабочие документы для занятия не нужны. Если позднее команда захочет применить метод к своим материалам, допустимый инструмент, передачу данных и круг доступа определяет организация. Проверенная таблица не даёт разрешения загружать источник в произвольный сервис.
Разберите пять ошибок переноса
О1: «В группе 12 участников». Цифра сохранена, но «допускается не более» исчезло. Черновик превратил нормативную вводную вымышленного документа в сообщение о составе группы. Исправление: «Для каждой группы установлен предел не более 12 участников; фактическое число не указано». Основание — оба предложения Д.1.
Здесь недостаточно дописать «примерно».
В исходнике нет приблизительного фактического количества. Такая правка заменит один придуманный смысл другим. Возвращаем именно установленный предел, а не степень уверенности автора черновика.
О2: «40 занятий». Число взято из Д.2, но минуты заменены занятиями. Правильная запись связывает 40 минут с продолжительностью одного учебного занятия. Число самих занятий неизвестно. Соседняя колонка «объект» помогает увидеть, где единица времени была подменена предметом счёта.
О3: «Каждому участнику выдают 3 карточки». Д.3 говорит о составе комплекта. В нём не указан ни получатель, ни порядок выдачи, ни количество комплектов на человека. В ответе следует вернуть «в один комплект входят ровно 3 карточки». Политику раздачи карточек обсуждают отдельно, если она потребуется другой задаче.
О4: «За день предусмотрено 40 минут обучения». В документе нет календарного периода и количества занятий за день. Д.2 задаёт длительность одного занятия в примере. Добавление «за день» меняет область действия; его нужно удалить, а поле периода оставить с отметкой «не указан».
О5: «Число комплектов — 0». В Д.3 оно не указано. Ноль утверждает конкретное количество, которого источник не сообщает. Исправление состоит в сохранении неизвестности, а не в поиске другого числа среди соседних пунктов.
Каждая ошибка имеет своё поле: характер утверждения, единица, область, период или отсутствие сведений. Поэтому просьба «проверь цифры» слишком узка для приёмки этого задания. Коллега может сверить все три цифровые записи и не заметить ни одной смысловой подмены.
Продолжение: новое сведение не меняет старый предел
После первой сдачи ведущий выдаёт дополнение У: «В группе Г по списку на момент учебной проверки указаны 9 участников. Других сведений дополнение не содержит». Г — одна из групп, на которые распространяется Д.1. В этом вымышленном комплекте список служит источником сведений о составе Г на указанный момент, а не доказательством фактического присутствия всех людей на занятии.
Добавьте запись Ч4: «9 участников; группа Г; количество по списку на момент учебной проверки; основание У». Ч1 остаётся прежней: предел не более 12 для каждой группы. Не исправляйте её значение на 9. Теперь есть две разные записи об одном объекте: правило и отдельное сведение о составе конкретной группы.
Точную календарную дату дополнение не называет. Сохраните его временную формулировку буквально. Нельзя незаметно подставить текущую дату публикации статьи или дату запуска модели — это разные сведения.
Ч2 и Ч3 не меняются. По-прежнему неизвестно, сколько занятий состоится и сколько комплектов подготовят. В У нет связи «одна группа — одно занятие» или «один человек — один комплект». Попытка получить общий объём карточек на основании нового числа участников выходит за Q.
Попросите участника объяснить, почему Ч1 и Ч4 могут одновременно остаться в таблице. Ожидаемое объяснение: одна запись задаёт предел, другая описывает список конкретной группы в определённый момент. Стирать предел после появления списка или называть число по списку установленной вместимостью нельзя.
Как принять результат занятия?
Проверяющий получает исходный документ Д, дополнение У, обе выдачи участника и черновик модели, если он был. Сначала он находит цитаты. Затем по каждой записи сверяет единицу, объект, область, характер утверждения и временное поле. Пустое поле не считается ошибкой само по себе: требуется посмотреть, были ли сведения в выданном материале.
Ключ первой выдачи: Ч1 — верхний предел для каждой группы, Ч2 — заданная длительность одного занятия, Ч3 — точный состав одного комплекта. Календарный период не указан нигде; фактический состав групп и количества занятий и комплектов не сообщены. После У появляется только Ч4 с числом по списку группы Г и буквальным указанием момента. Прежние три записи сохраняются.
Попросите исправить О1–О5 и назвать поле, в котором возникла подмена. Если участник только заменил фразу на правильную по памяти, предложите ему найти точные слова в Д. Адрес и цитата нужны для воспроизведения проверки другим человеком.
Не оценивайте по этому упражнению общую профессиональную пригодность сотрудника или надёжность ИИ. Оно показывает выполнение одного задания с известным ключом. Для занятия достаточно установить, сохранил ли участник смысл трёх выражений и отличил ли новый факт из У от старого предела.
Для обсуждения корпоративного обучения работе с ИИ опишите, какие сведения команда извлекает из документов и где теряет ограничения. Начать можно с описания задачи без передачи внутренних файлов.
Частые вопросы
Нужно ли переводить минуты в часы?
В Q — нет. Задание проверяет извлечение исходного выражения. Если нужна другая единица, поставьте отдельную задачу преобразования и сохраните исходную запись. Молчаливая замена единиц затруднит сверку с Д.2.
Можно ли оставить только столбец значений?
Для результата этого занятия — нет: он потеряет главное различие между пределом, длительностью и составом комплекта. Передавайте паспорт вместе с цитатой и областью действия. Если другой получатель требует сокращённую форму, сначала договоритесь, как она сохранит эти различия.
Значит ли число по списку, что все пришли?
В дополнении У такого утверждения нет. Оно сообщает состав списка Г на момент учебной проверки. Присутствие на занятии — отдельный вопрос, для которого в комплекте отсутствуют сведения.
Источники
- NIST AI RMF Playbook: MAP — MAP 1.1 о понимании и документировании контекста. Не источник учебных чисел и структуры паспорта.
- NIST AI RMF Playbook — добровольное применение ресурса.
- NIST AI Risk Management Framework FAQs — добровольность рамки. Метод занятия и все примеры разработаны редакцией.
