Как сохранить смысл сравнений при пересказе с ИИ

Сравнения в документах для ИИ предлагаем проверять по трём вопросам: что с чем сравнили, по какому признаку и куда направлено отношение. «Пакет А короче пакета Б» не означает «А лучше Б». На занятии команды можно собрать карту сравнений и проверить, не появился ли в пересказе новый критерий или общий победитель. Ниже — полный вымышленный комплект, варианты ответов и ключ ведущего.

Что получит участник занятия?

Результат упражнения — карта отношений между тремя учебными пакетами. Каждая запись сохраняет пару объектов, критерий, направление и условия сравнения. В конце участник объясняет, какие выводы поддерживает комплект, а каких сведений в нём нет. Выбирать настоящий продукт или рекомендовать программу обучения здесь не требуется.

В сравнении предложений поставщиков готовят данные для закупочного решения. В разборе сопоставимости результатов оценки ИИ сверяют основания уже написанных отчётов и процентов. Наша задача заканчивается раньше: сохранить смысл сравнительной фразы при пересказе. В комплекте нет поставщиков, испытаний моделей, цен или оценок эффективности.

Все пакеты, обозначения, свойства и ошибочные пересказы ниже придуманы редакцией AURMIND для обучения чтению. Это не результаты эксперимента и не ответы конкретной модели. Занятие можно провести на бумаге, а затем предложить ИИ составить черновик той же карты. Сравнивают черновик с выданным текстом, а не с ожиданиями о возможностях сервиса.

Факт. MAP 1.1 NIST AI RMF Playbook связывает понимание контекста с документированием назначения и условий применения. Здесь это общий ориентир: явно задать материал и границы проверки. NIST не устанавливает нашу карту сравнений и не служит источником учебного ключа.

AI RMF и Playbook предназначены для добровольного применения; FAQ NIST также описывает рамку как добровольную. Эти положения — внешние фактические утверждения статьи. Поля карты, учебный словарь и разбор вымышленных пересказов предложены редакцией.

Обучите команду ИИ на ваших рабочих задачах
Получите программу корпоративного обучения и обсудите задачи команды.
Получить программу и КП ↗

Расскажите, чему хотите научить команду. Обсудим задачи и формат обучения.

Сначала задайте точный смысл сравнений

Ведущий выдаёт словарь Д вместе с комплектом К. В этом занятии «короче» означает строго меньшее число страниц при одинаковом способе подсчёта; «длиннее» — строго большее. «Одинаковы по объёму» означает одинаковое число страниц. Это определения только для нашего закрытого примера, а не универсальное толкование рабочих документов.

Критерий «наличие ключа» отделён от объёма. Ключ — приложенный к учебному пакету набор ответов для ведущего. Слово «ключ» не означает пароль или технический токен. Его наличие не сообщает, сколько в пакете страниц, насколько он полезен или как быстро по нему учатся.

В Д также задано правило приёмки: пересказ должен сохранять всю сравнительную информацию той строки К, с которой его сопоставляют. Следствие из нескольких строк можно записать отдельно с указанием всех оснований. Его нельзя выдавать за буквальное содержание одной строки.

Равный объём не делает пакеты одинаковыми во всех отношениях.

Это различие понадобится для К.3: она устанавливает равенство по одному признаку. Чтобы утверждать одинаковое содержание, потребовались бы сведения о содержании. Ведущий не выдаёт их ни в словаре, ни в комплекте.

Карта сравнения: пара объектов, отдельный критерий и направление отношения; общий победитель не задан
Три поля читают вместе. Смена критерия превращает запись в другое утверждение.

Учебный комплект: четыре строки об одних пакетах

А, Б и В — три разных вымышленных учебных пакета. В К.1–К.3 рассматривают одну и ту же редакцию каждого пакета и один и тот же способ подсчёта страниц: считают все страницы пакета, включая приложения. В К.4 речь идёт об этих же редакциях. Никаких изменений редакций между строками нет.

АдресПолный текст строки
К.1Пакет А короче пакета Б по числу страниц.
К.2Пакет Б короче пакета В по числу страниц.
К.3Пакеты А и Б одинаковы по числу отдельных учебных заданий.
К.4В пакет А включён ключ для ведущего, в пакет Б ключ не включён. О наличии ключа в пакете В сведений нет.

К.3 вводит другой критерий. Количество заданий не является числом страниц. В словаре не задано правило «одно задание занимает одну страницу». Поэтому К.1 и К.3 совместимы: А может иметь меньше страниц при том же количестве заданий. Конкретную вёрстку или длину заданий комплект не описывает.

Задача Q: составьте карту сравнительных отношений и проверьте версии Р.1–Р.7 ниже. Сначала оцените, сохраняет ли версия содержание указанной строки. Затем отдельно выпишите допустимое следствие из К.1 и К.2. Не выбирайте лучший пакет и не устанавливайте порядок по признакам, для которых комплект не даёт отношения.

Не подставляйте числа.

Здесь достаточно отношений «короче», «одинаковы по числу заданий» и записей о наличии ключа. Если участник придумал, что у А десять страниц, попросите показать эти данные в К. Их нет. Подстановка может служить отдельной мысленной иллюстрацией, но не входит в ответ о выданных пакетах.

Заполните карту, сохраняя пару и критерий

Для каждой строки оставьте адрес и цитату. Рядом запишите объекты в порядке исходной фразы, критерий и отношение. Условия о редакциях и подсчёте страниц вынесите в общую шапку карты: они относятся к обеим строкам о страницах. Не распространяйте слово «страницы» на К.3, где явно названы задания.

ОснованиеПара и критерийЧто установленоЧего строка не устанавливает
К.1А / Б; число страницА короче БКонкретное число страниц и общий победитель
К.2Б / В; число страницБ короче ВНаличие ключа и пригодность пакетов
К.3А / Б; число заданийКоличество заданий одинаковоРавенство страниц или содержания
К.4А / Б; наличие ключаВ А ключ есть, в Б его нетНаличие ключа в В и качество обучения

К.4 не требует слов «лучше» или «хуже». Карта сохраняет две записи о наличии и отсутствии определённого приложения. Для общего предпочтения нужен критерий выбора, которого Q не задаёт. Если в будущем потребуется выбрать пакет для занятия, это станет другой задачей с требованиями к нему.

Мнение. Для разбора такого пересказа полезнее попросить участника назвать подменённое поле, чем просто сказать «ответ неверный». «Перевернул А и Б» и «заменил число страниц качеством» требуют разных исправлений.

Обратная формулировка может сохранить отношение. «Б длиннее А» равнозначно К.1 по нашему словарю: объекты поменялись местами вместе с направлением сравнения. А вот «Б короче А» разворачивает смысл. Поэтому механическая проверка порядка названий не заменяет чтение связки между ними.

Разберите семь пересказов

Ошибочные версии в таблице созданы редакцией специально. Не называйте их типичной частотой ошибок ИИ: настоящих запусков или измерений в комплекте нет. Участник сначала ставит собственную отметку, затем сверяет её с ключом.

Версия пересказаС чем сравниваемКлюч занятия
Р.1: Пакет Б длиннее пакета А по числу страниц.К.1Принимается: смена порядка объектов сопровождается обратным словом, отношение сохранено.
Р.2: Пакет Б короче пакета А по числу страниц.К.1Не принимается: направление перевёрнуто.
Р.3: Пакет А лучше пакета Б.К.1Не принимается: число страниц заменено неопределённым общим качеством.
Р.4: У пакетов А и Б одинаковое число страниц.К.3Не принимается: задания заменены страницами; к тому же это противоречит К.1.
Р.5: Пакеты А и Б одинаковы по содержанию.К.3Не принимается: равное количество заданий не устанавливает одинаковое содержание.
Р.6: В пакете В ключа нет.К.4Не принимается: отсутствие сведений о В заменено сведением об отсутствии ключа.
Р.7: У пакетов А и Б одинаковое число отдельных учебных заданий.К.3Принимается: объекты и критерий сохранены.

Р.3 не исправляется словом «вероятно». В комплекте нет оценки общего качества, даже осторожной. Для пересказа К.1 верните исходный критерий: «А короче Б по числу страниц». Если требуется обсуждать удобство короткого пакета, отметьте это как отдельный вопрос, а не как содержание источника.

У Р.5 сходство названий не означает сходства заданий.

Два комплекта могут иметь одинаковое количество элементов; о совпадении самих элементов К.3 молчит. Поэтому нельзя заменить «одинаковое число» на «одинаковые задания». Это ещё одна версия подмены критерия, которую удобно предложить участникам после основной таблицы.

Р.6 показывает другой дефект: третьему объекту приписали отрицательное свойство по аналогии со вторым. О Б известно, что ключ не включён. О В этого не сказано. Отсутствующее поле сохраняют как «сведений нет», не переносят в него значение соседней строки.

Какое следствие можно получить из двух строк?

Для числа страниц у нас есть одна цепочка: А короче Б, Б короче В. Словарь Д задаёт строгое сравнение количества страниц, а общая шапка К гарантирует те же редакции и подсчёт. Поэтому можно отдельно вывести: «А короче В по числу страниц». Основания — К.1 и К.2 вместе.

Это не цитата К.1.

В карте добавьте запись С.1 с пометкой «выведено из К.1 и К.2». Такое оформление сохраняет происхождение вывода. Другой проверяющий увидит, что его нужно сверять по двум отношениям и общим условиям, а не искать буквальные слова «А короче В» в первой строке.

Нельзя продолжить цепочку через К.3, объявив А и Б одинаковыми по страницам. Там другой критерий. Нельзя и распространить порядок А–Б–В на качество обучения, наличие ключа или число заданий в В: для этого нет нужных отношений.

По страницам А меньше Б, Б меньше В, значит А меньше В; по заданиям известна только равная пара А и Б, место В неизвестно
Цепочка страниц и равная пара по заданиям остаются разными записями. Отношение к В по числу заданий не установлено.

Если ведущий меняет условия упражнения, ключ тоже нужно проверить. Например, сравнение разных редакций Б в двух строках уже не даёт прежней общей цепочки. Это отдельный изменённый сценарий, не скрытое обстоятельство исходного К. В нашем комплекте редакции явно зафиксированы.

Вывод о страницах не становится рекомендацией брать А. Для этого потребовались бы требования будущего занятия и согласованный способ выбора. Q не ставит такую задачу. Краткая корректная запись С.1 полезнее придуманного решения за автора задания.

Запрос к ИИ для черновика карты

Передайте модели словарь Д, общую шапку К и все четыре строки. Затем добавьте Q и Р.1–Р.7. Без определения критериев команда «сравни пакеты» превращается в другую постановку: она уже не требует сохранить отношения исходника. Следующий запрос — редакционный образец для нашего занятия, а не обещание одинакового результата у любых сервисов.

Работай только со словарём Д и комплектом К ниже. Составь карту: адрес, точная цитата, пара объектов, критерий, направление или равенство, общие условия и неизвестные сведения. Проверь Р.1–Р.7 по указанным строкам: сохранился ли смысл и какое поле изменилось. Отдельно запиши следствие о страницах из К.1 и К.2, назови оба основания и отличи вывод от цитаты. Не выбирай лучший пакет, не придумывай количество страниц и не переноси отношения между критериями. О В по наличию ключа сохрани «сведений нет». Все материалы вымышлены для обучения.

Черновик модели сохраняют отдельно от ключа. Если проводите реальный запуск, зафиксируйте полный запрос и полный ответ: тогда участники смогут проверить конкретные изменения текста. Сам факт получения таблицы ещё ничего не говорит о правильности её отношений.

Рабочие внутренние документы для этого занятия не нужны. Использование реальных материалов и допустимый сервис определяет организация по своим правилам доступа и обращения с данными. Учебная карта не даёт разрешения загружать произвольный документ в любой инструмент.

Как принять результат и дать обратную связь?

Проверяющий получает Д, К, Q, исходную карту участника и его исправления. Сначала он сверяет объекты и критерий, затем направление, после этого — неизвестные сведения. У записи С.1 нужно два адреса основания и пометка о выводе. Ошибку фиксируют по конкретному полю, а не общей оценкой внимательности.

Ключ первой части: Р.1 и Р.7 сохраняют соответствующие строки. Р.2 меняет направление; Р.3 вводит общий критерий; Р.4 подменяет задания страницами; Р.5 подменяет количество содержанием; Р.6 приписывает неизвестному В отсутствие ключа. Допустимое отдельное следствие: А короче В по страницам при заданных общих условиях.

Попросите участника исправить каждую отклонённую версию и показать слова основания. Р.2 возвращает А в положение более короткого пакета; Р.3 — критерий страниц; Р.4 и Р.5 — именно количество отдельных заданий; Р.6 — неизвестность ключа в В. Ответ, переписанный по памяти из таблицы, ещё не показывает, что участник нашёл смысловую подмену.

Вторая проверка — обратная формулировка. Предложите объяснить, почему «Б длиннее А» допустимо, хотя названия стоят иначе. Ожидаемый разбор называет оба изменения: перестановку объектов и обратное направление. Он не опирается на одно совпавшее слово «страницы».

Это упражнение проверяет работу с данным комплектом, а не общую надёжность ИИ или профессиональную пригодность сотрудника. В нём нет основания оценивать эффективность программы, скорость чтения людей либо качество реальных учебных материалов.

Для обсуждения корпоративного обучения ИИ опишите задачу команды: какие сравнения она получает в документах и где пересказ теряет критерий. Начать разговор можно без передачи внутренних файлов.

Частые вопросы

Можно ли назвать А самым коротким?

Среди трёх заданных пакетов — да, как отдельный вывод по числу страниц из К.1 и К.2 при общих условиях. Уточните границу «среди А, Б и В». Слово «самый» без этой границы может создать впечатление сравнения с другими пакетами, которых в К нет.

Равное число заданий означает равную трудность?

Комплект этого не устанавливает. В К.3 указан только счёт заданий. Об их содержании, трудности и времени выполнения нет сведений; эти поля не заполняют по аналогии.

Нужно ли всегда сохранять порядок названий?

Нет. В Р.1 «Б длиннее А» сохраняет К.1 благодаря обратному направлению. Проверяйте отношение целиком. Переставить только названия, сохранив «короче», как в Р.2, означает поменять смысл.

Источники

  • NIST AI RMF Playbook — добровольное применение ресурса, не источник словаря Д.
  • NIST AI RMF FAQ — добровольный характер рамки.
  • NIST Playbook: MAP — MAP 1.1 о понимании и документировании контекста. Сравнения, карта и учебный ключ разработаны редакцией.

Международный спикер. Автор материалов о корпоративном обучении ИИ, внедрении в рабочие процессы и безопасном использовании инструментов в команде.

Все материалы автора →

Читайте также

Обучите команду ИИ на ваших рабочих задачах

Напишите нам — разберём вашу задачу.

Обсудить обучение