Сотрудники списывают через ChatGPT: как проверять реальные знания, а не копипаст

Чтобы сотрудники не списывали через ChatGPT, нужно не запрещать ИИ и не делать тесты сложнее, а перепроектировать саму логику оценки знаний: перейти от проверки воспроизведения информации к проверке применения знаний в реалистичных сценариях, где ИИ — разрешённый инструмент, а не скрытая угроза.

Сотрудники списывают через ChatGPT: как проверять реальные знания, а не копипаст

Чтобы сотрудники не списывали через ChatGPT, нужно не запрещать ИИ и не делать тесты сложнее, а перепроектировать саму логику оценки знаний: перейти от проверки воспроизведения информации к проверке применения знаний в реалистичных сценариях, где ИИ, разрешённый инструмент, а не скрытая угроза.

«У нас 100% прохождение теста. Все всё знают». «А продажи почему не растут?» «Ну, это другое».

Знакомая фраза? Тест с однозначными ответами сдаёт любой школьник с ChatGPT на телефоне. Руководитель радуется циферкам в отчёте. В реальности сотрудник понятия не имеет, что делать в нештатной ситуации.

Списать можно любой тест

Вы даёте сотруднику текстовый файл, он его открывает, параллельно открывает ChatGPT и просто копирует вопросы. Ответы на «какая температура хранения» или «перечислите три этапа» генерируются за секунду. Это не проверка знаний. Это проверка умения пользоваться поисковиком.

Причём сотрудник не считает это жульничеством. Он считает это эффективностью. «Зачем мне запоминать, если я за две секунды могу найти?» И он по-своему прав. Бизнес платит не за энциклопедичность, а за результат. Но когда наступает реальная ситуация, где нет доступа к интернету, телефона нет под рукой, а клиент стоит и ждёт ответ, начинаются проблемы.

Тест становится игрой в напёрстки. Вы проверяете не то, что нужно. Сотрудник умнеет в глазах системы, но клиент видит его реальную беспомощность. Чем проще и предсказуемее вопрос, тем легче его делегировать ИИ. Чем быстрее вы это осознаете, тем быстрее перестанете тратить время на оценку того, что не оценивается.

Усложнение тестов лишь развлекает ИИ

Первая реакция обычно: «Давайте сделаем вопросы сложнее». Добавляем ветвление, вложенные условия, запутанные формулировки. Вы тратите три часа на составление одного теста. Сотрудник тратит тридцать секунд на то, чтобы скормить его ChatGPT. Разница во времени колоссальная. ИИ не устаёт, не отвлекается, ему всё равно на хитросплетения.

Вы начинаете играть в игру, где правила диктует машина. Усложнение вопроса не увеличивает глубину проверки. Оно только увеличивает вашу затрату времени. Каждый новый уровень сложности, это новая порция контента, который нейросеть переварит с той же лёгкостью. Вы создаёте архитектурный шедевр, который никто не оценит, кроме самой нейросети.

Формулировка «объясните своими словами» тоже не панацея. ChatGPT отлично перефразирует. Он сделает это вежливо, развёрнуто, без ошибок. Вы даже не заметите подвоха. Единственное, чего вы добьётесь, так это того, что сотрудники перестанут даже открывать ваши материалы. Зачем читать, если можно мгновенно получить готовый ответ и сдать? Вы создаёте иллюзию обучения, а не само обучение.

Кейсовый развёрнутый ответ без эталона

Вот здесь происходит смена парадигмы. Задание на уникальную ситуацию внутри компании. Не «как оформить возврат по закону», а «клиент Иванов купил оборудование по старому прайсу, но новый прайс уже вступил. У нас такая внутренняя процедура согласования, а в договоре пункт 4.2 гласит вот это. Опишите последовательность ваших действий и с кем из конкретных людей вы свяжетесь».

ChatGPT не знает вашего внутреннего регламента, процедуры согласования и не знаком с конкретным договором и личностями. Он может сгенерировать общие фразы, но не точный алгоритм. Вы же, как проверяющий, сразу видите, знает человек контекст или выкручивается общими рассуждениями. Разница очевидна.

Разница в проверке между стандартным тестом и примером: * Стандартный тест: проверяет память на факты и умение пользоваться ИИ. Результат, игра в циферки. * Ответ без эталона: проверяет понимание внутренней логики и структуры компании. Результат, реальная готовность к действию.

Такой формат не требует усложнения правил. Вы просто задаёте вопрос, на который нет готового ответа в интернете. Он есть только в головах ваших опытных сотрудников и в документах компании. Сотрудник вынужден либо реально разобраться в процессе, либо провалиться. ИИ тут бессилен, так как его «знания» заканчиваются за пределами публичного доступа. Это и есть проверка на реальную компетенцию, а не на навыки копипаста.

Тест на «своих»: три вопроса, которые ChatGPT не сдаст

Когда вы видите в отчёте высокий процент прохождения, а на деле новичок не может объяснить, кому звонить при сбое поставки, вы понимаете: вас обвели вокруг пальца. Сотрудники не стали умнее, они просто научились копировать ответы нейросети быстрее, чем вы придумывали вопросы. И вы уже подозреваете, что каждый второй тест, это не проверка знаний, а проверка навыков гугления.

Хуже того: вы боитесь проверять глубже. Потому что если вскроется, что половина команды не знает базовых процедур, встанет вопрос не об обучении, а о найме. Проще делать вид, что всё нормально. Но именно этот страх идёт вам в минус. Когда вы закрываете глаза на списывание, вы не защищаете людей, вы консервируете их некомпетентность до первого реального инцидента.

Разрыв между формальной сдачей и реальным пониманием, это не особенность поколения Z. Это закономерность: чем легче получить ответ, тем меньше усилий человек вкладывает в запоминание. Психологи называют это эффектом когнитивной разгрузки: мозг отказывается хранить информацию, которая всегда под рукой. ChatGPT становится внешним жёстким диском, и знания просто не оседают в голове.

Решение не в том, чтобы запретить нейросети. Решение, нагрузить контекстом. Вот три практических шага, которые превратят любой тест из лёгкой добычи для ИИ в проверку реальной компетенции:

  1. Снимите шаблон ответа. Любой вопрос, на который есть один правильный ответ в интернете, это приглашение к списыванию. Вместо «Перечислите этапы возврата товара» спросите: «Опишите, как вы поступите, если клиент Петров вернул ноутбук через неделю, а в системе нет его заказа». ChatGPT не знает ваших внутренних кодов и конкретных людей, он напишет общие фразы, и вы это увидите.
  2. Добавьте условие из реальной жизни. Свяжите задачу с тем, что происходит в компании прямо сейчас. Например: «Вчера пришла поставка с браком 12%. Ваш начальник уехал в командировку до пятницы. Кого и в каком порядке вы известите, и какой документ подготовите в первую очередь?». Чем больше конкретных деталей (имена, даты, процедуры), тем сложнее нейросети подобрать готовую формулировку.
  3. Проверяйте логику, а не формулировку. Оцените не то, насколько красиво написан ответ, а то, насколько он применим к вашим рабочим процессам. Если человек пишет «свяжусь с клиентом», спросите «по какому каналу и в какое время по вашему регламенту?». Задача, заставить его применить внутренние правила, а не пересказать общие принципы.

Сотрудник, который реально знает процессы, ответит на такие вопросы без запинки. Тот, кто привык полагаться на нейросеть, выдаст веер общих рассуждений, и его не спасёт даже самая умная языковая модель. Задача таких тестов, не быть лёгкими, а выявлять тех, кто учится применять знания на деле. Чтобы автоматизировать эту проверку и встроить её в адаптацию, стоит использовать специализированные инструменты, например, карты знаний, которые фиксируют контекст компании и позволяют оценивать реальное понимание процессов.

Частые вопросы

Как отличить, сотрудник сам ответил на тест или списал через нейросеть?

Прямых признаков нет, но есть косвенные: идеально гладкий текст без специфического сленга компании, неестественно быстрая сдача сложных заданий и общие формулировки там, где требуются конкретные имена и процедуры. Лучший способ, заменить стандартные тесты на задачи с уникальным внутренним контекстом.

Какие форматы проверки знаний не поддаются списыванию через нейросети?

Максимально защищены форматы, требующие привязки к вашей компании: развёрнутый ответ на пример с упоминанием конкретных коллег и внутренних процедур, видеоответ с объяснением на камеру и диалоговый тренажёр с нелинейным сценарием. ИИ бессилен против реального контекста.

Что делать, если сотрудники перестали учиться, а только ищут готовые ответы для тестов?

Смените фокус с контроля прохождения на проверку применимости. Уберите закрытые тесты и поставьте задание, которое требует поиска информации в ваших внутренних регламентах или общения с реальным ментором. Оплачивайте не сданные тесты, а правильно решённые рабочие ситуации. Автоматизировать сбор таких контекстных заданий и отслеживание реального прогресса помогут карты знаний, основа продукта Атмагуру.

Посмотрите, какие функции нужны именно для вашей задачи

Читать дальше

Новое обновление Атмагуру: расширяем возможности работы с внешними пользователями

Новое обновление Атмагуру: расширяем возможности работы с внешними пользователями

Метки для внешних пользователей: автоматическое и ручное назначение Метки помогают группировать внешних пользователей по любым признакам: курсам, проектам, уровням подготовки. Тепе

Дмитрий Медведев
Когда увольняется ключевой сотрудник: как не потерять знания вместе с ним

Когда увольняется ключевой сотрудник: как не потерять знания вместе с ним

Когда увольняется ключевой сотрудник, компания теряет не просто человека, а неструктурированный опыт, который не был формализован в работающую систему обучения, — и единственный способ это предотвратить — внедрить программированное обучение, которое работает автономно, без участия HR.

Дмитрий Медведев