Доверяй, но проверяй. Основные правила составления вопросов

В день знаний хотим поговорить с вами о том, как их проверять.

Проверка и отработка знаний — один из важнейших элементов обучающего продукта. В этом посте мы разберём основные требования к созданию вопросов. При верном проектировании они помогают поддержать внимание обучающегося, объективно оценить полученные им знания, а кроме того, придают учебному процессу увлекательность.

Для начала разберём типы тестов.

⏺ Тест на повторение содержит простые вопросы, ответы на которые были раскрыты в теоретической части. Он помогает обучающимся закрепить изученный материал и поддержать внимание во время обучения.

⏺ Обучающий тест содержит вопросы, которые заставляют задуматься. Ответы на них неочевидны, и в теоретической части их не раскрывали. При этом в обратной связи важно не только дать верный ответ, но и объяснить его. Этот тип теста позволяет включить мышление обучающегося для более глубокого осознания и в игровой форме познакомить его с интересными фактами.

⏺ Проверочный тест содержит много вопросов (10 и более) разной степени сложности. Они должны охватывать все рассмотренные темы. Проверочный тест позволяет оценить уровень остаточных знаний, а по итогам большой выборки понять, насколько качественно раскрыт тот или иной вопрос в теоретической части.

А теперь перейдём к основным правилам составления вопросов.

1️⃣ Контролируйте, относятся ли вопросы к области знаний, которую вы раскрываете в курсе? Действительно ли сотруднику важно знать ответ на этот вопрос? Проверяйте важные моменты, которые обучающийся должен запомнить, а не создавайте вопрос ради вопроса.

2️⃣ Используйте простые и лаконичные формулировки.

3️⃣ Следите за тем, чтобы вопрос и ответ трактовались однозначно.

4️⃣ Избегайте в вопросах формулировок: «что можно», «что важно», «на что стоит обращать внимание». «Можно», «возможно», «стоит» и т. д. — такие слова предполагают, что верными могут быть все ответы. Поэтому в вопросах должны быть формулировки вроде: «что необходимо», «что должно быть».

5️⃣ На успешность выполнения задания не должен влиять словарный запас или общая эрудиция. Поэтому заменяйте малораспространённые слова, если сотрудник не обязан их знать по корпоративным правилам.

6️⃣ Повторяющиеся в ответах слова отправляйте в вопрос. Например:

Что такое валидность теста?
• Показатель, отражающий качество формулировок вопросов теста
• Показатель, отражающий, насколько тест обладает различительной способностью
• Показатель, отражающий, насколько тест измеряет то, что должен измерять

В ответах повторяются слова «показатель» и «отражает». Перенесём их в вопрос:

Что отражает показатель «валидность теста»?
• Качество формулировок вопросов теста
• Насколько тест обладает различительной способностью
• Насколько тест измеряет то, что должен измерять

7️⃣ Задания должны содержать в себе сам вопрос, верные ответы (ключи) и неверные (дистракторы). Функция дистракторов (distract — отвлекать) — усложнять вопросы и «смущать» тех, кто недостаточно внимательно изучил материал.

Дистакторы не должны быть:
• очевидными или шуточными;
• частично верными или пересекающимися с другими ответами;
• явно меньшей или большей длины по сравнению с верными вариантами.

Кроме того, они не должны повторяться в других вопросах и биться простой логикой.
Пример плохого дистрактора:
Кто из перечисленных является героем произведения Джека Лондона?
• Евгений Онегин
• Мартин Иден
• Родион Раскольников
• Тарас Бульба

Дистракторы должны быть похожи на ключ! Поэтому в данном случае неверные варианты нужно заменить на героев зарубежных произведений.

8️⃣ Правильные ответы (ключи) не должны казаться более научными, выглядеть более развёрнутыми по сравнению с дистракторами, иметь подсказку в самом вопросе.

9️⃣ Исключайте такие варианты, как «все ответы верны» или «ни один из перечисленных».

🔟 Верные и неверные ответы располагайте в разных вопросах на разных местах. Не должно быть такого, что неверные ответы всегда первые, последние или находятся в центре.

Вебинар «Как вовлечь в обучение»

Чуть больше месяца назад на вебинаре вместе с коллегами обсудили:
- Как повысить вовлеченность при прохождении электронного обучения
- Как сделать обучение более применимым в ежедневной работе
- Как подбирать форматы подачи контента, чтобы курс был максимально эффективным

Для тех, кто пропустил, выкладываю полную запись вебинара. 📹

Кнут и пряник. Как убедить сотрудников учиться

Сегодня хочу рассказать о том, как продвигать дистанционное обучение среди сотрудников и мотивировать их на прохождение курсов.

Когда я выстраивал с нуля систему дистанционного обучения в крупном ретейлере, я выделил несколько приёмов и способов, которые работают лучше всего и которые сегодня мы предлагаем нашим клиентам.

Кнут

1️⃣ Формализуйте обучение. Обязательный курс будут проходить намного больше сотрудников, чем необязательный. Сделайте его изучение неотъемлемой частью программы адаптации, условием получение бонуса и т. д.

При стажировке замдиректоров магазинов отметка об изучении некоторых курсов была непременным условием, без этого сотрудник просто не допускался к аттестации.

2️⃣ Привлекайте руководителей. Обсудите с ними важность изучения определённых курсов и сроки. Пусть руководитель будет ответственным за обучение своих сотрудников. Мотивирующее слово начальника будет более действенным для сотрудника, чем призывы отдела обучения.

Ответственным за стажировку заместителя был сам директор. В его интересах было, чтобы подопечный прошёл обучение не просто для галочки, а запомнил учебный материал и успешно сдал аттестацию.

3️⃣ Ведите статистику. Никому не хочется быть отстающим, особенно если это видят твои коллеги и руководитель.

При подготовке кадрового резерва мы вели статистику по претендентам: Петров прошёл 6 из 7 курсов, а Васечкин только 1. В группе, где все борются за повышение, это работало отлично. Можно также вести ежемесячную статистику по отделам, информировать руководителя и т. д.

Пряник

1️⃣ Настройте email-рассылки. Раскройте в письме о назначении курса его важность для конечного пользователя; расскажите, как это пригодится ему в работе, сколько времени займёт и т. д. Письмо с содержанием «Вам назначен курс «Менеджмент», срок прохождения — 2 недели» не вызывает особого желания что-то изучать. Поработайте над оформлением рассылки, приложите скриншоты из курса и т. д.

2️⃣ Разработайте промоматериалы. Этот пункт не обязательный, но полезный. Вот отличные инструменты повышения интереса к вашему продукту.

• Постеры/баннеры — красочное рекламное описание вашего курса. Их можно вывесить на главной странице учебного портала, вложить в email-рассылку, опубликовать в корпоративной соцсети и т. д. Прикладываю несколько примеров в следующем сообщении.

• Трейлеры. Небольшой видеоролик с описанием курса и самыми яркими моментами из него. По ссылке вы можете посмотреть трейлер одного из welcome-курсов, который мы делали.
• Карточки курсов. Привлекающий аватар на учебном портале поможет выделить курс из массы других.

3️⃣ Включите отзывы и рейтинги курсов на учебном портале. Так сотрудники будут видеть наиболее интересные материалы при просмотре библиотеки обучения. Это работает скорее для необязательных программ.

4️⃣ Сделайте подборки курсов: рекомендации от руководителей и опытных сотрудников; подборки по определённым компетенциям. Так сотрудники узнают, в каком направлении двигаться, а вы проверите, насколько они уважают ваше мнение. 😀

Конечно, мы все понимаем, что, если сотруднику обучение не нужно и оно отвлекает его от рабочих/личных дел, проходить его он скорее всего не будет. Но это не значит, что мы не должны применять вышеуказанные приёмы, ведь есть те, кому это будет полезно.

Доверяй, но проверяй. Часть 2: виды проверочных заданий

На прошлой неделе мы разбирали типы тестов и основные правила составления вопросов. В этой статье углубимся в виды заданий, которые помогают проверить, закрепить знания и вовлечь участников в учебный процесс.

При этом важно не только правильно составить задания, подобрать наиболее подходящие форматы проверки знаний, но и интересно преподнести их. В новой статье подробно описали виды проверочных заданий и дополнили их примерами из наших курсов. А к некоторым упражнениям и мини-играм оставили ссылки, чтобы вы могли пройти их самостоятельно.

Приятного изучения!

Инструменты дизайна для недизайнеров

Icons8 - это целая экосистема с искусственным интеллектом, позволяющая создавать дизайн, без продвинутых навыков. Если вы разрабатываете курс без дизайнера, то какие-то из этих инструментов точно вам пригодятся:
1️⃣ Icons — библиотека иконок
2️⃣ Moose — фотосток
3️⃣ Fugue — музыкальный сток. Большое количество мелодий для фона ваших роликов или слайдов
4️⃣ Background Remover — сервис для удаления заднего фона с иллюстраций
5️⃣ Smart Upscaler — сервис для увеличения разрешения картинок (работает не то чтобы вау, но попробовать однозначно стоит)
6️⃣ Mega Creator — конструктор для создания коллажей из готовых 2D и 3D элементов
7️⃣ Lunacy — бесплатный графический редактор, с большим набором иконок, иллюстраций, ui-китов и прочих полезностей. Также он работает с Figma, Sketch и другим софтом.

Ну и напоследок - библиотека из 2,6+ миллионов сгенерированных ИИ лиц + возможность генерации в реальном времени. А вдруг?😀

Лучшее из обоих миров

Завтра в рамках конференции для методистов буду рассказывать про смешанное обучение. Обсудим когда стоит его применять и как правильно смешивать форматы. Поделюсь практическими рекомендациями и материалами для методистов. Мой блок с 18.35 до 19.00

Регистрация доступна по ссылке

Как технологии меняют обучение

На прошлой неделе прошла премия Digital Learning, на которой наш курс "Инструктаж по гражданской обороне и чрезвычайным ситуациям" для коллег из Газпромбанка вошел в число финалистов и взял приз зрительских симпатий. Такую непростую тему мы раскрыли с помощью глубокой методологической проработки, реалистичной 3D-анимации на Unreal Engine и программирования. Cтатья о курсе со всеми примерами доступна по ссылке.

Вместе с коллегами из СберУниверситета разобрали правила работы с предметным экспертом. Результатами делюсь в следующем посте.

ChatGPT для педагогических дизайнеров

Конечно, вы уже знакомы с ChatGPT — невероятной нейросетью, которая может написать диплом или сдать студенческий экзамен. Предлагаю рассмотреть полезные функции ChatGPT для методологов онлайн-курсов, которые мы выделили для себя.

1️⃣ Создание структуры курса
ChatGPT умеет использовать ссылки в качестве входных данных: просто дайте ему ссылку на исходную информацию, а он составит по ней структуру.

👱‍♂️‍ «Напиши структуру электронного учебного курса по теме N, используя этот контент в качестве входных данных. Курс предназначен для менеджеров по продажам, продолжительность не более 30 минут».

2️⃣ Создание проверочных заданий
Загрузите в чат сценарий вашего курса и попросите его составить проверочные задания с несколькими вариантами ответов. ChatGPT поддерживает продолжительную беседу, в которой вы можете просить его корректировать ответы.

3️⃣ Редактура текста
Во-первых, ChatGPT может выступить в качестве корректора и указать вам на ошибки и повторения в тексте, предлагая альтернативные варианты. Во-вторых, он может переписать текст в определённой форме, добавить юмора, адаптировать текст под целевую аудиторию или корпоративный стиль.

👱‍♂️‍ «Перефразируй это определение более простым языком: Динамические параметры основного тона собственных колебаний — это параметры зданий и сооружений, характеризующие изменения напряжённо-деформированного состояния несущих строительных конструкций, включающие в себя периоды и логарифмические декременты основного тона собственных колебаний, регистрируемые с помощью стационарно размещаемых на объекте средств измерения».

🤖 «Динамические параметры основного тона собственных колебаний — это особенности зданий и сооружений, которые показывают, как меняется состояние основных частей здания, которые несут основную нагрузку. Они включают в себя периоды и затухание колебаний основных частей здания, которые можно измерить при помощи специальных приборов, которые устанавливают на здании».

Используйте разные формулировки и выберите наиболее подходящий для вас результат.

4️⃣ Мозговой штурм
С помощью чата можно генерировать идеи и концепции на основе ваших запросов, обсуждать какие-то вопросы. Робомысли иногда могут натолкнуть на здравые идеи.

👱‍♂️‍ «Почему многие люди халатно относятся к установке и хранению паролей, хотя знают, к каким последствиям это может привести?»

🤖 «Существует несколько причин, почему многие люди халатно относятся к установке и хранению паролей, несмотря на знание о потенциальных последствиях:
1. Лёгкость запоминания. Многие люди стараются использовать один и тот же пароль для разных сервисов, чтобы иметь возможность запомнить его.
2. Лень. Некоторые люди просто ленятся создавать сложные пароли, поскольку это требует времени и усилий.
3. Недостаточное понимание рисков. Некоторые люди не понимают, насколько серьёзными могут быть последствия ненадёжной защиты своих аккаунтов».

5️⃣ Сторителлинг
Допустим, вы хотите разбавить свой курс мини-историей или сделать в нём сквозной кейс. Попросите чат придумать интересную историю, которая будет соответствовать теме обучения, и доведите её до идеального результата в процессе беседы.

6️⃣ Обобщение и расширение текста
Эксперт прислал вам в качестве фактуры 200-страничный PDF? Попросите ChatGPT прочитать его и выделить ключевые моменты.
И наоборот: если надо конкретизировать какую-то идею, сформулируйте её в чате и попросите GPT расписать более подробно.

✅ Хозяйке на заметку. Кажется, что возможности нейросети действительно безграничны, но необходимо помнить: это всего лишь инструмент в руках пользователя. Крайне важно экспертно оценивать ответы нейросети и выбирать именно то, что нужно для вашего проекта, а также перепроверять все факты.

@el_school