Оценка спикеров на конференции обычно выглядит так: через два дня после события участникам приходит письмо с анкетой на двадцать вопросов. Отвечают пять процентов, и это те, кому было очень хорошо или очень плохо. Организатор получает среднюю оценку 4,6 и не понимает, что с ней делать.
Проблема не в анкете, а в двух вещах: когда спрашивают и о чём. Ниже разбор, как собрать оценку, по которой можно принимать решения о программе следующего года.
Главное правило: спрашивать в зале
Оценка собирается, пока участник ещё сидит на месте и помнит доклад. Сразу после выступления, до перерыва. Один QR на экране, шкала, одно поле для комментария.
Разница в отклике не на проценты, а в разы: в зале отвечает половина, по почте через два дня отвечает каждый двадцатый. И отвечают разные люди: в зале обычное большинство, по почте только крайности.
О чём спрашивать
Вопрос «понравился ли доклад» бесполезен: он измеряет настроение, а не пользу. Полезный минимум это две оценки и один открытый вопрос.
Польза. «Насколько доклад был полезен для вашей работы» по шкале. Эта оценка отвечает на вопрос, звать ли спикера снова.
Подача. «Насколько понятно и интересно спикер рассказывал». Отделять подачу от пользы важно: сильный материал в слабой подаче чинится репетицией, слабый материал не чинится ничем.
Открытый вопрос. «Что вы заберёте с собой?» вместо «ваши замечания». Первый даёт содержательные ответы, второй собирает жалобы на кондиционер.
Дальше по желанию: оценка тайминга, соответствие доклада заявленной теме, вопрос «стоит ли звать спикера снова».
Какую шкалу выбрать
Пять звёзд. Привычно, но все ставят четыре и пять. Разброса почти нет, сравнивать спикеров трудно.
Шкала от 1 до 10. Даёт разброс, но участники тратят время на выбор между 7 и 8.
Ползунок. Удобен с телефона и даёт дробные значения, при этом не требует думать над цифрой: человек просто двигает палец.
Три кнопки. «Пойду ещё раз», «нормально», «не моё». Самый высокий отклик и самая грубая шкала. Хороший выбор для коротких форматов и мастер-классов.
Для конференции с десятком докладов берите одну шкалу на всё событие. Сравнивать спикеров можно только по одинаковой шкале, иначе цифры не складываются.
Когда спрашивать
Сразу после доклада, в зале. Основной сбор. Тридцать секунд, две оценки и одно поле.
В конце дня. Общая оценка события целиком: организация, площадка, программа.
Через неделю, точечно. Только если нужен развёрнутый отзыв для сайта или спонсора, и только у тех, кто оставил контакт.
Чего делать не стоит: присылать одну большую анкету по всем спикерам через несколько дней. К этому моменту доклады слиплись в один, и участник оценивает последний, который помнит.
Что делать с цифрами
Средняя оценка сама по себе ничего не говорит. Смотреть нужно на три вещи:
Разброс. Доклад со средней 4,5 и ровными оценками и доклад со средней 4,5, где половина поставила 5, а половина 3, это два разных случая. Второй спикер работает на узкую аудиторию, и его нужно ставить в профильную секцию, а не в общий зал.
Соотношение пользы и подачи. Польза высокая, подача низкая это кандидат на повтор после работы с подачей. Наоборот это развлечение, которое уместно в конце дня, но не в основной программе.
Открытые ответы. Там живут формулировки, которые потом идут в описание программы следующего года. Это ценнее средних значений.
И отдельная проверка: сколько человек в зале ответили. Если отклик ниже четверти зала, цифра описывает активное меньшинство, а не зал.
Как собрать это технически
Нужен экран с QR в конце доклада и короткая форма, которая открывается в браузере без приложения и регистрации. Участник сканирует, двигает ползунок, пишет строчку и возвращается к программе: тридцать секунд.
В QRACT анкета и опрос работают на бесплатном тарифе до 50 участников, выгрузка ответов в файл доступна на любом тарифе. Для конференции с несколькими залами удобнее разовый тариф на событие: там доступны все форматы и больше участников.
Частые вопросы
Когда собирать оценку докладов?
Сразу после выступления, пока участник в зале: отвечает примерно половина. Анкета через два дня собирает около пяти процентов, и это люди с крайними впечатлениями.
О чём спрашивать?
Две оценки и один открытый вопрос: насколько доклад был полезен, насколько понятно рассказывал спикер и что участник заберёт с собой. Вопрос «понравилось ли» измеряет настроение, а не пользу.
Что смотреть в результатах?
Разброс оценок, соотношение пользы и подачи, открытые ответы и долю ответивших. Средний балл сам по себе не говорит ничего.
