Обратная связь жюри: как написать полезный комментарий к проекту
Как жюри хакатона давать понятную обратную связь: связать наблюдение с критерием, отделить оценку от совета и предложить проверяемый следующий шаг.

Как жюри хакатона давать понятную обратную связь: связать наблюдение с критерием, отделить оценку от совета и предложить проверяемый следующий шаг.

«Интересная идея, нужно доработать» звучит доброжелательно, но команда не понимает, что делать. Полезный комментарий указывает, что судья увидел, как это связано с критерием и чего не хватило для вывода. Из него можно получить следующий шаг даже после неудачного выступления.
Обратная связь требует времени в плане судейства. Если оставить её на момент объявления результатов, комментарии будут короткими и неоднородными. Организатору стоит заранее определить формат, минимальное содержание и способ передачи командам.
Опишите конкретный фрагмент демо, материала или ответа. «Не показано, как пользователь исправляет ошибочный ввод» точнее, чем «непродуманный интерфейс». В первом случае команда может воспроизвести проблему. Во втором ей остаётся угадывать, что имелось в виду.
Не приписывайте авторам намерения. Судья может увидеть отсутствие проверки, но не знает, почему команда её пропустила. Формулировка «в материалах нет результата такого теста» корректнее, чем предположение о лени или невнимательности участников.
Если сведения неполные, обозначьте границу вывода. Например: по показанному сценарию нельзя оценить работу на другом формате данных. Это не доказывает, что поддержка отсутствует; это объясняет, чего жюри не смогло проверить.
Команда должна понимать, почему наблюдение влияет на оценку. Если критерий касается работоспособности, объясните, какой шаг не удалось выполнить. Если оценивается обоснованность проблемы, назовите недостающий источник или наблюдение.
Не вводите новые требования после сдачи. Судья может предложить коммерческое развитие учебному проекту, но не должен снижать балл за отсутствие продаж, если это не входило в критерии. Общую подготовку шкалы разбирает статья об оценке хакатона.
В руководстве MLH по планированию судейства предусмотрен инструктаж судей перед просмотром работ. Для своего события добавьте к нему разбор нескольких образцов комментариев, чтобы договориться о понятном уровне конкретности.
Чтобы у комментариев была общая основа, адаптируйте шаблон критериев Stavleak и согласуйте его с жюри до просмотра проектов.
Основание объясняет решение в текущем раунде. Совет предлагает возможную работу после него. Эти части связаны, но не равнозначны: хорошее предложение судьи не становится обязательным требованием к продукту.
Учебный пример основания: «В демо маршрут завершился на экране загрузки, поэтому обработку результата подтвердить не удалось». Возможный следующий шаг: «Запишите отдельный прогон с входным файлом и итоговым результатом, затем проверьте повторный запуск».
Если предложений несколько, выделите одно наиболее полезное для ближайшей проверки. Список из десяти новых функций может выглядеть содержательно и при этом увести команду от главного препятствия. Судья помогает выбрать направление, а решение о продолжении остаётся за авторами.
Похвала полезна, когда показывает, что стоит сохранить. Например: команда объяснила происхождение тестовых данных и показала ошибочный случай. Это понятное достижение, которое можно повторить в следующем проекте.
Не добавляйте положительную фразу механически перед каждым замечанием. Если существенный вывод состоит в недостатке доказательств, изложите его спокойно и уважительно. Искусственная последовательность комплимент, критика, комплимент часто делает основание оценки менее заметным.
Отмечайте работу, а не личные качества участников. «Хорошо видна связь задачи и сценария» помогает больше, чем «вы талантливые». Обратная связь не должна превращаться в характеристику человека по одному короткому выступлению.
Практический шаблон может содержать четыре поля:
Проверьте карточку на вымышленном проекте до события. Если судьи заполняют поля одинаковыми общими словами, упростите форму и покажите более конкретный пример. Длина комментария сама по себе не гарантирует пользы.
Укажите, к какой версии проекта и раунду относится комментарий. Если в финале команда показала доработку, замечание из предварительного этапа может уже не описывать текущее состояние. Не смешивайте эти записи в один безымянный список.
Организатор проверяет тон, понятность и отсутствие закрытых сведений, сохраняя смысл оценки. Если комментарий противоречит баллу, попросите судью уточнить основание до отправки. Команде полезно предложить использовать полученные наблюдения на ретроспективе и при планировании пилота.