Калибровочное ЧГК

Материал из Вики LessWrong.ru
Перейти к: навигация, поиск

Калибровочное ЧГК - командная игра, похожая на "Спортивное Что? Где? Когда?", но предлагающая командам отвечать на вопросы на оценку численных величин; при этом команды должны показать максимальную калибровку уверенности.

Правила

В игре участвуют команды (оптимальный размер - 4-6 человек), которые должны ответить на 20 вопросов, которые зачитываются ведущим. После того, как вопрос зачитан, командам дается одна минута для того, чтобы дать на него ответ. Каждый вопрос имеет формулировку вида "Каково значение величины X?" - например, "Каков размах крыльев Боинга-747 в метрах?" В качестве ответа команды должны дать два интервала значений, один из которых соответствует уверенности в 50%, второй - 90%. Например, "с вероятностью 90% размах крыльев Боинга-747 лежит в интервале от 5 до 200 метров" и "с вероятностью 50% - от 30 до 70 метров". Оглашение правильных ответов происходит только после того, как команды ответили на все вопросы. При этом подсчитывается, сколько правильных ответов команда дала в графе "50%", и сколько в графе "90%". Идеальным результатом является ровно 10 правильных ответов в первой и 18 во второй (при стандартном пуле в 20 вопросов).

Примеры вопросов

Вопросы должны быть такими, чтобы с большой вероятностью никто из игроков не знал точного ответа на них, но чтобы большинство могли представить себе о чем речь и оценить хотя бы порядок величины. Например:

  • "Сколько символов, считая пробелы и знаки препинания, содержится в английском оригинале первой главы Гарри Поттера и методов рационального мышления?"
  • "В каком году был получен патент на канцелярские скрепки?"
  • "Каково было водоизмещение знаменитого Титаника в тоннах?"

Оценка результатов

В самом простом варианте игра ведется на интерес, и результаты команды сравниваются "на глаз". Однако, для более точного подсчета результатов можно определять результат Брайера каждой из команд.

Дополнительные правила

Помимо основных правил по желанию можно добавлять следующие:

  • Для новичков в калибровке полезно вначале провести индивидуальный тур (на 10 или 20 вопросов), поскольку люди обычно слабо представляют, насколько плохо они откалиброваны; предварительный индивидуальный тур поможет им лучше оценить свою калибровку до того, как это повлияет на командный результат.
  • При небольшом числе участников можно играть одной командой.
  • Если игра ведется с подсчетом очков, то команды должны давать ответы централизованно (в оффлайн-игре - сдавая листки с ответами "ласточкам"); в противном случае будет достаточно записывать ответы в лист ответов команды, который остается на столе.

Польза от игры

Игра позволяет тренировать не только индивидуальный навык калибровки участников, но также и способность объединять знания нескольких участников, чтобы формировать коллективную оценку различных величин. Поскольку характер вопросов не предполагает прямое использование эрудиции участников, задача становится сложнее, чем простое суммирование знаний каждого из них.

Если кто-то из участников недостаточно хорошо понимает суть калибровки, то обычно в процессе игры товарищи по команде довольно хорошо объясняют ее суть, прямо на примерах.

Статьи по теме

См. также