1

«Онлайновые данные идут вперекос»

Что не так с результатами Открытой лабораторной

Опубликовано: 02.04.2019


9 февраля в России и еще 29 странах прошла «Открытая лабораторная», или Лаба — научно-популярная акция, во время которой дети и взрослые проверили свои знания и интуицию в области естественных наук. На презентации результатов оказалось, что данные по онлайн-участникам не соответствуют реальной картине и для анализа их лучше не использовать. Организаторы объяснили, почему так произошло, и рассказали, как с помощью статистики удалось вычислить списывающих школьников и какое задание срезало 97% лаборантов.

Об онлайне и офлайне

Офлайн-акция собрала 25 тысяч человек. В онлайне на вопросы ответили в три раза больше: 75 тысяч, но в анализе результатов эти данные использовать не стали.

Научный редактор Лабы Владимир Губайловский, объясняет, что главное — это офлайн: «В онлайне любой может прийти и пройти пять раз. У нас такие были. Онлайновые данные идут вперекос, потому что люди проходят по много раз». Если лаборант регистрирует анкету, его повторные ответы можно отследить и отсечь. Но это делают не все — пройти задания лабораторной можно и анонимно.

«В онлайне любой может прийти и пройти пять раз. У нас такие были. Онлайновые данные идут вперекос, потому что люди проходят по много раз»

Собирается ли Открытая лабораторная ужесточить систему и ограничить количество попыток онлайн? Ответ организаторов — категорическое нет. «Цель не в том, чтобы проверить знания по биологии или физике, оставшиеся со школьной или университетской скамьи, — говорит основатель акции Роман Авдеев. — Цель — проверить критическое мышление, ведь ошибки часто встречаются на этапе прочтения задания. И, конечно, заинтересовать участников, побудить его полезть искать правильный ответ и узнать таким образом что-то новое».

О списывании

Средний балл офлайн-участников — 11,35 из 25 возможных. При этом в распределении баллов появились два аномальных пика: на 22 и на 24 баллах. По законам статистики, при нормальном распределении их быть не должно.

Разгадать секрет помогают анкетные данные. Пик на 22 баллах — это люди с высшим образованием и учеными степенями. Они ответили практически на все вопросы. А вот на 24 баллах собрались школьники. Владимир Губайловский объясняет, что, скорее всего, это те, кто подсмотрел правильные ответы в онлайне: «Задания открыли в 00 часов 9 февраля, так что можно было подсуетиться, пройти лабу онлайн и прийти на акцию подготовленным».

«Можно было подсуетиться, пройти лабу онлайн и прийти на акцию подготовленным»

Всего в Лабе было 25 заданий двух типов: 12 вопросов с вариантами ответа «да» / «нет» и 13 вопросов на выбор из 4 вариантов. Каждое задание оценивается в 1 балл.

Большинство участников честно пытались решить задания, — уверен Владимир: «Если бы все отвечали наугад, средний бал получился бы 9 с хвостиком». Но заметим, что средний балл 11,35 намного ближе к 9, чем к максимальным 25. С другой стороны, неоспоримое доказательство честности участников — вопрос про оловянную чуму (на картинке ниже). С ним справились всего 3% лаборантов. Если бы участники угадывали, по теории вероятности с правильным ответом повезло бы примерно четверти.

О вопросах

Кроме оловянной чумы, лаборантов подвела сверхпроводимость: 64% участников не знали, что электричество можно передавать по проводам без потерь.

В топ самых сложных также вошли вопросы о крутизне подъема метро (какой наибольший уклон пути способен преодолеть обычный рельсовый поезд метро?) и о количестве звезд, доступных для наблюдения телескопом. А самым запоминающимся для организаторов и участников, кажется, стал вопрос о русской водке: 53% участников ошибочно посчитали, что рецепт водки изобрел Менделеев.

Зато абсолютное большинство точно знает, что левитация— уже давно не фантастика, а кровь красная из-за того, что содержит железо.

О девочках и мальчиках

Задания Лабы прошли 45% мужчин и 55% женщин. Владимир Губайловский объясняет это тем, что девочки дисциплинированнее: «Им сказали идти, они идут». Девочек было не просто больше — впервые за историю акции они выбились в лидеры. В среднем, девочки решили на 10% больше заданий, чем мальчики.

60% участников Лабы — школьники. И этих 60 процентов 44% — старшеклассники. Самая большая доля участников акции — 16-17 лет. Средний возраст — 20 лет. Все цифры касаются только офлайн-участников.

«Цель не в том, чтобы проверить знания по биологии или физике, оставшиеся со школьной или университетской скамьи. Цель — проверить критическое мышление»

О городах

Открытая лабораторная прошла в 150 городах и задействовала 265 площадок. Офлайновой столицей Лабы стал Екатеринбург. На втором месте Москва, на третьем — Омск.

8% участников — не из России. Больше всего иностранных участников принес Казахстан, где было целых 4 площадки.Второе место заняла Индия с двумя площадками в крупнейших городах: Дели и Ченнаи.

«Открытая лабораторная» — это самая масштабная разовая научно-популярная акция в мире. В 2019 году награждена премией «За верность науке» в номинации «Прорыв года». Организатор акции — АНО «Лаборатория просветительских проектов»

Пройти задания и узнать правильные ответы можно на сайте Лаборатории openlaba.com.