Методология и ограничения

На этой странице объясняется, как рассчитывается статистика набора данных и что следует учитывать при интерпретации результатов.

Обзор

Статистика UniversalIQTest.com суммирует эффективность в большом наборе онлайн-данных. Цифры информативны: они показывают, кто проходил тест и какие баллы он набрал в этом формате. Они не являются клиническими диагнозами IQ и не отражают средние показатели населения.

Источники данных

Агрегаты рассчитываются на основе выполненных тестов IQ в базе данных UniversalIQTest.com. Исходные данные, используемые для разработки или демонстрации, исключены из всей публикуемой статистики. Диаграммы стран исключают пустые коды стран. Поля данных включают результаты тестов, затраченное время и демографические данные, о которых сообщают сами пользователи.

Демография и охват

• Возраст фиксируется по группам (молодежь, молодые люди, взрослые, пожилые люди) и используется для нормализации возраста.
• Пол в настоящее время указывается как мужской или женский, поэтому гендерная статистика охватывает только эти две категории.
• Уровень образования и область обучения оцениваются самостоятельно и стандартизируются в фиксированный набор категорий.
• Страна указывается самостоятельно и сопоставляется с кодами ISO, если они указаны.

Подсчет баллов и шкала IQ

Базовый результат теста основан на количестве правильных ответов, а затраченное время используется в качестве решающего фактора. Для опубликованной статистики мы преобразуем баллы в процентили, а затем сопоставляем эти процентили со стандартной шкалой IQ (среднее значение 100, стандартное отклонение 15). Это упрощает интерпретацию диаграмм, но не превращает онлайн-тест в клиническую оценку.

Валидация

Валидированные результаты проходят внутренние проверки времени, полноты и согласованности, а также базовое выявление злоупотреблений. Это улучшает качество данных: небрежные, неполные или автоматизированные отправки исключаются из валидированного представления. Это ярлык качества данных, а не психометрический сертификат: сам по себе он не доказывает, насколько надёжно тест измеряет когнитивные способности.

Точность измерения: что мы можем и что пока не можем показать

Качество данных и качество измерения — разные вещи. Наши проверки отсеивают неправдоподобные попытки, но сами по себе не доказывают надёжность теста. Публичный отчёт о качестве охватывал бы, среди прочего:

• Сложность и различающую способность заданий: насколько труден каждый вопрос и как хорошо он различает результаты.
• Внутреннюю согласованность: например, надёжность методом split-half по всем заданиям.
• Стабильность test-retest: насколько схожи результаты при повторном прохождении.
• Сравнения с признанными тестами IQ (конвергентная валидность).

Эти показатели мы пока не публикуем и планируем добавить их в публичный отчёт о качестве. Важно: больше участников делают наши процентильные нормы и групповые статистики более стабильными, но сами по себе не делают тест точнее. Ошибка измерения — свойство теста и его заданий, а не размера данных.

Статистика, которую мы публикуем

• Показатель группы переводит её средний процентильный ранг в выбранном представлении данных на шкалу типа IQ (100, стандартное отклонение 15). Это не среднее арифметическое индивидуальных показателей IQ.
• Интервалы используют приблизительный разброс, оценённый по межквартильному размаху и размеру выборки. Это ориентировочные диапазоны неопределённости вокруг преобразованного показателя группы, а не проверенные доверительные интервалы для среднего значения населения.
• Размеры выборки (N), подтвержденное количество и уровень проверки.
• Среднее время, необходимое для получения дополнительного контекста.

Дисперсия аппроксимируется по межквартильному диапазону (p25–p75), если полная дисперсия не сохранена. Доверительные интервалы являются приблизительными и их следует интерпретировать как погрешность среднего значения.

Корректировки и сравнения

На некоторых страницах представлены средства с поправкой на возраст. Эти средние значения по группам повторно взвешиваются до общего возрастного распределения, чтобы уменьшить влияние различий в возрастном составе. Другие диаграммы (например, распределения) остаются неизмененными и отражают необработанный набор данных.

Ограничения и интерпретация

• Демографические данные, сообщаемые самостоятельно, могут содержать ошибки или упущения.
• Размеры выборки варьируются в зависимости от сегмента, поэтому небольшие группы более нестабильны.
• Набор данных отражает посетителей UniversalIQTest.com и не является репрезентативной выборкой населения.
• Условия онлайн-тестирования (устройство, язык, отвлечение) могут повлиять на производительность.
• Различия между группами обычно невелики, а распределения сильно перекрываются.

Часто задаваемые вопросы