Сначала сохраняют исходное утверждение
Проверяемая запись должна позволять понять событие, срок и условие, при котором прогноз считается выполненным. Предсказание изменения вообще оставляет слишком много свободы для последующего толкования. Если после события к нему добавляют подходящее уточнение, это уже другая формулировка. Для старого текста важно установить, какая версия действительно существовала до результата. Критерии, придуманные исследователем сегодня, тоже нужно обозначать как новые. Нельзя незаметно приписать их первоначальному автору или представить нынешнюю интерпретацию как заранее объявленное правило проверки.
Полный список меняет впечатление
В учебном журнале было шесть конкретных предсказаний. По трём событие произошло в указанный срок, по двум не произошло, а по одному пока нет надёжной записи результата. Если показать только первые три, читатель увидит исключительно попадания. Но журнал содержит ещё две неудачи и одну неопределённость. Среди пяти проверенных пунктов подтверждены три, то есть шестьдесят процентов. Во всём списке пока подтверждена половина. Эти числа отвечают на разные вопросы, поэтому рядом обязательно указывают знаменатель и судьбу неизвестного пункта. Ни одно число здесь само по себе не доказывает устойчивую способность предсказывать.
Отсутствующие сведения не превращаются в успех
Неизвестный результат нельзя молча записать в попадания или вычеркнуть так, будто предсказания не существовало. Нужна отдельная отметка о том, каких данных не хватает. Также полезно спросить, насколько удивителен сам результат: обещание регулярно происходящего события может часто совпадать с действительностью без специального метода. Для строгой оценки потребовалось бы заранее определить правила, сравнение и достаточный набор независимых наблюдений. Наш маленький журнал этого не обеспечивает. Он решает более простую задачу: делает видимыми все исходы и не позволяет подборке удачных случаев подменить полный разбор.
Попробуйте на практике
Составьте журнал из шести вымышленных прогнозов и проверьте, как меняется вывод при сокрытии неудобных строк. Работа выполняется только на бумаге.
- Пронумеруйте шесть строк. Укажите, что у каждого пункта заранее были определены событие и срок, а исходные записи сохранены без исправлений.
- Поставьте первые три отметки подтверждено, следующие две не подтверждено и последнюю недостаточно данных. Подсчитайте каждую группу отдельно.
- Посчитайте долю подтверждений среди пяти проверенных и среди всех шести. Подпишите, что означает каждый знаменатель, не выдавая неизвестный исход за установленный промах.
- Закройте две строки с промахами и сравните впечатление. Затем восстановите полный журнал и напишите вывод, который сохраняет неопределённость последнего пункта.
Как проверить результат. В корректном выводе остаются три подтверждения, два промаха и один неизвестный результат. Указаны обе доли с пояснениями, а небольшой вымышленный набор не объявлен доказательством точности астрологии или любого другого метода.
Частые вопросы
Можно ли проверять прогноз задним числом?
Да, если доступны исходная версия и независимые сведения о событиях. Нужно открыто описывать ограничения такой проверки и отличать первоначальные критерии от поздних уточнений.
Одного яркого совпадения совсем недостаточно?
Оно может быть поводом для вопроса, но не заменяет сравнения со всеми предсказаниями и обычной частотой события. Убедительность отдельной истории и доказанная точность метода относятся к разным уровням оценки.
Самостоятельный разбор темы. Содержание конкретной обучающей программы здесь не представлено.