Сохраните правильный знаменатель
Среди двенадцати ответивших удовлетворены двенадцать, поэтому доля в этой группе равна ста процентам. Но итоговый ответ получен лишь от половины первоначальной группы. Про остальных двенадцать в условии ничего не известно. Нельзя автоматически считать их ни довольными, ни недовольными. Также нельзя переносить сто процентов на всех начавших. Правильный вывод одновременно сохраняет обе части: все ответившие выразили удовлетворённость, а сведения получены только от двенадцати из двадцати четырёх человек.
Выбывание может менять состав наблюдаемой группы
Люди прекращают участие по разным причинам: нехватка времени, неудобство процесса, отсутствие интереса, неприятные ощущения или обстоятельства, не связанные с упражнениями. В нашем примере причины не заданы. Поэтому нельзя утверждать, что ушли исключительно недовольные или, наоборот, уже получившие желаемое. Однако отсутствие их итоговых данных ограничивает общий вывод. Оставшаяся группа может отличаться от начальной. Важно искать описание выбывания и не превращать неизвестные исходы в удобное объяснение успеха либо неудачи метода.
Удовлетворённость и изменение внешности измеряют по-разному
Ответ о довольстве описывает субъективную оценку. Он сам по себе не устанавливает изменение объёма тканей, состояние кожи или долговременность результата. Даже оценки фотографий имеют своё назначение и условия проведения. Из одного вида измерения нельзя незаметно получить все остальные. Для обещания конкретного эффекта требуется информация именно об этом эффекте, способе его оценки и сроке наблюдения. В нашем условии есть только ответ на вопрос об удовлетворённости, поэтому вывод о доказанном омоложении выходил бы за пределы данных.
Сравнение до и после ещё не выделяет причину
Если за время наблюдения что-то изменилось, это не доказывает, что единственной причиной стали упражнения. На оценку могли влиять ожидания и другие изменения, а без подходящего сравнения их вклад трудно отделить. Контрольная группа помогает исследовать такой вопрос, хотя её наличие само по себе не делает любое исследование безупречным. Ограничения данных не доказывают автоматически бесполезность метода. Они показывают, насколько осторожным должен быть вывод. Отзывы могут описывать личный опыт, но не заменяют проверку конкретных обещаний для всех людей.
Попробуйте на практике
Разберите вымышленный итог опроса на бумаге, не выполняя упражнения для лица и не оценивая собственную внешность.
- Запишите двадцать четыре начавших, двенадцать ответивших в конце и двенадцать удовлетворённых среди ответивших. Для остальных обозначьте отсутствие данных, не присваивая им положительный или отрицательный исход.
- Посчитайте долю довольных среди ответивших и долю людей с известным итоговым ответом среди всех начавших. Получатся сто процентов и пятьдесят процентов, но это разные показатели.
- Составьте список того, что условие не измеряет: объективные изменения внешности, длительность эффекта, причины прекращения участия и различия с подходящей группой сравнения.
- Перепишите общий вывод так, чтобы он называл удовлетворённость именно ответивших и сохранял неизвестность остальных исходов. Уберите утверждение о доказанном эффекте для каждого человека.
Как проверить результат. Сто процентов относится только к двенадцати ответившим. Половина начальной группы имеет неизвестный итог; удовлетворённость не названа доказательством омоложения, безопасности или установленного причинного эффекта.
Частые вопросы
Если половина не ответила, значит упражнения точно не помогают?
Нет. Причины отсутствия ответов неизвестны. Это ограничение данных, а не готовое доказательство любого заранее выбранного вывода.
Положительные отзывы совсем бесполезны?
Они могут сообщать о личном опыте и удовлетворённости. Важно не приписывать им способность самостоятельно доказывать конкретные изменения, их причину и применимость ко всем людям.
Самостоятельный разбор темы. Содержание конкретной обучающей программы здесь не представлено.