И вот хирургу задали вопрос о числе успешно проведенных операций: «8 из 10, – ответил он, – а могло быть и 9 из 11, после повторного вмешательства» (как видите, он учитывал пересаженную печень, а не пациентов). Иммунолог сказал: «7 из 10», – так как считал, что хирургу не следовало оперировать женщину с раком. Менеджеры уточнили: «6 из 10». Медсестры же, которые лучше всех знали пациентов, произнесли: «3 из 10». А теперь внимание, правильный ответ…
Где волшебный конверт с подсказкой для тех, кому придется принимать решение – продолжать ли пересадки?
В-третьих, для получения точных данных может требоваться время. Даже качественная информация не сразу «превращается в твердые факты». И не думайте, что стремительно растущая скорость передачи сведений что-то меняет: события и результаты сначала должны быть задокументированы как «факты», а затем агрегированы и собраны в отчеты, которым, возможно, еще некоторое время нужно «отлежаться».
В-четвертых, поразительное количество данных попросту не имеет достаточной надежности. Поднимите этот тяжкий камень точных фактов и посмотрите, что под ним шевелится.
Государственные организации обожают накапливать статистику: они собирают ее, суммируют, возводят в степень, извлекают кубический корень и строят чудесные диаграммы. Но важно помнить, что каждая цитируемая цифра поступает к ним от деревенского сплетника, который записывает все, что пожелает его левая пятка (высказывание приписывается сэру Джозии Стэмпу, 1928, цит. по [Мальц, 1997]).
Думаете, в больницах, где медсестры и доктора постоянно отвлекаются для решения административных вопросов, кто-то будет копаться в прошлом и выяснять, что именно записал тот сплетник? Более того, зафиксированные факты, на которые еще можно положиться в первоисточнике, легко теряют ценность при обобщении. Цифры округляются, нюансы теряются, да и ошибки случаются. Любой, кто когда-либо проводил количественные измерения, знает, насколько серьезными могут быть искажения, как умышленные, так и случайные.
Более того, итоги и выводы – совсем не одно и то же: успех зависит от того, что измеряется и каким образом. Помните историю Vioxx[40] и многих других препаратов, применение которых начиналось с хороших показателей? Вы ищете действительно хорошего хирурга для проведения трудной операции? Рискну предложить рассмотреть тех, у кого высок рейтинг смертельных исходов после операций, потому что, возможно, именно они имели дело с самыми трудными случаями
