Хуже того, многие финансовые организации издают ежегодные буклеты под названием "Прогнозы на 200* год" (вписать следующий год). Разумеется, им не приходит в голову проверить, сбываются ли их предвидения. Еще более глупы те, кто платит деньги за такие прогнозы, не проведя пары простых экспериментов (хотя они и просты, к ним редко прибегают на практике). Вот один элементарный эмпирический тест: сравним наше "светило экономики" с гипотетическим шофером (таким, как Михаил из главы i). Создайте некоего синтетического субъекта, который предсказывает последующее число, зная предыдущее (но не зная ничего другого). Затем вам нужно лишь сравнить допуски на ошибку "светила экономики" и нашего искусственного субъекта. К сожалению, зачарованные красивыми речами, мы забываем о необходимости таких экспериментов.
События необычайны
Проблема прогнозирования еще чуть сложнее. В основном это объясняется тем, что мы живем не в Среднестане, а в Крайнестане. Наши прогнозисты, может быть, умеют предсказывать рядовые явления, но не из ряда вон выходящие; тут они терпят сокрушительное фиаско. Достаточно упустить в долгосрочном прогнозе изменение процентной ставки с 6 процентов до i процента (как это произошло между 2ооо и 2оо1 годом), и уже никакие последующие расчеты не выправят суммарный результат. Важно не то, насколько редко мы ошибаемся, а какова суммарная погрешность.
А суммарная погрешность зависит в основном от больших неожиданностей, от открытия новых перспектив, тогда как составители экономических, финансовых и политических прогнозов не только закрывают на них глаза, но и стыдятся
сказать хоть что-то необычное своим клиентам. События же, как показывает опыт, почти всегда необычайны. Более того, прогнозисты от экономики, как мы очень скоро убедимся, гораздо ближе в своих догадках друг к другу, чем к реальному результату. Никто не хочет быть белой вороной.
Поскольку я занимался неформальными разысканиями для личной пользы и развлечения, а не для того, чтобы что-то публиковать, я воспользуюсь уже обработанными материалами других исследователей, которые героически перетерпели занудство издательского процесса. Удивительно, как мало сами специалисты задумываются о полезности своих профессий. Существует несколько — всего несколько — формальных исследований в трех областях: анализ надежности ценных бумаг, политология и экономика. В ближайшие годы, несомненно, их станет больше. А может быть, и не станет — вполне вероятно, что коллеги затравят авторов этих работ. Из почти миллиона изданных трудов по экономике, политике и финансам лишь в единицах делается попытка проверить эти знания на их прогностическую пригодность.
Стадный инстинкт
Несколько исследователей, изучив работу и самооценку аналитиков ценных бумаг, получили удивительные результаты, особенно в отношении эпистемической самонадеянности этих деятелей. Сравнивая их с метеорологами, прогнозирующими погоду, Тадеуш Тышка и Петр Зелонка констатируют, что аналитики предсказывают хуже, но при этом больше верят в собственное умение. Во всяком случае, им хватает апломба не снижать предела погрешности после откровенных провалов.
В июне прошлого года я жаловался Жан-Филиппу Булю, которого навещал в Париже, на дефицит подобных публи
каций. Этот человек с мальчишеской внешностью выглядит вдвое моложе меня, хотя на самом деле почти мой ровесник, каковой феномен я полушутя объясняю красотой физики. Собственно, он не совсем физик, а один из тех ученых, которые вслед за Бенуа Мандельбротом (положившим начало этому направлению в конце 1950-х годов) применяют методы статистической физики к экономическим переменным. Это сообщество не использует среднестанскую математику, так что их, похоже, интересует правда. Не вхожие в экономическую и финансовую элиту, они кормятся на физфаках и физматах и — довольно часто — в трейдерских фирмах (трейдеры редко нанимают экономистов для себя — чаще для того, чтобы они вешали лапшу на уши не столь продвинутым клиентам). Некоторые из них работают в социологии, снося враждебность "коренных". В отличие от экономистов, которые носят костюмы и громоздят теорию на теорию, они используют эмпирические методы наблюдения, а не кривую нормального распределения.
Булю показал мне удивительную исследовательскую работу, только что законченную его практикантом и уже принятую к публикации; в ней подробно рассматривались две тысячи предсказаний, сделанных аналитиками ценных бумаг. В работе наглядно показывалось, что эти брокер-аналитики не предсказывали ничего: наивный прогноз человека, просто переносящего цифры из истекшего периода в следующий, был бы немногим хуже. А ведь аналитики владеют информацией о заказах, грядущих контрактах и планируемых расходах и благодаря этим ценным знаниям вроде должны прогнозировать значительно лучше, чем наш наивный предсказатель, не располагающий никакой информацией, кроме прошлых данных. Хуже того, разрыв между предсказанными и реальными величинами был гораздо существенней, чем
между разными прогнозами, а значит, аналитиками руководил стадный инстинкт. Иначе прогнозы отстояли бы друг от друга настолько же, насколько они отстоят от реальности. Чтобы понять, как аналитикам удается оставаться в бизнесе и избегать серьезных нервных срывов (с потерей веса, неадекватным поведением или острым алкоголизмом), нам придется обратиться к работе психолога Филипа Тетлока.
Я был "почти"прав
Тетлок изучал проблему "экспертов" в политике и экономике. Он просил специалистов из разных областей оценить вероятность того, что в течение заданного временного периода (около пяти лет) произойдут определенные политические, экономические и военные события. На выходе он получил около двадцати семи тысяч предсказаний почти от трех сотен специалистов. Экономисты составляли около четверти выборки. Исследование показало, что эксперты далеко вышли за пределы своих допусков на ошибку. Обнаружилась и экспертная проблема: между результатами докторов наук и студентов не было разницы. Профессора, имеющие большой список публикаций, справлялись не лучше журналистов. Единственной закономерностью, которую обнаружил Тетлок, была обратная зависимость прогноза от репутации: обладатели громкого имени предсказывали хуже, чем те, кто им не обзавелся.
Но Тетлок ставил перед собой задачу не столько показать, чего реально стоят эксперты (хотя у него это замечательно получилось), сколько выяснить, почему до них никак не доходит, что они плохо справляются со своей работой, иными словами, как им удается "втирать себе очки". Ведь такая некомпетентность, судя по всему, как-то ими обосновывается,
