Макс Базерман - Искусство замечать. Секреты наблюдательности истинных лидеров
По оценкам Лесли Джон и ее коллег, доля исследователей-психологов, которые используют спорные методы и подходы, разнится от 36 до 74 % для первых пяти пунктов, равна 13 % для девятого пункта и 9 % – для десятого. Даже если эти цифры завышены в два раза, использование исследователями недостоверных методов и подходов поражает. Мы приходим к очевидному выводу – велика вероятность того, что многие результаты, о которых сообщается в научной литературе и затем в СМИ, просто не соответствуют действительности.
Как мы докатились до такого состояния дел в общественных науках? Надо начать с того, что в последние годы конкуренция в науке неуклонно растет. Сегодня гораздо сложнее, чем 30 лет назад, когда я был младшим преподавателем, получить престижную должность в университете. Количество публикаций свежеиспеченных кандидатов наук, претендующих на свое место на рынке труда, огромно. И это отнюдь не странно. Ученые из лучших университетов имеют больше шансов привлекать внимание СМИ, получать высокие гонорары за выступления и выгодные контракты на книги – поэтому ставки на выигрыш хороших должностей высоки. В то же время редакторы журналов хотят публиковать «интересные» результаты. Для того чтобы напечатать больше статей на ограниченном количестве страниц, многие ведущие журналы сократили место, отведенное на публикацию подробностей методов исследования. Все эти факторы вместе мотивируют ученых использовать слишком много степеней свободы и не замечать нечестности своих поступков. Так происходило, по крайней мере, до тех пор, пока Симмонс, Джон и их коллеги не привлекли внимание общественности, наглядно продемонстрировав это в своих работах. Многие из нас, ученых, просто следовали советам своих учителей, предложениям редакторов журналов и стандартным схемам, принятым в нашей области. Мы шли по проторенной дорожке, и нам не приходило в голову остановиться и подумать о том, что мы сводим на нет сам смысл использования уровня значимости – критерия р < 0,05. Многих из нас эта прекрасная работа подтолкнула к тому, чтобы изменить свои методы и подходы, она показала, насколько важно описывать, как мы ведем свои лабораторные исследования.
Но не все психологи поддерживают мой энтузиазм по поводу реформирования исследовательских методов. Авторов этих двух работ широко критиковали за мелкие детали их системы. Например, доля ответивших на опрос, который провела Джон с коллегами, составила всего 36 %, что вызвало сомнения в репрезентативности выборки. Из-за этого может показаться, что результаты опроса были трагически завышены. Но стойте: кто с большей вероятностью заполнит анкету по исследовательской этике: ученые, соблюдающие ее правила, или те, кто их нарушает? Ответ на этот вопрос с достаточной очевидностью показывает, что оценки Джон и ее коллег, скорее, занижены.
Джон и ее команду также обвиняли в том, что они нарушили правила этики, чтобы привлечь к себе внимание, критиковали их и за то, что они не понимают основ исследовательских методов. Оба обвинения голословны: авторы работы – известные ученые, привыкшие быть в центре внимания, у всех у них длинные списки публикаций, демонстрирующие, что в методах они прекрасно разбираются. Критики подчеркивали те нередкие случаи, в которых спорные исследовательские методы и подходы вполне простительны, и обвиняли авторов в том, что те хотят разрушить социальную психологию как научную область. Они пытались оправдать нежелание предавать широкой огласке полученные выводы тем, что нельзя выносить сор из избы (то есть раскрывать секреты социальной психологии прессе). И, наконец, критики заявляли, что вместо претворения в жизнь необходимых реформ следует провести дополнительные исследования, особенно по проблеме степеней свободы. Наблюдая за всей этой возней, за попытками защититься и отложить насущные дела в долгий ящик, я с ужасом понял, что мои коллеги поступают в точности как представители американской табачной индустрии, как люди, отрицающие глобальное потепление, или как аудиторская отрасль – все они стараются противостоять позитивным изменениям в своих областях [13].
Проблема степеней свободы не ограничивается общественными науками и конкретными методами. Скорее, перед всеми учеными она ставит вопрос о том, как проводить исследования более честно. Ведь, говоря начистоту, мы выпустили некачественный продукт, и пресса жестко раскритиковала нас за это. Проблема степеней исследовательской свободы была объединена с проблемой фальсификации данных, а ведь это совершенно разные вещи. Но путаница налицо, и причина ее заключается в том, что психологи-исследователи закрывали глаза на внутренний конфликт интересов. Мы не смогли узаконить использование фальсифицированных данных, но сочли приемлемыми многие из методов и подходов, описанных Джон и ее коллегами. Это происходило по мере того, как учителя демонстрировали своим аспирантам, что многие из таких методов стандартны – что это всего лишь исследовательский эквивалент превышения скорости на пять километров в час.
Как найти решение
Давайте подумаем, какой из двух предложенных вариантов скорее приведет к успеху.
1. Аудиторам запретят устанавливать долгосрочные партнерские отношения с клиентами, предоставлять им неаудиторские услуги и переходить на работу в фирмы-клиенты.
2. После того как ряд факторов, заставляющих аудиторов идти навстречу своим клиентам, будет признан, в действие введут сложный набор законодательных и профессиональных стимулов для борьбы с порочным стремлением угодить клиентам.
Казалось бы, выбирать между этими двумя вариантами нечего: первый очевидно более разумен, чем второй. Однако многие десятилетия мы предпочитаем второй – по политическим причинам.
Хотя нет сомнения в том, что часть аудиторов осознаёт безнравственность своего поведения, большинство слишком часто совершает эгоистичные ошибки, которые заставляют их – как и многих из нас – видеть информацию в нужном свете. Из-за нередко субъективной оценки финансовых отчетов и близких отношений между фирмами и их клиентами даже самые честные аудиторы могут непроизвольно ошибаться в пользу клиента – маскируя его реальное финансовое положение и тем самым вводя в заблуждение инвесторов и даже менеджмент компании.
Шаги, которые значительно укрепят независимость аудиторов, представить себе на удивление просто.
1. Аудиторов следует нанимать на основе фиксированного контракта, условием которого является ротация как отдельных сотрудников, так и фирмы в целом. В период, определенный контрактом, клиенту нужно запрещать отказываться от услуг данной аудиторской фирмы. Кроме того, ему не должно быть разрешено привлекать того же аудитора по окончании срока действия договора (периода времени, определенного в законодательном порядке).
