Как видно из табл. 5.4, коэффициенты попадания в исследованиях, где классифицированием утверждений занимались эксперты, сопоставимы с коэффициентами точности, установленными в ходе исследований, где разделение утверждений на правдивые и ложные авторы доверили компьютеру. Надежным способом установления разницы экспертных и компьютерно-аналитических решений в процессе принятия решений является сопоставление в рамках одного исследования классификаций, составленных каждой из сторон. Единственным экспериментом, в котором проводилось такое сравнение, было исследование Фрая, Кнеллера и Манна (Vrij, Kneller & Mann, в печати). Эксперты продемонстрировали более высокий уровень узнавания правды (коэффициент попадания составил 80 и 53 % у экспертов и у компьютера соответственно, см. табл. 5.4), тогда как компьютер оказался более успешным в определении лжи (коэффициент попадания составил 60 и 80 % у экспертов и у компьютера соответственно). Различия в коэффициентах попадания между экспертами и компьютерной программой подтверждают идею о том, что, вынося свой вердикт, эксперты руководствуются не только оценками по КАУК, но и используют ту или иную систему присваивания критериям различного веса. Впрочем, процесс присвоения веса в целом не повышает уровень попадания.
Влияние внешних факторовУстановить природу влияния на свидетельские показания каждого из критериев, представленных в Проверочном листе, чрезвычайно сложно, если вообще возможно. Например, стиль проведения интервью нередко определяет объем информации, которую сообщает свидетель в своем рассказе. Однако это вовсе не означает, что стиль проведения какого-то конкретного интервью непременно отразится на сообщениях того или иного свидетеля. Но даже если это и произойдет, впоследствии мы не сможем установить, в чем именно заключалось это влияние. Иными словами, точно определить влияние каждого конкретного фактора на рассказ свидетеля мы не в силах — мы можем только его оценить. Очевидно, что некоторые из предложенных нами оценок могут оказаться ошибочными. К тому же не исключено, что показания свидетелей подвержены влиянию каких-либо неизвестных нам покуда факторов, которые не были упомянуты в Проверочном листе.
Оценки, полученные с помощью ОВУ, носят субъективный характерВсе, что мы здесь говорили об оценивании утверждений с помощью ОВУ, не оставляет ни малейших сомнений в том, что эта процедура носит субъективный характер. Это значит, что они в значительной степени зависят от того, какую интерпретацию в данном случае предложит тот или иной эксперт. Поэтому очень важно понимать, насколько схожие результаты получают разные эксперты при оценке одних и тех же утверждений. Если бы, проанализировав один и тот же материал, эксперты приходили к разным выводам, применение ОВУ было бы неуместным и, следовательно, неоправданным. Существует два типа соглашений между двумя экспертами, проводящими оценку. Во-первых, эксперты могут прийти к соглашению относительно суммарной оценки по методике КАУК по данному утверждению. Во-вторых, эксперты могут вырабатывать единое мнение по поводу наличия или отсутствия в утверждении каждого из выработанных критериев. Результаты исследований показали, что уровень согласия между экспертами по поводу общего показателя по КАУК, как правило, высок и вполне удовлетворителен. Вместе с тем уровень согласия между экспертами по каждому из критериев зачастую весьма низок.
Альтернативный способ оценки надежности заключается в том, чтобы предложить одному и тому же эксперту еще раз оценить утверждение по прошествии некоторого времени и проанализировать уровень сопоставимости этих оценок. Горовиц и его коллеги предложили экспертам проделать такую процедуру. В результате сложилась ситуация, аналогичная той, что была с оценками разных экспертов, — высокий уровень совпадений между оценками одного и того же эксперта наблюдался в тех случаях, когда предметом рассмотрения был общий суммарный показатель по КАУК, но когда исследователи попытались оценить выделенные критерии по отдельности, по некоторым из них уровень согласованности экспертных оценок оказался чрезвычайно низким.
По мнению Хёфера и Кёнкена (Htfer & KAmken, 1999), такой низкий уровень согласия между экспертами, участвовавшими в исследованиях с применением процедуры КАУК, можно объяснить слабой профессиональной подготовкой экспертов. Они разработали трехнедельную обучающую программу и представили результаты исследования, согласно которым после прохождения трехнедельной подготовки эксперты демонстрировали достаточно высокий уровень согласия, даже при рассмотрении оценок, полученных по отдельным критериям.
Однако до сих пор не было проведено ни одного исследования, направленного на изучение уровня согласия между оценками по ОВУ, — иными словами, которое бы объединяло показатель по КАУК с результатами применения Проверочного листа. Ламерс-Уинкелман (Lamers-Winkelman, 1995) полагает, что вполне вероятно, что далеко не всегда результат будет удовлетворительным. Кёнкен (немецкий профессор, специалист в области судебной психологии, нередко выступающий в Германии в качестве эксперта на судебных разбирательствах по уголовным делам) согласен с Ламерс-Уинкелман и считает, что причиной тому — Проверочный лист. Если в Германии двое экспертов, привлеченных к работе по уголовному делу, расходятся во мнениях по поводу достоверности того или иного утверждения, чаще всего они придерживаются разных точек зрения и относительно влияния внешних факторов на это утверждение (Kchnken, 1991, личное общение).
Непонятно, в каких случаях можно использовать этот методВ основу процедуры КАУК положена гипотеза Ундойча, которая гласит, что «утверждение, рожденное из воспоминаний о реально происшедших событиях, содержательно и качественно отличается от утверждения, основанного на фантазиях или домыслах». Тем не менее это всего лишь рабочая гипотеза, которая постулирует наличие определенных различий, не указывая, с чем, предположительно, они должны быть связаны (Sporer, 1991). При разработке процедуры КАУК авторы опирались на опыт специалистов, проводивших интервью с детьми, перенесшими сексуальное насилие, с тем чтобы ее применение обеспечило возможность оценить достоверность свидетельских показаний именно в таких обстоятельствах. Одно из безусловных достоинств любого теоретического подхода заключается в том, что он позволяет прогнозировать, в каких ситуациях допустимо применение какого-либо метода. Ввиду недостатка у ОВУ теоретического фундамента трудно сказать, в каких ситуациях его применение будет оправданным, и, как я уже говорил в настоящей главе, эксперты по КАУК до сих пор не пришли к единому мнению о том, в каких условиях следует применять этот метод. Что, по мнению окружающих, говорят правдивые свидетели.
Критерии КАУККакие же вербальные характеристики придают рассказу большую или меньшую достоверность в глазах свидетелей, не знакомых с литературой, посвященной специфике проведения процедуры КАУК? До сих пор этот вопрос затрагивался лишь в единичных научных работах. Насколько мне известно, только в двух (практически идентичных) исследованиях авторы ставили перед собой задачу выявить установки наблюдателей относительно взаимосвязи между критериями КАУК и достоверностью сообщаемой информации. Особенности этих исследований представлены в табл. 5.5. В экспериментальной части этих исследований участникам предлагали перечень критериев КАУК и просили оценить, повышается пли снижается частота присутствия этих критериев в зависимости от того, подлинную или сфабрикованную историю рассказывает свидетель, или их наличие или отсутствие не имеет никакого отношения к истинности или ложности сообщения. Оба исследования проводились в Великобритании, причем в выборку каждого из них входили как непрофессионалы, так и офицеры полиции.
Согласно полученным данным, между простыми людьми и полицейскими не было выявлено никаких различий, что свидетельствует о том, что полицейские и те, кто не служит в полиции, имеют схожие представления относительно вербальной окраски правдивых высказываний. Более того, результаты чаще присутствуют в правдивых утверждениях) фигурировали всего несколько раз, а именно трижды в исследовании Эйкхерста и его коллег и дважды в эксперименте Тейлора и Фрая. Участники первого из упомянутых исследований посчитали, что, в отличие от вымышленных рассказов, правдивые сообщения обладают более строгой логической структурой (критерий 1), содержат больше подробностей (критерий 3) и описаний психического состояния преступника (критерий 13). Участники другого исследования, проводившегося под руководством Тейлора и Фрая, выразили мнение, что достоверные сообщения чаще сопровождаются сомнениями в их точности (критерий 16) и самообвинениями (критерий 11).
