Читать книгу Экспертные сообщества и власть - Александр Юрьевич Сунгуров, А. Ю. Сунгуров - Страница 8

Проблема экспертизы в советское время обсуждалась в основном в работах, посвященных управлению и прогнозированию. Сама возможность прогнозировать будущее если не всей страны, то ее отдельных отраслей появилась уже в послесталинское время, когда политический режим стал относительно более мягким. Ранее, начиная с тридцатых готов, это тема входила исключительно в компетенции партийных органов. Уважение же к научному знанию, традиционно существовавшему в нашей стране, было подорвано кампаниями репрессий против «ученых-вредителей», «врачей-вредителей» и т. д.[44] Так, например, уже в 1974 г. в Киеве вышла в свет коллективная монография (Г.М. Добров с соавторами), посвященная именно экспертным оценкам в научно-техническом прогнозировании[45]. Годом ранее в Москве начал свою работу постоянно действующий семинар по экспертным оценкам и анализу данных, его бессменным руководителем был профессор Б.Г. Литвак, автор целого ряда монографий, посвященных экспертизе и экспертным оценкам[46]. По-видимому, Б.Г. Литвак может считаться наиболее известным российским специалистом в области анализа деятельности экспертов и экспертных оценок в управлении. Об этом свидетельствует и его избрание председателем консультативно-методического совета Экспертной лиги, и его членство в Экспертом совете при Правительстве РФ в первой половине нулевых годов.

Другим известным специалистом по экспертным оценкам является профессор МАИ Ю.В. Сидельников, фокус интересов которого начиная с конца 80-х гг. прошлого века был направлен на экспертные технологии в прогнозировании[47]. У него сложилось конструктивное сотрудничество с известным советским и российским социологом И.В. Бестужевым-Ладой, одним из основателей и почетным членом Всемирной ассоциации исследований будущностей; вместе они даже создали Международную академию будущего. С другой стороны, Ю.В. Сидельников много работал над совершенствованием технологии и экспертного прогнозирования, а также экспертной деятельности как таковой[48]; его учебник по экспертному прогнозированию выдержал несколько изданий[49].

Читая книги и другие публикации Б.Г. Литвака и Ю.В. Сидельникова, мы видим, как эти два видных российских специалиста в области прогнозирования конструктивно сотрудничают, в том числе и в рамках упомянутого выше семинара по экспертным оценкам и анализу данных. Ю.В. Сидельников ссылается на работы Б.Г. Литвака, тот же при своей формулировке определения экспертной деятельности отталкивается от определения Ю.В. Сидельникова: «Эксперт – это специалист в конкретной предметной области или в области управления,

• обладающий в ней необходимыми знаниями и опытом,

• способный анализировать вновь поступившую информацию,

• способный дать оценку объекту экспертизы в пределах своей компетентности,

• владеющий используемыми в ней технологиями, способный оценить возможность их применения в конкретной управленческой ситуации и дать соответствующие рекомендации и заключения,

• несущий ответственность за сделанные им рекомендации и заключения»[50].

Для лучшего понимания эволюции взглядов «одного из наиболее известных специалистов в области экспертного оценивания»[51], приведем определения эксперта из работ Ю.В. Сидельникова 1990, 2000 и 2007 гг. Первое определение – из его книги 1990 г.: «Эксперт – это человек, являющийся специалистом и (или) имеющий практический опыт, который:

• имеет и дает объективные и полные сведения об особенностях и свойствах внешнего объекта и (или) рекомендации относительно предпочтительных (лучших) вариантов управленческих решений, касающихся данного объекта;

• обладает правами, обязанностями и ответственностью за свое экспертное заключение, которые определены нормативными документами;

• включен в процесс принятия решений, выполняя специальную ролевую функцию, и поставлен перед задачей их научного обоснования;

• высказывает суждения по вопросу из области его специальных знании и (или) практического знания, поставленного перед ним некоторым лицом, независимо от внешнего влияния и собственной выгоды»[52].

Семь лет спустя это определение выглядит уже так: «Эксперт есть носитель специальных знаний и (или) практического опыта и (или) представитель заинтересованных групп (организаций), то есть носитель их интересов, который:

• дает рекомендации о предпочтительных вариантах решений, касающихся данного объекта, и (или) объективные и по возможности полные сведения об особенностях и свойствах предмета экспертизы с позиции цели, поставленной перед экспертом. При этом сведения должны быть не о себе или своих ощущениях, отношениях и пристрастиях к внешним объектам, как это делает респондент во время опросов – обследований;

• включен в процесс принятия решения, ставя задачу их научного обеспечения;

• обладает правами и обязанностями, определенными документами (приказ о назначении и (или) трудовое соглашение, положение об экспертизе, о статусе эксперта);

• реализует специальную ролевую функцию, которая вытекает не столько из характера и методов его работы, сколько из ориентации на определенный результат»[53].

Наконец в монографии 2007 г. это определение выглядит так: «Эксперт – носитель специальных знаний и/ или практического опыта, а также представитель групп интересов и организаций, который:

• имеет объективные и полные (в его понимании) сведения об особенностях и свойствах внешнего объекта, и/или рекомендации относительно предпочтительных (лучших) вариантов управленческих решений, касающихся данного объекта;

• независимо от внешних влияний и собственной выгоды высказывает суждения из области специальных знаний и/или практического опыта по поставленным перед ним вопросам;

• несет ответственность за свое экспертное заключение, обладает правами и обязанностями, которые определены соответствующими нормативными документами;

• выполняя специальную ролевую функцию, включен в процесс принятия решений с тем, чтобы научно обосновать их[54].

Мы видим, как менялось представление автора о том, кто может быть экспертом. Если в определении 1990 г. это специалист или некий человек – носитель практического опыта, то семь лет спустя это мог быть уже и «носитель интересов заинтересованных групп (организаций)», а в 2007 г. – просто «представитель групп интересов и организаций». При этом, правда, во всех трех определениях присутствует такое важное свойство, как «функция научного обоснования [предлагаемых им?] решений». Остается при этом неясным, как «представитель группы интересов» может реализовывать функцию научного обоснования решений. Это противоречие не случайно, оно отражает, на наш взгляд, сложный функционал деятельности современных экспертов. Действительно, с одной стороны, они должны давать важную информацию о свойствах того объекта или ситуации, по поводу которого проводится экспертиза (и эта функция близка к функции обоснованной оценки), и здесь действительно могут быть очень полезны и сведения от представителей групп интересов. С другой стороны, они должны дать научно-обоснованные предложения по улучшению обсуждаемого объекта или ситуации, и в этом, вероятно, представители групп интересов мало чем могут помочь.

Эта двойственность экспертных функций раскрывается в монографии «Сетевая экспертиза», подготовленной группой авторов под руководством профессора А.Н. Райкова. Представив в ней представленное ранее определение эксперта, данное Б.Г. Литваком, они дают такое определение обсуждаемому понятию: «Эксперт может также определяться как:

• субъект (индивидуальный или коллективный), имеющий знания, личное эмоциональное представление и опыт относительно определенного вида деятельности;

• физическое лицо, обладающее значительными познаниями в некой области: в политике, экономике, социальной сфере, отрасли, регионе, в науке, технике и технологиях, общественной жизни;

• представитель научных и образовательных учреждений, органов местного самоуправления, общественных объединений, других организаций, приглашаемых органом государственной власти в качестве экспертов»[55].

Авторы также формулируют две основные цели любых экспертиз, которые хорошо объясняют двойственность функций экспертов, выявленную нами в определениях Ю.В. Сидельникова, а именно:

• «повышение степени обоснованности принимаемых решений на основе заключений экспертов;

• контроль за соблюдением соответствия и/или установление соответствия между характеристиками объекта экспертизы и требованиями (условиями, ограничениями), предусмотренными нормативно-правовыми документами различных уровней»[56].

И далее, в соответствии с этими целями, они предлагают выделить два вида экспертизы: экспертизу для принятия решений и нормативную экспертизу.

Как представляется, первый включает в себя и разновидность нормативной экспертизы, а именно оценку состояния объекта для принятия решений исходя из каких-то критериев, пусть и не столь четко сформулированных, как в нормативной экспертизе. Однако в экспертизе для принятия решений за стадией оценки следует и выработка предложений по улучшению состояния объекта или ситуации, и эта стадия уже отсутствует в экспертизе нормативной.

Такое выделение двух видов экспертиз очень важно для понимания сути вопроса, поскольку в традиционном для нашей страны понимании термина «экспертиза» речь идет именно о нормативной экспертизе, означающей сравнение с некоторой нормой. Именно этот смысл понятия «экспертиза» отражен в большинстве толковых словарей русского языка, где речь идет о судебной, медицинской, технической, экологической, врачебной и иной подобной экспертизе.

Этим двум смыслам в английском языке соответствуют и два различных, хотя и близких по написанию, слова: «В английском языке “expertize” и “expertise” – понятия разные. С одной стороны, это право проводить экспертизу, давать заключения специалиста, проявлять искусность, ловкость (expertize), с другой – обладание специальными знаниями, компетентностью, эрудицией в какой-либо области (expertise)»[57].

Наряду с упомянутыми выше учеными, среди исследователей экспертных подходов в управлении можно выделить также А.И. Орлова[58], Д.А. Новикова[59], В.Н. Буркова[60], которые также были активными участниками семинара по экспертным оценкам и анализу данных. Эти исследования ведутся в нескольких направлениях. Первое – разработка и совершенствования наиболее эффективных способов организации работы экспертов, включая и их коллективную работу, и возможность их общения между собой в процессе проведения экспертизы (например, совершенствование метода Дельфи). Второе направление – оптимизация всего экспертного процесса, к участникам которого, кроме самих экспертов, сегодня относят руководителя, аналитика, специалиста по методологическому и методическому обеспечению экспертизы, организатора экспертизы, модератора, тематического куратора и т. д.[61] Так, например, А.Н. Райков работает над созданием методов конвергентной экспертизы, позволяющей экспертам быстрее прийти к согласованному решению[62], он также разработал концепцию сетевой экспертизы, позволяющей снижать искажающее влияние средних звеньев процесса экспертизы – менеджеров процесса, и обеспечить сетевое взаимодействие экспертов между собой и с заказчиком экспертизы[63].

Третье направление – это разработка математических моделей поведения самих экспертов в процессе экспертизы, которые позволили бы уменьшить их «стратегическое» поведение, то есть преследование ими своих собственных, отличных от организаторов экспертизы, целей. При этом такое поведение может быть у всех упомянутых выше участников экспертного процесса. Как пишет Н.А. Абрамова, согласно парадигме активных систем, человек обладает свойством сознательного выбора той модели поведения, которая наиболее отвечает его целям в данной ситуации. В частности, он может внешне действовать в рамках заданных «правил игры», а фактически следовать своим целям и правилам[64].

«В этом контексте активной называется экспертиза, в которой существенна активность (то есть, целенаправленность (не всегда «объективная») поведения) ее участников и их возможности манипулирования результатами экспертизы. Процедуры экспертизы, в которых нейтрализованы возможности манипулирования их результатами (точнее, в которых всем участникам выгодно вести себя честно и добросовестно), называются неманипулируемыми [или пассивными] экспертизами»[65]. Различные подходы к созданию условий для проведения неманипулируемых экспертиз (разработанные с помощью математического моделирования) представлены, например, в работах Д.А. Новикова с соавторами[66]. Разрабатываются также способы предотвращения такой опасной разновидности активной экспертизы, как коррупционное поведение[67].

Четвертым направлением снижения возможных ошибок экспертных процедур является уменьшение роли неосознанных, непреднамеренных ошибок как самих экспертов, так и организаторов экспертизы. Так, например, в работах Н.А. Абрамовой[68] развивается представление о том, что каждый эксперт обладает своей определенной областью компетенции. В условиях реальной экспертизы, например, быстрого изменения ситуации, срочности задания или в иных стрессовых ситуациях эксперт при подготовке своего заключения может незаметно для самого себя сместиться из области своей компетентности в область «обыденного знания». Для обыденного же мышления характерно обращение к неадекватным стереотипам. Использованию подобных неадекватных подходов и стереотипов, по мнению Н.А. Абрамовой, способствуют:

• «Объективные и субъективные условия, такие как недостаток времени или познавательных ресурсов для исчерпывающего анализа ситуации, информационная сложность ситуации, неопределенность, отсутствие выбора и др.;

• Специфика действия стереотипов, запускаемых автоматически без достаточных оснований (предполагается механизм условного рефлекса);

• «Факторы веры» – факторы влияния, повышающие субъективную уверенность в адекватности принимаемых решений, помимо их объективной адекватности, вплоть до существенного отклонения от рационального поведения»[69].

При этом наиболее «тяжелыми» факторам влияния оказываются научные нормы и парадигмы, обеспечивающие уверенность ученых в своих немотивированных представлениях. Отметим, что наряду с обозначенными выше «факторами риска» Н.А. Абрамова выделяет и факторы второго рода, которые закладываются уже в ходе создания и обоснования экспертных методов, а именно – психологически некорректные модели знаний экспертов, либо принятие линейной модели при аппроксимации.

Завершим это раздел списком наиболее типичных ошибок, возникающих при проведении экспертизы: 1. Преувеличение возможностей экспертных оценок; 2. Излишнее увлечение «здравым смыслом»; 3. Использование некомпетентных экспертов; 4. Недостаточная информированность экспертов об объекте экспертизы; 5. Нечеткая постановка задачи перед экспертами; 6. Стремление оставаться в рамках одной экспертной процедуры; 7. Излишнее увлечение количественными оценками; 8. Нарушение принципов теории измерений; 9. Возможная противоречивость экспертных оценок при парных измерениях; 10. Неоправданное увлечение «свертками»; 11. Неточные процедуры коллективного выбора; 12. Необходимость организации информационного взаимодействия между экспертами; 13. Конформизм экспертов; 14. Коньюктурность оценок; 15. Неверное понимание точности экспертных оценок; 16. Излишнее увлечение формальными моделями; 17. Неправильная обработка результатов экспертизы; 18. Некорректная интерпретация результатов.

В монографии профессора Б.Г. Литвака[70] этот список представлен в виде заголовков небольших разделов, содержащих описание соответствующих ошибок экспертизы. Но на наш взгляд, и сам список достаточно информативен.

Мы видим, что изучение деятельности экспертов и их возможных ошибок являются предметом довольно глубокого анализа серьезных специалистов. Учитывается возможность «активной» экспертизы, при которой эксперт имеет какие-то собственные цели, кроме артикуляции «объективной точки зрения», иначе говоря, эксперт рассматривается как разновидность «прибора», данные которого могут давать и ошибку, но эту ошибку можно свести к минимуму с помощью различного рода специальных процедур. Другая сторона процесса экспертизы – заказчик – вообще не является предметом анализ, по умолчанию предполагается, что цель заказчика экспертизы – получение научно-обоснованного заключения эксперта, которое поможет ему принять более правильное (с точки зрения общественного блага) решение. Иначе говоря, предполагается, что и эксперт, и заказчик действуют в рамках «линейно-автономной модели»