Определение компетентности экспертов, привлекаемых для проведения экспертизы
Скачать:
Вложение | Размер |
---|---|
определение компетентности экспертов, привлекаемых для проведения экспертизы | 79 КБ |
Предварительный просмотр:
ОПРЕДЕЛЕНИЕ КОМПЕТЕНТНОСТИ ЭКСПЕРТОВ,
ПРИВЛЕКАЕМЫХ ДЛЯ ПРОВЕДЕНИЯ ЭКСПЕРТИЗЫ
Белый В.С., Середа Д.А.
В статье показан подход к оценке компетентности лиц, привлекаемых для проведения экспертизы. Представлен способ расчета показателей, характеризующих качество проведения экспертизы и её участников (коэффициент аргументации принимаемого экспертом решения, коэффициент знакомства эксперта с проблемой, коэффициент осведомленности компетентности эксперта, коэффициент компетентности эксперта).
Экспертные оценки представляют собой точки зрения высококвалифицированных специалистов в определенных предметных областях – экспертов, сформулированные в виде оценок объекта в содержательной, качественной или количественной форме. Экспертные оценки формируются в процессе проведения экспертизы-исследования определенного объекта индивидуумом или группой компетентных специалистов с целью формирования информации об интересующих характеристиках, свойствах объекта, используемой при принятии решений. Сущность метода экспертных оценок состоит в надлежащей организации специалистами-организаторами экспертиз проведения конкретной экспертизы с целью получения информации о суждениях экспертов по рассматриваемым объектам и ее последующей обработки для генерации обобщенных данных и новой информации.
Известны различные формы организации проведения экспертиз: индивидуальные и коллективные, одноуровневые и многоуровневые, с обменом информацией между экспертами и без него, анонимные, открытые. Вопрос формирования состава экспертной комиссии является весьма важным. Количественный и качественный состав экспертной комиссии должен формироваться с учетом широты проблемы, достоверности оценок, затрат ресурсов и характеристик экспертов. Широта решаемой проблемы, определяемая количеством различных аспектов, связана с установлением нижней границы количественного состава экспертной комиссии, то есть количество экспертов должно быть в комиссии таковым, чтобы каждый аспект, направление исследования было закреплено как минимум за конкретным специалистом. Достоверность оценок связана с уровнем знаний экспертов и их количеством. При соответствующем уровне знаний увеличение количества членов экспертной комиссии должно приводить к возрастанию достоверности результатов экспертизы. Величину располагаемых ресурсов на проведение экспертизы с учетом пропорциональности количеству привлекаемых экспертов следует использовать при определении верхней границы количественного состава экспертной комиссии. Таким образом, указанные ориентиры в конкретных случаях позволяют определиться с количественным составом экспертной комиссии.
Характеристики группы экспертов, включаемых в экспертную комиссию, определяются на основе индивидуальных их характеристик, в первую очередь, компетентности. Компетентность – это обладание определенными знаниями, позволяющее индивидууму высказывать суждения по определенному кругу вопросов. Степень компетентности может характеризоваться коэффициентом компетентности. Компетентность эксперта определяется структурой и весомостью аргументов, послуживших ему основанием для ответа на поставленные вопросы, уровнем его осведомленности в рассматриваемой области знаний и уровнем знакомства с обсуждаемой проблемой.
Структура аргументов учитывается коэффициентом аргументированности (Карг), который соответствует формализованным сведениям о характере источников аргументации и о степени влияния каждого источника на принимаемые экспертом решения и рассчитывается следующим образом.
Формируется анкета, представленная в таблице 1, где по вертикали содержатся источники аргументации, а по горизонтали оценка степени влияния на мнение экспертов источников аргументации.
Таблица 1 - Анкета оценки степени влияния на мнение экспертов
источников аргументации
№ п/п | Источник аргументации | Степень влияния на Ваше мнение | ||
В Высокая | С Средняя | Н Низкая | ||
1 2 3 4 5 6 | Проведенный Вами теоретический анализ Ваш производственный опыт Обобщение работ отечественных авторов Обобщение работ зарубежных авторов Ваше личное знакомство с зарубежной практикой Ваша интуиция | + + | + + | +
+ |
Таблица 2 - Анкета количественной оценки степени влияния на мнение экспертов источников аргументации
№ п/п | Источник аргументации | Степень влияния на Ваше мнение | ||
В Высокая | С Средняя | Н Низкая | ||
1 2 3 4 5 6 | Проведенный Вами теоретический анализ Ваш производственный опыт Обобщение работ отечественных авторов Обобщение работ зарубежных авторов Ваше личное знакомство с зарубежной практикой Ваша интуиция | 0,3 0,5 0,05 0,05 0,05 0,05 | 0,2 0,4 0,04 0,04 0,04 0,04 | 0,1 0,2 0,03 0,03 0,03 0,03 |
Таблица 2 уже имеет определенные числовые значения компетентности эксперта. По источникам аргументации она соответствует таблице 1. После этого в клетке табл. 1, отмеченные экспертами знаком «+», заносятся числовые значения соответствующих клеток табл. 2, сумма которых дает коэффициент аргументированности (Карг).
Карг I =, (1)
где yj – оценка, отмеченная экспертом по j-ому вопросу аргументации
Коэффициент степени знакомства (Кз) учитывает степень знакомства эксперта с рассматриваемой проблемой и равен нормированному (умноженному на 0,1) значению соответствующей оценки, данной экспертом. Каждый эксперт отмечает степень своего знакомства на шкале, имеющей вид:
0 1 2 3 ….. 10 (2)
Степень осведомленности эксперта в обсуждаемых вопросах учитывает коэффициент осведомленности (Косв). Он соответствует формализованным сведениям об осведомленности эксперта по каждому из обсуждаемых вопросов. Числовое значение данного коэффициента определяется путем наложения табл.3 на аналогичную таблицу с отмеченным i-ым экспертом клеткам и последующим суммированием записанных в данных клетках чисел.
Коэффициент Косв для i-го эксперта определяется по формуле
Косв = , (3)
где ri - оценка, отмеченная экспертом по i-ому вопросу осведомленности .
Таблица 3 – Числовые оценки, соответствующие различным степеням осведомленности эксперта
Вопросы | Ответы | ||||||||||||||||||||||||||||||||||
Стаж работы в исслед. области (лет) | <3 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 10…15 | 15..20 | 20…25 | >25 | ||||||||||||||||||||||
0,3 | 0,35 | 0,4 | 0,45 | 0,5 | 0,55 | 0,6 | 0,65 | 0,7 | 0,8 | 0,9 | 0,95 | 1 | |||||||||||||||||||||||
Наличие ученой степени и ученого звания в исслед. области | Д.т.н., проф. | Д.т.н., доцент | Д.т.н., СНС | К.т.н., проф. | К.т.н., доцент | К.т.нСНС | К.т.н. | Доцент | СНС | нет | |||||||||||||||||||||||||
1 | 0,95 | 0,9 | 0,85 | 0,8 | 0,75 | 0,6 | 0,5 | 0,4 | 0 | ||||||||||||||||||||||||||
Наличие научных работ в исслед. области знаний | Монография | Патент, авторское свидетельство | статьи | Алгоритмы, программное обеспечение | Рационализатор. предложения | нет | |||||||||||||||||||||||||||||
1 | 0,8 | 0,6 | 0,4 | 0,2 | 0 | ||||||||||||||||||||||||||||||
Научно-организационная работа эксперта | Руководитель комплекса работ | Руководитель одной работы | Участник выполнения нескольких работ | Участник одной работы | Нет | ||||||||||||||||||||||||||||||
1 | 0,8 | 0,6 | 0,4 | 0 | |||||||||||||||||||||||||||||||
Участие в конференц. и семинарах по исслед. области | Международ.конференции и симпозиумы | Всероссийск. Конференции и симпозиумы | Отраслевые конференц. и симпозиумы | Конференц. организаций и предприятий | Семинары в организации, где работает эксперт | Нет | |||||||||||||||||||||||||||||
1 | 0,8 | 0,6 | 0,4 | 0,2 | 0 |
Коэффициент компетентности эксперта определяется как среднее арифметическое коэффициентов аргументации, осведомленности и знакомства с исследуемой проблемой.
Ккомп = . (4)
Если коэффициент компетентности эксперта Ккомп < 0,7 , то к дальнейшему обсуждению проблемы эксперт не привлекается.
Выводы:
- Достоверность оценок, полученных в результате экспертного опроса, связана с компетентностью привлекаемых экспертов и их количеством. При соответствующем уровне компетентности увеличение количества членов экспертной комиссии должно приводить к возрастанию достоверности результатов экспертизы.
- Компетентность эксперта определяется структурой и весомостью аргументов, послуживших ему основанием для ответа на поставленные вопросы, уровнем его осведомленности в рассматриваемой области знаний и уровнем знакомства с обсуждаемой проблемой.
Литература:
1. Анфилатов В.С., Емельянов А.А., Кукушкин А.А. Системный анализ в управлении – М.: Финансы и статистика, 2002. – 325 с.
2. Елтаренко Е.А., Крупинова Е.К.. Обработка экспертных оценок. – М.: МИФИ, 1982. – 49 с.
3. Мыльник В.В., Титаренко Б.П., Волочиенко В.А. Исследование систем управления. – М.: Академический Проект, 2003. – 176 с.