Телефон: 8-800-350-22-65
WhatsApp: 8-800-350-22-65
Telegram: sibac
Прием заявок круглосуточно
График работы офиса: с 9.00 до 18.00 Нск (5.00 - 14.00 Мск)

Статья опубликована в рамках: LV Международной научно-практической конференции «Инновации в науке» (Россия, г. Новосибирск, 30 марта 2016 г.)

Наука: Междисциплинарные исследования

Скачать книгу(-и): Сборник статей конференции часть 1, Сборник статей конференции часть 2

Библиографическое описание:
Стрельникова Н.В., Парфеньева И.Е. ЭКСПЕРТНАЯ ОЦЕНКА ЗНАЧИМОСТИ ГРУПП КРИТЕРИЕВ АККРЕДИТАЦИИ ОРГАНОВ ПО СЕРТИФИКАЦИИ ПРОДУКЦИИ // Инновации в науке: сб. ст. по матер. LV междунар. науч.-практ. конф. № 3(52). Часть I. – Новосибирск: СибАК, 2016. – С. 120-129.
Проголосовать за статью
Дипломы участников
У данной статьи нет
дипломов

ЭКСПЕРТНАЯ ОЦЕНКА ЗНАЧИМОСТИ ГРУПП КРИТЕРИЕВ АККРЕДИТАЦИИ ОРГАНОВ ПО СЕРТИФИКАЦИИ ПРОДУКЦИИ

Стрельникова Надежда Викторовна

канд. техн. наук, доц. Московского государственного машиностроительного университета (МАМИ),

РФ, г. Москва

Парфеньева Ирина Евгеньевна

канд. техн. наук, доц. Московского государственного машиностроительного университета (МАМИ),

РФ, г. Москва

 

EXPERT EVALUATION OF THE IMPORTANCE OF GROUPS

OF CRITERIA OF ACCREDITATION OF CERTIFICATION BODIES PRODUCTS

Nadezhda Strelnikova

master, Moscow state engineering University (MAMI)

Russia, Moscow

Irina Parfenieva

candidate tech. Sciences, associate Professor Moscow state engineering University (MAMI),

Russia, Moscow

 

АННОТАЦИЯ

На основе документов, устанавливающих требования к органам по сертификации продукции, выделены группы критериев, связанные с различными аспектами их деятельности. Предложена методика оценивания качества деятельности органов по сертификации, разработана схема декомпозиции требований аккредитации этих органов, проведена экспертная оценка коэффициентов весомости групп критериев методом попарного сопоставления.

ABSTRACT

On the basis of documents establishing requirements for bodies certifying products selected groups of criteria related to various aspects of their activities. The technique of estimation of quality of activity of certification bodies, developed by the decomposition of these requirements of accreditation bodies, expert evaluation of weighting factors of the criteria by the method of pairwise comparisons.

 

Ключевые слова: орган по сертификации, критерии аккредитации, методика оценивания качества, декомпозиция требований, коэффициенты весомости, метод попарного сопоставления.

Keywords: the certification body, accreditation criteria, methods of quality assessment, decomposition of requirements, the weighting factors, the method of paired comparison.

 

В настоящее время основными документами, устанавливающими требования к органам по сертификации (ОС), являются ГОСТ Р ИСО/МЭК 17065-2012 «Оценка соответствия. Требования к органам по сертификации продукции, процессов и услуг» и Приказ Минэкономразвития России «Об утверждении Критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации» от 30.05.2014 г. № 326.

Эти документы и были взяты за основу для разработки критериев и показателей оценки качества деятельности органа по сертификации продукции.

Классификация критериев обусловлена ее целевым назначением и проводится по взаимосвязанным признакам, соответствующим этому назначению. Совокупность таких признаков позволяет распределить множество рассматриваемых критериев по определенным классификационным группировкам. При этом глубина классификации (число ступеней иерархии) должна быть достаточной для решения задач, связанных с оценкой деятельности организации и обобщением полученных результатов.

На основе анализа перечня критериев, приведенных в выше указанных документах, были выделены восемь групп критериев, связанных с аспектами деятельности органа по сертификации:

  • Группа 1. Общие требования к деятельности органа по сертификации;
  • Группа 2. Требования к структуре;
  • Группа 3. Требования к менеджменту (СМК);
  • Группа 4. Кадровое обеспечение;
  • Группа 5. Требования к ресурсам для оценки (внутренним и внешним);
  • Группа 6. Требования к процессу сертификации;
  • Группа 7. Документационное обеспечение;
  • Группа 8. Информационное обеспечение.

Каждая группа критериев включает в себя составляющие критериев, для оценки выполнения которых вводится 93 соответствующих показателя. Распределение показателей качества по группам критериев показано в таблице 1 и на рисунке 1.

Таблица 1.

Распределение показателей качества по группам критериев

Группы критериев, наименование

Количество показателей

Группа 1. Общие требования к деятельности органа по сертификации.

9

Группа 2. Требования к структуре.

9

Группа 3. Требования к менеджменту (СМК)

26

Группа 4. Кадровое обеспечение

9

Группа 5. Требования к ресурсам для оценки (внутренним и внешним)

6

Группа 6. Требования к процессу сертификации

18

Группа 7. Документационное обеспечение

13

Группа 8. Информационное обеспечение

3

 

 

Рисунок 1. Критерии оценки качества деятельности ОС

 

Чтобы получить комплексную оценку качества деятельности ОС, необходимо разработать методику оценивания качества, которая, среди прочих, включает и задачу проработки таких вопросов как построение дерева требований и определение коэффициентов весомости групп критериев. Именно эти вопросы и рассматриваются в данной работе.

Итак, имеем следующую постановку задачи. Имеется орган по сертификации, деятельность которого должна удовлетворять требованиям аккредитации – интегральному качеству, которое на рисунке 2 расположено на 0-ом уровне иерархии.

Требования аккредитации включают n групп критериев , где  расположенных на 1-ом уровне иерархии, и составляющие критериев (подкритерии) , где , расположенные на 2-ом уровне иерархии.

Критерии, их составляющие характеризуются индикаторами (признаками), на основании которых дается оценка выполнения или не выполнения указанных критериев (подкритериев). Для оценки выполнения индикаторов рассматриваются их свидетельства – показатели (k-ый уровень иерархии).

 

Рисунок 2. Схема декомпозиции требований аккредитации органов по сертификации

 

Оценка качества деятельности ОС определяется как арифметическая средневзвешенная оценка качества выполнения отдельных групп критериев

 ,               (1)

где:  – коэффициенты весомости групп критериев, нормированные таким образом, что ;

 – оценка качества выполнения i-ой группы критериев, баллы.

Количественное значение оценки выполнения каждого критерия (подкритерия) , определяется через значения соответствующих показателей по формуле

,                                                         (2)

где:  – показатели оценки выполнения критериев (подкритериев);

 – число показателей.

С целью определения коэффициентов весомости групп критериев на интегральный показатель была проведена экспертная оценка методом парного сопоставления (предпочтений), в которой приняли участие шесть экспертов органа по сертификации «САТР-Фонд».

Результаты экспертных оценок сводятся к заполнению экспертами таблиц, в которых предпочтение указываются номером группы критериев. Если эксперт указывает на равнозначность объектов экспертизы, это отображается в таблицах цифрой «0». В этом случае при подсчете количества предпочтений суммируется по 0,5 для каждого из равнозначных объектов.

Результаты попарного сопоставления объектов, выполненные первым экспертом, представлены в таблице 2.

Таблица 2.

Результаты попарного сопоставления групп критериев качества первым экспертом

Номер объекта

экспер-тизы

1

2

3

4

5

6

7

8

Кол-во предпоч-

тений

Частота предпоч-тений

1

X

1

0

1

1

6

0

0

4,5

0,161

2

 

X

3

0

0

6

7

0

1,5

0,054

3

 

 

X

3

3

0

0

0

5

0,179

4

 

 

 

X

0

6

7

0

1,5

0,054

5

 

 

 

 

X

6

7

0

1,5

0,054

6

 

 

 

 

 

X

0

0

5,5

0,196

7

 

 

 

 

 

 

X

7

5,5

0,196

8

 

 

 

 

 

 

 

X

3

0,107

 

 

Частота предпочтений  i-м экспертом j-го объекта экспертизы находится по формуле

                                                      (3)

где:  – число предпочтений i-м экспертом j-го объекта экспертизы;

С – общее число суждений одного эксперта, связанное с числом объектов экспертизы m соотношением

                                                 (4)

В нашем случае

 

Коэффициенты весомости оцениваемых объектов экспертизы рассчитывают по формуле

                                         (5)

где: n – число экспертов в группе; m – число объектов экспертизы.

Показатели частот предпочтений , данные всеми экспертами, сведены в таблицу 3.

Таблица 3.

Частоты предпочтений групп критериев, данные экспертами

Номер эксперта

Частоты предпочтений

1

0,161

0,054

0,179

0,054

0,054

0,196

0,196

0,107

2

0,214

0,107

0,161

0,036

0,054

0,179

0,161

0,089

3

0,143

0,054

0,214

0,054

0,071

0,214

0,161

0,089

4

0,089

0,036

0,196

0,107

0,089

0,179

0,196

0,107

5

0,196

0,143

0,196

0,036

0,107

0,125

0,125

0,071

6

0,196

0,054

0,214

0,054

0,089

0,196

0,125

0,071

Итого

0,999

0,448

1,160

0,341

0,464

1,089

0,964

0,534

 

 

Коэффициенты весомости, вычисленные по формуле (5), будут иметь следующие значения:

                            

                           

          

Сумма всех показателей весомости равна

 

Следовательно, ранжированный ряд по данным экспертной оценки имеет вид

Проведенный анализ показывает, что эксперты по значимости (важности) групп критериев отдают наибольшее предпочтение требованиям к менеджменту (СМК) и требованиям к процессу сертификации.

При подборе экспертов большое внимание уделяется согласованности их мнений, которая характеризуется оценкой дисперсии отсчета. За меру согласованности мнений экспертов принимается коэффициент конкордации

,                                                   (6)

где:  – сумма квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения;

 – число экспертов;

 – число объектов экспертизы.

Ставится задача определения степени согласованности мнений шести экспертов, которые оценивая восемь объектов экспертизы и классифицируя их по значимости, составили ранжированные ряды по возрастающей шкале порядка.

1 эксперт: ;

2 эксперт: ;

3 эксперт: ;

4 эксперт: ;

5 эксперт: ;

6 эксперт: .

Определим суммы рангов  каждого из объектов экспертной оценки. принимая во внимание, что если между несколькими объектами при их оценке установлено отношение эквивалентности, то имеют место связанные ранги для объектов, входящих в классы эквивалентности. Значения связанных рангов определяются как среднее из чисел, характеризующих места эквивалентных объектов в упорядоченном ряду.

Наименее предпочтительному объекту присваивается ранг, равный единице, второму по предпочтительности – ранг, равный двум, и т. д.

: ;

: ;

: ;

: ;

: ;

: ;

: ;

: .

Определим коэффициент конкордации для оценки согласованности мнений экспертов.

С этой целью найдем среднее арифметическое рангов

и сумму квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения рангов

Тогда коэффициент конкордации

что свидетельствует о высокой степени согласованности мнений экспертов.

Значимость W оценивают по критерию Пирсона (хи-квадрат)

Если  то показатель W значим с установленной вероятностью. Значения  приведены в таблице 4.

Таблица 4.

Значения квантиля - распределения при различном числе степеней свободы

Доверительная

вероятность P

Значения  при различных значениях

1

2

3

4

5

6

7

8

9

10

11

0,99

6,6

9,2

11,3

13,3

15,1

16,8

18,5

20,1

21,7

23,2

24,7

0,95

3.8

6,0

7,8

9,5

11,1

12,6

14.1

15,5

16,9

18,2

19,7

 

 

Сравним полученное значение с табличным при доверительной вероятности Р. Коэффициент конкордации  значим при доверительной вероятности .

 

Список литературы:

  1. ГОСТ ISO/IEC Guide 65-2012 «Общие требования к органам по сертификации продукции».
  2. Приказ Минэкономразвития Российской Федерации от 30.05.2014 г. № 326 «Об утверждении критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица, критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации».
  3. Романова Ю.В., Парфеньева И.Е. Оценка соответствия документов органа по сертификации продукции современным требованиям аккредитации // Инновации в науке: Сб. ст. по материалам LIV международной науч.-практ. конф. № 2 (51). Новосибирск: Изд. АНС «СибАК», 2016, С. 77–89.
Проголосовать за статью
Дипломы участников
У данной статьи нет
дипломов

Оставить комментарий

Форма обратной связи о взаимодействии с сайтом
CAPTCHA
Этот вопрос задается для того, чтобы выяснить, являетесь ли Вы человеком или представляете из себя автоматическую спам-рассылку.