Пример: шкала балльных экспертных оценок (в том числе оценки знаний студентов).
4. Шкала отношений.
Это измерительная шкала, на которой отсчитывается численное значение измеряемой величины N как математическое отношение определенного размера Qi к другому размеру Qj. Размер Qj выступает в качестве единицы измерения. На шкале отншений возможно выполнение всех арифметических операций.
Составление шкалы измерения количественного показателя обычно не вызывает трудностей. Составление шкалы измерения качественного показателя обычно включает следующие этапы:
1) выбор типа шкалы, исходя из возможностей способа измерения.
2) выражение различных проявлений показателя некоторой совокупностью стандартных терминов. При этом необходимо достигнуть максимальной ясности в том, что имеется в виду под каждой градацией и чем она отличается от других.
3) составление четкого описания способа измерения показателя (например, указываются условия оценивания).
2.2.4. Методы определения значений показателей качества
Методы подразделяются на две группы:
1) по способам получения информации;
2) по источникам получения информации.
В зависимости от способа получения информации различают следующие методы определения численных значений показателей: измерительный, регистрационный, органолептический и расчетный. В зависимости от источника информации различают традиционный, экспертный и социологический (маркетинговый) метод.
Измерительный метод основан на информации, получаемой с помощью технических средств измерений. Измерительным методом определяют большинство показателей свойств, например, такие как масса изделия, форма и размеры, механические и электрические напряжения, число оборотов двигателя, скорость транспортных средств и другие единичные показатели качества.
Регистрационный метод основан на использовании информации, получаемой путем подсчета определенных событий, предметов или затрат. Этим методом определяют, например, число отказов при эксплуатации изделий, затраты на создание изделия, число различных частей сложного изделия (стандартных, унифицированных, оригинальных, защищенных патентами и т.п.). Регистрационным методом определяют, например, показатели безотказности, долговечности и сохраняемости, а также показатели стандартизации и унификации, патентно-правовые показатели и др.
Органолептический метод состоит в использовании информации, получаемой в результате анализа ощущений от органов чувств человека: зрения, слуха, обоняния, болевых ощущений, осязания и вкуса. При этом методе значения показателей находятся путем анализа полученных ощущений с учетом имеющегося опыта, и выражаются они в баллах. Органолептическим методом определяют такие показатели свойств, как эргономические и эстетические.
Расчетный метод основан на использовании теоретических или эмпирических зависимостей для определения численных значений показателей качества. Этим методом пользуются при проектировании и конструировании техники, когда разрабатываемое изделие еще не может быть объектом экспериментальных исследований.
Традиционный метод заключается в том, что определение значений показателей качества осуществляется соответствующими должностными лицами специализированных подразделений предприятий (испытательные лаборатории, станции, полигоны, конструкторские отделы, службы качества и др.).
Экспертный метод определения значений показателей свойств основан на использовании обобщенного опыта и интуиции специалистов-экспертов. Он применяется в тех случаях, когда невозможно или очень затруднительно использовать более объективные методы, например, измерительный или расчетный. Однако часто экспертный метод является единственно возможным при измерении показателей качества, например, при оценке эстетических свойств продукции. Экспертные методы применяют не только для оценки показателей качества, но и на других ступенях основной схемы квалиметрии. Их используют при выборе номенклатуры показателей, назначении коэффициентов весомости и др.
Социологический метод определения значений показателей осуществляется с помощью опроса не экспертов, а фактических или потенциальных потребителей продукции. Сбор мнений потребителей производится с помощью распространения специальных анкет-вопросников, а также путем организации конференций, выставок, аукционов и т.п.
2.2.5. Определение коэффициентов весомости показателей
На каждом уровне дерева свойств оценивают относительную весомость (значимость) единичных и комплексных показателей. В литературе описано несколько методов определения коэффициентов весомости с помощью экспертов. В данной работе используется способ парных сравнений как самый распространенный и надежный. Сущность способа заключается в следующем.
Берут показатели одной группы, подлежащие оцениванию. Строят таблицу размерностью n´(n-1), где n – число показателей в группе. По левой и верхней сторонам таблицы заносят названия (или просто номера) показателей. Удобно записывать первым наиболее значимый, по предварительному суждению эксперта, показатель и далее – по убыванию значимости. Такое расположение облегчает проверку внутренней непротиворечивости индивидуальных оценок эксперта, ибо числа в каждой строке должны монотонно убывать слева направо. Если они возрастают, то оценки эксперта внутренне противоречивы.
Наиболее значимый показатель оценивают в 10 баллов. Сравнивая его со вторым показателем, последнему проставляют в первой строке (в ячейку (1,2)) оценку в баллах, соответствующую его значимости, например, 6 баллов. После этого первый показатель сравнивают с третьим и т.д. Закончив заполнение первой строки, таким же способом заполняют вторую, принимая на этот раз весомость второго показателя в 10 баллов и т.д.
Пример заполненной экспертом таблицы для группы единичных показателей, характеризующих микроклимат на рабочем месте, приведен в табл. 1
Таблица 1
Вид индивидуально заполненной матрицы парных сравнений
| Показатель | 2 | 3 | 4 | 5 |
| 1. Температура воздуха | 6 | 4 | 3 (2,5) | 2 (1,5) |
| 2. Освещенность | 8 | 4 | 2 | |
| 3. Подвижность воздуха | 5 | 3 | ||
| 4. Уровень вибрации | 6 | |||
| 5. Уровень шума |
Примечание. Числа в скобках – после уточнения.
Заполнение таблицы выполняют не менее 3-х экспертов. Как видно из описания способа, контрольная операция состоит в том, что при сопоставлении значимости каждого объекта с каждым появляется возможность несколькими путями рассчитать оценки значимости показателей и затем сопоставить полученные оценки между собой. В данной курсовой работе в качестве эксперта выступает сам студент, поэтому таблица заполняется только один раз.
Обработка данных заключается в следующем:
1) Вычисляют относительные оценки весомости каждого показателя несколькими путями.
2) Если относительные оценки весомости некоторого показателя у одного эксперта, полученные различными путями, расходятся больше, чем на 0,2 – проводят повторный опрос эксперта, указывая ему на обнаруженное несоответствие.
3) Если относительные оценки весомости одного и того же показателя у разных экспертов расходятся более, чем на 0,2, то проводят обсуждение расхождений и корректируют индивидуальные оценки.
4) Если значение нормированного коэффициента весомости некоторого показателя составляет менее 0,1, то данный показатель исключают из дерева свойств и проводят перенормировку коэффициентов по оставшимся показателям.
5) Вычисляют среднее значение коэффициентов весомости по всем экспертам, что и дает окончательную оценку весомости.
В качестве примера рассмотрим заполненную индивидуальную таблицу (табл. 1). Отношение весомостей показателей следующее:
Таблица 2
Отношение весомостей показателей
| По строке | (2):(1) | (3):(2) | (4):(3) | (5):(4) |
| 1 | 0,6 | 0,67 | 0,75 | 0,67 |
| 2 | 0,8 | 0,5 | 0,5 | |
| 3 | 0,5 | 0,6 | ||
| 4 | 0,6 |
Как видно, только для отношения (4):(3) имеет место недопустимое расхождение. Предположим, что после указания на это расхождение, эксперт поставил в ячейке (1,4) значение 2,5 балла и, чтобы не изменилось соотношение четвертого и пятого показателей, в ячейке (1,5) – 1,5 балла (числа в скобках в табл. 1). Тогда получаем внутренне согласованные оценки и рассчитываем индивидуальные средние.
Таблица 3
Отношения весомостей с рассчитанными средними значениями
| По строке | (2):(1) | (3):(2) | (4):(3) | (5):(4) |
| 1 | 0,6 | 0,67 | 0,63 | 0,6 |
| 2 | 0,8 | 0,5 | 0,5 | |
| 3 | 0,5 | 0,6 | ||
| 4 | 0,6 | |||
| Средние | 0,6 | 0,73 | 0,54 | 0,57 |
Рассчитываем индивидуальные нормированные коэффициенты весомости: