Класификация и характеристика на експертните методи. Експертен метод за оценка на стоки

Експертни методи - методи за оценка, извършени от група експерти при условия на несигурност или риск.

Експертни методи се използват за определяне на номенклатурата на качествените показатели, коефициенти на тежестта им, за измерване на качествени показатели и оценката им по органолептичен метод. Оценката на показателите за качество чрез измерване, регистриране, методи за изчисляване се използва за определяне на комплексни показатели за качество на различни нива от йерархията.

Предназначен за партньорска проверкастоки в случаите, когато други, изброени по-рано методи са неприложими или неикономични.

Експертните методи се основават на вземане на евристични решения въз основа на знанията и опита, натрупани от експерти в определена област в миналото.

Експертните методи имат определени предимства и недостатъци.

Предимствата са, че позволяват вземането на решения, когато обективните методи не реагират. Други предимства включват тяхната възстановимост. Обхватът на приложение на тези методи е не само оценката на качеството на стоките, но и изследването на операциите от технологичния цикъл, вземането на решения, мениджърите, прогнозирането.

Експертните методи, прилагани от квалифицирани експерти, ви позволяват да дадете точна оценка на стоките. Проведените експерименти показват, че при правилна техникаекспертна преценка, грешката на резултатите е 5-10%, което се допуска за методи на измерване. Експериментално получените резултати от експертни оценки в различни групи експерти показаха тяхната доста висока възстановимост.

Недостатъците на експертните методи включват субективност, ограничено използване, високи разходи за тяхното прилагане.

Субективността на експертните методи е следствие от факта, че експертната оценка се извършва от всеки експерт поотделно и представлява, по мнението на Е. П. Райхман и Г. Г. Азгалдов, „нищо повече от неговата психологическа реакция към физико-химичните характеристики на продукт." Трябва обаче да се има предвид, че експертната оценка се състои от мнения на няколко експерти, всеки от които е не само специалист в определена област на знанието, но и потребител. Следователно експертната оценка до известна степен отразява и мненията на потребителите, което е невъзможно да се приложи с други методи.

Поради значителна субективност, експертните методи имат определени ограничения. използването им е рационално в два случая: първо, когато поставените пред експертите цели не могат да бъдат решени с други методи; второ, когато наличните алтернативни методи дават по-малко точни и надеждни резултати или са по-скъпи.

За отстраняване на този недостатък експертните методи се комбинират с други методи при извършване на стокова експертиза. Най-често експертни и органолептични методи се използват заедно. Освен това при разработването на скали за органолептична оценка, избора на номенклатура от качествени показатели, определяне на коефициенти на тежест, експертните методи са незаменими.

Експертните методи се разделят на три подгрупи: 1) методи за групово проучване на експерти; 2) математически статистически методиобработка на експертни оценки 3) методи за експертна оценка на показателите за качество.

Всяка група експертни методи от своя страна се подразделя на видове и разновидности. Класификацията на експертните методи е показана на фиг. 1.3.

Ориз. 1.3. v

Методи на групово проучване на експерти - методи, базирани на провеждане на проучване на група експерти с последващ анализ и обработка на получената от тях информация.

Целта на тези методи е да се получи партньорска проверка за окончателни решения.

Основата за избора е необходимостта от вземане на трудни решения в ситуация на несигурност или изготвянето на научно обоснована прогноза, която изисква участието на група от независими и компетентни специалисти в тясна област или много области на знанието (напр. познания за хомогенна група стоки или всички хранителни продукти).

Основните предимства на груповата партньорска проверка са възможността за цялостен анализ на количествените и качествените аспекти на проблемите на определяне и/или прогнозиране. индивидуални характеристикистоки или тяхната комбинация. Взаимодействието между експерти може значително да увеличи количеството обобщена информация, притежавана от група експерти, в сравнение с информацията на всеки член на групата. Освен това броят на факторите, взети предвид при груповата оценка и влияещи върху ефективността на решението, е по-голям от сбора на факторите, взети предвид от един експерт. При груповата оценка има по-малко грешки при вземането на ключови решения и показатели, които не са значими за решаване на проблема. Ето защо важно предимствогруповата оценка е способността да се получи обобщен резултат.

Недостатъците на груповите оценки включват: трудност при получаване на надеждна и последователна оценка; получаване на нееднакви отговори на един и същ въпрос с голяма разлика в мненията поради различната компетентност на експертите; получаването на недвусмислени отговори не гарантира тяхната валидност и надеждност и е невъзможно това да се провери по време на изпита; повече невярна информация от група експерти, отколкото от отделен експерт може да доведе до значителни грешки в крайните резултати; възможността за конфронтация, когато отделни експерти поради несигурност или други причини могат да се съгласят с мнението на мнозинството.

Въпреки тези недостатъци експериментално е установено, че при спазване на определени изисквания груповата оценка е по-надеждна от индивидуалната. Тези изисквания включват: приемливо разпределение на рейтингите; групова надеждност; изготвяне на експертиза.

Ефективността на изследването зависи от точността и надеждността на получените резултати, тоест от използваните методи и от квалификацията на експерта. Изборът на експерта е предизвикателна задача, най-често се вземат предвид няколко лични свойства: компетентност - професионална и качествена, интерес на вещото лице към резултатите от експертизата, отношение към казуса, обективност. Черти като склонност към риск и други психологически характеристики почти не се вземат предвид.

Все още не е разработен системен подход за оценка на качеството на експерт; съществуващите методи за оценка са разделени на пет групи:

Евристичен;

Статистически - оценки, които се получават в резултат на анализа на експертни оценки с определяне на отклонения от средните стойности;

Тест - оценки, получени в резултат на изпълнение на тестови задачи от експерти;

Документални - оценки на компетентността, получени при анализ на индивидуални документални данни от извършени експертизи;

Комбинирани - оценки, получени по време на анализа на данните, получени чрез комбиниране на изброените методи.

Евристичен оценките включват самооценка и оценка от екип от експерти. Самочувствието най-често е субективно; за намаляване на субективността се използва точкова скала за индивидуални свойства на експерт. Самооценката се извършва според видовете стоки и показателите за качество, например естетиката на продуктите, експертът оценява себе си чрез разпит. Въпросникът включва честотата на запознаване със съвременните домашни и чужда литература, с модерни мостри на продукти, с резултатите от проучвания на общественото мнение.

Като вид самооценка те използват метода на оценка чрез аргументация и запознаване с продуктите, които се анализират. Оценяването се извършва с помощта на въпросник с определяне на коефициента на компетентност.

Като се използва резултати от тест възможно е да се оценят такива важни свойства на експерт като качествена и професионална компетентност, обективност. Качествената компетентност при извършване на сензорна оценка се състои в множество интервюта с експерти за определяне на коефициентите на тежест няколко пъти и за определяне на надеждността на оценките.

Професионалната компетентност се тества под формата на контрол, способност за използване на различни видове скали за оценка - ред, връзки, интервали, както и способност за разграничаване на значителен брой характеристики, градации при оценка на свойствата на анализирания продукт.

С участието на експерти в колективната оценка и обсъждане се наблюдава явлението конформизъм, тоест експертът попада под влиянието на заключенията на други експерти, което се отразява негативно на формирането на обективна оценка на експерта. Следователно умението за придържане към мнението и защита на заключенията има положителна стойност при изследването по колективен метод и формиране на обективна оценка.

Експертни методи оценките на качеството се основават на използването на експертна преценка. Те се използват, когато е невъзможно или нецелесъобразно, неефективно използване на методи за измерване или изчисление. Това се случва, когато има липса на информация, необходимост от прилагане и разработване на специални технически средства, при оценка на естетически качествени показатели и други подобни. Експертните методи могат да се комбинират с други методи или да се използват като самостоятелен вид при оценка на качеството на регулаторните документи за продукти и продукти, определяне на номенклатурата на показателите и техните тегловни коефициенти, при избора на основни образци и показатели за качество, по време на определянето и измерване на качествени показатели по органолептичен метод по време на оценяване на единични и комплексни качествени показатели, определени по метода на измерване или изчисляване.

Основата за експертна оценка на качеството е обективната обществена полезност на продукта, която отразява неговата модерност. Мнението на квалифициран експерт за качеството на продуктите отговаря на обществените нужди и съвпада с мнението на масовия потребител.

При избора на продукт обаче потребителят се придържа към консервативна позиция и внимателно приема новите продукти, а понякога изобщо не ги възприема. В заключението на експертите за качеството на продукта се обобщава набор от мнения на потребителите на продукта. Проучванията показват, че записаните оценки за качеството на стоките от експерти съвпадат с оценките за качеството на продуктите, получени при масово проучване на потребителите. Определянето на точността на експертните изследвания за съответствие с методиката на изследването показа, че тя е 5-10%.

По отношение на качеството на продукта, неговите потребителски свойства се използват експертни методи в такива случаи:

Определяне на номенклатурата на показателите при прегледа;

Избор на критерии за оценка на продукт или продукт и поставяне на индикатори по принципа на йерархията;

Определяне на тегловните коефициенти на качествените показатели за определяне нивото на качество на продукт, стоки;

Изследване на показателите по органолептичен метод чрез методи за тяхното количествено изразяване;

Оценка на показателите за качество чрез измерване, регистрация, методи за изчисляване за определяне на комплексни показатели за качество на различни нива от йерархията.

Най-често използваните експертни методи са:

Водещ експерт (единичен);

Комисионни;

комбинирани.

Методът на водещия експерт дава възможност за бързо провеждане на изследване, намаляване на времето за процедурата на координация и обсъждане и обработка на статистически данни от членовете на групата. Въпреки това, резултатите от изпита, извършен от един експерт, зависят от нивото на неговите професионални познания, личност и ниво на компетентност.

Методът на експертните комисии включва участието на група специалисти, които извършват анализа и оценката. Този метод ви позволява да получите надеждни, обективни резултати, но изисква значителна инвестиция от време за подготовка и организиране на изследването. Броят на експертите, които формират комисията, зависи от изискваната точност и достоверност на резултатите от прегледа. Експертната комисия се състои от две групи – работна и експертна. Работната група изготвя, организира и провежда експертна оценка на качеството на продуктите, последващ анализ на резултатите от нея. Работната група включва организатор, консултант, който има професионални познания за продукта и се оценява от технически работници. Експертна група може да се състои от няколко подгрупи, всяка от които е специализирана в решаването на съответните задачи - определяне на обхвата от показатели, оценка на отделни групи показатели и др.

В някои случаи се използва комбинираният метод, който се основава на последователното използване на работата на водещ експерт и малка експертна комисия.

в Общата класификация няма експертни методи. Въпреки това се използва класификация в зависимост от съотношението на количеството данни, получени чрез експертен или аналитичен метод, метода за получаване на информация от експерт и някои други фактори.

В зависимост от метода за получаване на информация от експерт се разграничават следните методи:

Колективна;

Индивидуален.

При колективния метод техникът провежда проучване на цялата група експерти наведнъж, при индивидуалния метод - всеки експерт поотделно. Получавам надеждни резултатинеобходимо е ясно и правилно да се постави целта и задачите пред експерта, при груповия метод е трудно, но е възможно при трайно формиран състав на групата. При индивидуален метод се използват интервюта, въпросници за интервю, въпросници и смесени въпросници. Анкетата може да се проведе лично или задочно. При метода лице в лице експертът изразява мнението си пред лицето, което провежда анкетата. При задочна анкета няма контакт между тях и експертът сам попълва въпросника или анкетната карта.

По време на интервюто техникът прави отметка под формата на разговор, който преминава през програмата и конкретен списък с въпроси. По време на интервюто-въпросник списъкът с въпроси е по-специфичен, насочен, последователността на въпросите е строго дефинирана. Анкетата се попълва в присъствието на експерт.

Въпросникът се отличава с факта, че експертът попълва въпросника самостоятелно, като има обяснителна бележка за попълване. Смесеният въпрос включва предварително обяснение на експерта при попълване на въпросника с изясняване на проблема.

По информационно съдържание най-големите възможностиимам методи за интервюиране, интервюта - въпросници, въпросници. Най-голямата независимост на преценките е характерна за метода на въпросника.

За решения трудни ситуациинеопределеност или при формирането на научно-техническа прогноза, проверката изисква участието на група ерудирани специалисти, познаващи много области на знанието. Основното предимство на колективната оценка е способността да се анализират количествените и качествените аспекти на проблемите по изчерпателен начин. Има проблеми, които не могат да бъдат решени без участието на специалисти. Приема се, че мнението на група експерти е по-надеждно от мнението на отделно лице, тоест две групи от еднакво компетентни експерти са по-склонни да намерят обективно решение.

Комбинацията от операции за подготовка и провеждане на интервюта на експерти, както и технически операции позволи създаването на няколко експертни метода, които са получили най-голямо признание и разпространение. Те включват Delphi, PATTERN и комбинираните методи.

Делфи метод (в някои източници - Delphi) - метод за интервюиране на експерти, базиран на последователно прилагани процедури, които са насочени към формиране на групово мнение за процедури с недостатъчна информация.

Методът Delphi е разработен в американската изследователска компания RAND Corporation от W. Helmer, N. Dolky и T. Gordon. Използван е за военно научно и техническо прогнозиране на бъдещето. Терминът Делфи идва от името на град в Гърция, където оракулите са живели в храма на бог Аполон.

Особеностите на метода Delphi са: отказ от съвместна работа на експерти; анонимност на оценките; регулируема обратна връзка; групов отговор.

Отказът на експертите да работят заедно и анонимността се постига чрез факта, че всеки експерт изразява мнението си във въпросника, без групова дискусия. Използват се и други техники на индивидуален въпрос, например отговорите на въпроси се въвеждат от експерти в компютър. Това ви позволява да намалите несъответствието между индивидуалните оценки и да получите групов отговор, който правилно отразява мнението на всеки експерт.

Анонимността на анкетата намалява конформизма на авторитарното влияние на определени доминиращи експерти, а регулираната обратна връзка намалява влиянието на индивидуалните и групови интереси. Въвеждането на обратна връзка повишава и критерия за обективност и надеждност на оценките.

При използването на този метод за целите на експертна оценка на качеството на потребителските стоки се оказват следните недостатъци: сложността на интервюирането на експерти и попълването на въпросници, сложността на оценката поради големия брой показатели за качество (понякога до 20-40) и попълване на няколко въпросника (3-10), тромави записи с обяснения поради липсата на пряк контакт между организатора и експертите.

Методът е перспективен за получаване на групова експертна оценка и задълбочен анализ на събития в ситуации на несигурност.

PATTERN метод - метод за интервюиране на експерти, основан на изграждане на йерархична структура - дърво от цели - и вземане на решения за тези цели след открита дискусия.

Името на метода се състои от първите букви на английските думи, които означават „Помощ при планирането чрез количествено определяне на технически данни“.

Методът е разработен в американската фирма Honquell за оценка на проекти на нови оръжейни системи. Методът има аналози: ПРОФИЛ, във Франция - методът на KPI, PROPLEN и други подобни.

Методът PATTERN включва няколко етапа.

I етап - постановка на основния проблем, който трябва да се реши, и разделянето му на редица второстепенни задачи от първи, втори и т.н. ред, които след това се разделят на по-тесни задачи. Разделянето продължава, докато се получат прости елементи, които могат да бъдат оценени от експерти.

В резултат на това разделение се получава йерархична структура от свързани основни, второстепенни проблеми и задачи, наречена дърво на целите.

II етап - определяне с помощта на експерти на коефициентите на тежест (или значимост) на всяка задача спрямо основната цел, докато експертите вземат решение след открито обсъждане в експертната група.

Такава открита дискусия, наред с положителен фактор - взаимодействието на експерти, които се стремят да вземат положително решение - има и Отрицателни последиципоради конформизъм, тоест изкривяване на реалното мнение на експертите поради внушение или адаптиране към мнението на мнозинството.

III етап - използването на компютър за обработка на получените данни и техния анализ. Предимството на метода PATTERN е опростяването на процедурата на експертно проучване. Недостатъци: липса на обосновка за оптимален брой членове на експертната група, както и методика за подбор на компетентни специалисти за експертната група; обработка на резултатите от анкетата без отчитане на различията като отделни експерти; отсъствието на бариери пред проявлението на конформизма на експертите; недостатъчно развитие и неопределеност на принципите за конструиране на дървото на целите.

Тъй като методите Delphi и PATTERN имат значителни недостатъци и не отговарят напълно на целите на партньорската проверка, Oe. L. Raikhman и G. G. Azgaldov предложиха комбиниран метод, при който бяха използвани положителните характеристики на други експертни методи и бяха изключени техните недостатъци.

Комбиниран метод - метод, базиран на комбинация от индивидуални и колективни експертни оценки.

Предимствата на комбинирания метод са достатъчна гъвкавост, която дава възможност за отстраняване на грешки при интервюиране на експерти и повишаване на надеждността на резултатите от изследването, ясно дефиниране на стратегията чрез класифициране на задачите според степента на важност и операциите за тяхното изпълнение, висока възпроизводимост на резултатите.

Недостатъците на метода включват липсата на работа, което изисква значителна инвестиция на време и пари. Този недостатък обаче се изплаща с повишена надеждност и възстановяване на резултатите.

За оценка на качеството на стоките, комбинираният метод има общ алгоритъм на експертни операции:

1. Подготвителен етап:

Формиране на работна група;

Формиране на експертна група;

Класификация на продуктите и потребителите;

Изграждане на структурна диаграма на показателите за качество.

2. Етап на получаване на индивидуални експертни оценки:

Избор на процедурата за назначаване на оценки от експерти;

Избор на метод за получаване на информация от експерт и изготвяне на документи, необходими за проучване;

Проучване на експерти.

3. Етап на получаване на колективни експертни оценки:

Обобщения на индивидуални експертни оценки;

Определяне последователността на индивидуалните експертни оценки;

Определяне на обективността на колективните експертни оценки.

За всеки етап има съответни задачи. През периода подготвителна фазарешават се задачи като определяне на функциите и структурата на работната група, нейния количествен състав и отговорностите на отделните членове. Определят се и се разработват принципите за формиране на експертна група: по отношение на броя на експертите, тяхната професионална подготовка и др.

На втория етап се определя техниката на интервюиране на експерти, оценява се наличието на контакт между експертите, методът на предаване на информация и формата на експертни оценки. Оценителите могат да определят оценките сами или след обсъждане с други експерти или запознаване с анонимни експерти. Оценките са обосновани, определени в количествен вид и дихотомични, като отговорите се дават под формата "да", "не" или 0-1.

Рационалното използване на информацията, получена от експерти, е възможно, ако се преобразува във форма, удобна за анализ, подготовка и вземане на решения. Възможностите за преобразуване на информация в подходящи форми зависят от специфичните характеристики на обекта, пълнотата на данните за него, надеждността, нивото на вземане на решения, както и от приетия критерий, зависи от изследвания проблем.

Един от елементите, общи за много експертни методи, е коефициентът на тежест.

Коефициентът на значимост е количествена характеристика на степента на значимост на конкретен показател за оценка на качеството.

Определянето на тегловните коефициенти на качествените показатели се извършва по експертен метод. Коефициентите на тежест са предназначени да повишат надеждността на експертната оценка на качеството на стоките.

Всеки индикатор заема определено място в номенклатурата на показателите за качество по важност. Експертите подреждат показателите по степен на значимост на базата на професионални знания и умения. Освен това всеки квалифициран експерт се стреми да оцени показателите за качество на изследваните стоки от гледна точка на масовия потребител.

Ако експертът има способността да сравнява и оценява възможни вариантидействия, давайки на всеки от тях определен брой, тогава той има определена система или скала от предпочитания. Правилното прилагане на скалите е от съществено значение за гарантиране на точността на експертните преценки. Различават се следните видове везни: номинален, порядков, интервал, отношения. Но мащабът на поръчката има най-големи предимства пред останалите поради относителната простота на експертната оценка на показателите за качество по отношение на степента на значимост. Характеристиките на везните са дадени в табл. 1.1.

Скала на номиналните номинали използвани за разграничаване на един обект от друг. Обектите трябва да бъдат номерирани, но числата показват обект, а не неговата количествена характеристика. Това е по-прост тип измерване, при което числа или символи се използват само за класифициране на обекти. Скалата може да се използва за цифрово кодиране на отделни свойства във въпросници, за определяне на коефициентите на тежест.

Редна скала (рангове) - такъв метод на оценка, при който параметрите, показателите или обектите, които се оценяват, са подредени в реда на нарастване или намаляване на показателя на параметъра (показателя) или свойствата на обекта. Класически пример за оценка с помощта на порядкова скала е оценката на твърдостта на минералите по скалата на Мопс (скалата за относителна твърдост се състои от 10 стандарта за твърдост, като твърдостта на талка се приема за 1, диаманта - 10). Този метод може да се използва за определяне на интензивността на цвета на брашното, аромата на плодови сокове, букета от вина, консистенцията на сирената. Ординалната скала има предимства, когато се използва за определяне на коефициентите на тежест, тъй като опростява процеса на подреждане на показателите за качество според тяхната важност за потребителите.

маса 1.1. Видове везни и техните характеристики

Тип скала	Определение на мащаба	Отношенията, дадени на скалата
Номинален	Прост тип измерване, при което числа или символи се използват само за класифициране на обекти.	Еквивалентност (=)
Пореден (ранг)	Обектите от един клас са в съответна връзка с 3 обекта от друг клас (повече от, повече предимства, по-силни и т.н.). Ако [A]> [B] за някои обекти от класове A и B, тогава има частично подреден мащаб.	Еквивалентност (=). По-голямо от (>).
Интервал	Ординалната скала, която е разделена на известни разстояния между произволни две числа на скалата, нулевата точка на скалата и мерната единица се избират свободно.	Еквивалентност (=) По-голяма от (>). Известно е съотношението на всеки два интервала.
Връзка	Интервална скала, използваща истинска нулева точка, съотношението на всеки две точки е независимо от единицата.	Еквивалентност (=). По-голямо от (>). Определя се съотношението на всеки два интервала. Връзката между всякакви две точки се определя.

При определяне на тегловните коефициенти на качествените показатели експертите първо оценяват най-важния от тези индикатори (според тях) и му приписват определен брой, например 1. Всички следващи показатели се оценяват в убиващ или възходящ ред по важност.

След това данните на всички експерти се осредняват за всеки показател.

В практиката на оценка на качеството на стоките често се използва метод за определяне на коефициентите на тежест, наречен „метод с фиксирана сума”. Същността му се състои във факта, че експертите определят коефициент на тежест на показателите, включени в индикатора на горното ниво, като сумата от тези коефициенти трябва да бъде равна на предварително определено число.

„Методът с фиксирана сума” е целесъобразно прилаган само ако няма Голям бройиндикатори.

Практическият опит показва, че при експертната оценка на качеството на стоките е препоръчително да се приложи следната процедура за определяне на тегловните коефициенти.

1. Предварително класиране от експерти на показатели от хомогенна група. Ранг 1 се присвоява на най-важния индикатор, 2 на следващия по важност и т. н. Ако индикаторите са с еднаква важност, тогава им се присвояват едни и същи ранги. Броят на индикаторите в една хомогенна група трябва да бъде 4 или повече. Ако броят е по-малък, класирането не се извършва.

2. Определяне от експерти на коефициентите на тежестта на показателите. На индикатора от 1-ви ранг се приписва коефициент на тежест 10. Коефициентът на тежест на следващия по важност показател се определя като дял от значимостта на първия показател. При определяне на третия и следващите показатели се взема предвид тяхното значение в сравнение с предишните. В резултат на тези последователни действия експертът определя тегловните коефициенти на единични и след това комплексни показатели за качество.

3. Запознаване на експертите със стойностите на коефициентите на тежест (техните обосновки), определени от други експерти.

Обосновката на коефициентите на тежест е много трудоемка операция, поради което се използва с ограничен брой показатели (около 10-15). В противен случай експертите се приканват да предоставят обосновка само за някои показатели по своя преценка.

4. Осредняване на стойностите на коефициентите на тежест, определени от всички експерти. Извършва се от технически работници чрез изчисляване на средноаритметичната или среднопретеглената.В последния случай се взема предвид цялостна оценка на качеството на експерта.

Недостатъците на скалата са неточността на ранговите оценки за отсъствието на уравнението на интервалите, невъзможността да се изчисли дори средноаритметичната стойност.

Интервална скала. Това е метод за оценка, при който съществена характеристика е разликата между стойностите на оценените параметри, която може да бъде изразена с броя на единиците, предвидени от тази скала. С помощта на такава скала обектите се подреждат, а също и в определени единици се установява с колко един обект е по-голям от друг. Пример за интервална скала е скалата на Целзий, която е разделена на 100 равни интервала и се използва за характеризиране на такива свойства на продукта, които са свързани с температурни условиянапример устойчивост на замръзване на синтетична кожа, минимална температура фризерв хладилник.

Скала на взаимоотношенията ви позволява да постигнете най-високото нивоизмервания. Това е метод за оценка, при който се използва мерна единица, използва се за повечето параметри, които са физически величини: размер, тегло, плътност, сила, напрежение, честота и други подобни. Резултатите от измерванията в скала имат свойствата на числа, които могат да бъдат статистически обработени. Пример за такава скала е температурната скала на Келвин, която започва от абсолютна нула.

При сравняване на скалата на интервалите и съотношенията се установи, че с помощта на последните се получават по-точни резултати. В допълнение, оценките, получени по скалата на интервалите, могат да се използват за изчисляване на среднопретеглените стойности, чиито изчисления са типични за експериментални изследвания. Мащабът на отношенията може да бъде основен за експертния метод, мащабът на реда може да се приложи с достатъчна обосновка.

В практиката на експертната оценка се използват два основни вида скали – размерни и безразмерни. Данните на безразмерните скали се изразяват във части от единица, проценти, точки.

Математическите и статистически методи за обработка на експертни оценки са методи, предназначени да повишат надеждността на резултатите от оценката на качеството на стоките от експерти.

Те са категоризирани в четири подгрупи: класиране, директни оценки, последователни предпочитания и сравнения по двойки.

Обхват - метод, основан на подреждането на обектите на изследване във възходящ или убиващ ред.

Проектиран за решаване на много практически проблеми, когато обектите, които определят крайните резултати, не са директно измерими. Освен това отделните обекти, характеризиращи се с различна природа, са несъвместими, тъй като нямат обща мярка за сравнение. Основа за класиране е необходимостта да се поръча всеки обект във времето и пространството, както и в съответствие с измереното качество, без да се правят точни измервания. И накрая, в ситуация, в която качеството, което се измерва, по принцип не може да бъде измерено по практически и теоретични причини.

Процедурата по класиране се състои в подреждане на обекти от експерт в най-рационалния ред и присвояването им на определен ранг под формата на естествено число. В този случай ранг 1 се дава на най-важния обект, а ранг n - на най-малко важния. В резултат на това се получава скала на порядъка, в която броят на ранговете е равен на броя на обектите.Ако два обекта имат еднакви ранги, тогава им се приписват така наречените стандартизирани рангове, които се изчисляват като средна стойност от сумата от местата на обекти със същите рангове.

Например на шест обекта се присвояват следните рангове:

Обекти 2 и 5 си поделиха 2-ро и 3-то място. техният стандартизиран ранг ще бъде

(2 + 3) /2 = 2,5.

Субектите 3, 4 и 6 са изравнени за 4-то, 5-то и 6-то място, като стандартизираният им ранг е 5:

(4 4-5 + b) / 3 = 5. Резултатът е следното класиране:

Методът за класиране рядко се използва в най-чистата му форма. Най-често се комбинира с метода на директна оценка или неговите модификации (класиране по сбор от оценките, комбиниран метод и др.).

Метод на директна оценка е, че диапазонът на промяна на всяка количествена променлива е разделен на няколко интервала, на всеки от които се приписва определен резултат в точки, например от 0 до 10. Скалата на оценките може да бъде положителна и отрицателна, например от + 3 до -3 трябва да включва всеки обект в определен интервал в зависимост от неговата стойност. Броят на интервалите, на които е разделен целият диапазон от вариации на качеството, може да бъде различен за различните експерти. Разрешават се отделни експерти да оценяват същия номеркачествено различни фактори.

В някои случаи е по-удобно да изберете най-предпочитания фактор, като първо се оцени и след това се класира.

Общите оценки на ранговете могат да бъдат нормализирани, това ви позволява да установите по-тясна връзка между оценките, които експертите предоставят на отделни обекти. За целта оценките за всички обекти се сумират и в бъдеще всеки от тях се разделя на получената сума. Изчислените по този начин нормализирани оценки могат да бъдат класирани отново.

При извършване на експертиза от няколко експерти, те се стремят да получат средна оценка за всеки обект. За тази цел нормализираните оценки на всеки обект се сумират, получената сума се разделя на броя на експертите. Вторият начин за определяне на връзката между оценките на факторите е, че на най-важния фактор се дава оценка (установява се тежест) за определен брой 1 или 10, следните фактори се оценяват като пропорция на най-важния фактор. Предимството на метода е, че процесът на избор на оценки е улеснен, тъй като не е необходимо всеки път да се сравнява цялата серия, а само да се вземе предвид стойността на първата и предишната най-важна оценка. Резултатите се осредняват чрез изчисляване на средноаритметичната стойност.

Метод на последователна полза - въз основа на сравнението на отделен обект със сумата от последващи обекти, за да се установи неговата важност. използва се при измерване на нивото на качество, оценка на изпълнението научни организации... Методът има толкова голямо предимство пред другите методи, че дава възможност да се сравняват и измерват качествено различни фактори.

Методът е разработен от В. Чърчман и Г. Акоф и е предназначен за извършване на сравнения, като се вземат предвид определени толеранси.

Редът, в който са представени или групирани резултатите, не оказва влияние върху ползите.

Процедурата за последователно сравнение е както следва. На експерта се представят редица обекти (показатели, фактори, резултати), които трябва да бъдат оценени според тяхната относителна важност (значимост), и той прави класация. Най-важният обект получава оценка от 1, останалите обекти получават оценки под 1 до 0 по реда на тяхната относителна важност. След това експертът определя дали елементът с оценка 1 е по-важен от сбора на последните фактори. Ако важността на обекта е голяма, тогава той увеличава оценката, така че да е по-голяма от сбора на всички останали.

Ако стойността на даден обект е по-ниска от сумата на всички останали, той коригира резултата.

По този начин използваната процедура е да се проверяват систематично оценките чрез последователното им сравняване.

Целесъобразно е да се използва методът на последователните предпочитания, ако броят на сравняваните обекти не надвишава 7. За Повече ▼обекти, те трябва да бъдат разделени на подгрупи, които включват 6 обекта. В случаите, когато това не е възможно, трябва да се използва методът за сравнение по двойки.

Метод за сравнение по двойки - въз основа на сравнението на обектите на изследване по двойки, за да се установи най-важното във всяка двойка.

Използва се за идентифициране на предимства сред значителен брой фактори, проблеми, показатели. Експертите могат просто да правят сравнения с твърдение за превъзходството на един фактор над друг. Възможно е да се използва специална скала от предпочитания, където всяка степен на предимство има своя специфична оценка.

Методът за сдвоено сравнение може да се използва и за установяване на общия ред на факторите.

За да се улесни процедурата, се съставят матрици от сдвоени уравнения, в които всички обекти (фактори) се записват в един и същи ред два пъти: в горния ред и в най-лявата колона. Всеки експерт трябва да постави оценка в пресечната точка на ред и колона за двата сравнявани фактора. В зависимост от това кой фактор е най-важен, тази оценка ще бъде равна съответно на 1 или 0. В главния диагонал на такава матрица се поставят тирета или нули (Таблица 1.2).

маса 1.2.

Всяка двойка фактори може да се сравнява веднъж или два пъти. Съществува различни опциичастично сравнение по двойки: избор на предпочитания обект от предварително групирани двойки; частично сдвоено сравнение на една група обекти с всички останали, докато други фактори се сравняват с някои други; установяване на общия ред на факторите.

Сравненията по двойки понякога се комбинират с предварително класиране на обекти, а сравненията по двойки се използват за изясняване на предимството. отделни обекти... В този случай се изгражда допълнителна матрица, която показва дела на случаите, когато един фактор се оказва по-значим от другия, в общ бройполучените оценки.

Методи за експертна оценка на показателите за качество на стоките- това са методи за определяне на действителните стойности на единични и комплексни показатели за качество.

Предназначени за определяне на стойностите на индикатора за качество чрез изчисление или евристично в случаите, когато използването на методи за измерване е невъзможно или неикономично поради прекомерни разходи за тяхното използване или дълго време за изпитване. Например, при определяне на вкуса и миризмата на храната се използват само органолептични методи. Методите за измерване не дават точни надеждни оценки, въпреки увеличените разходи.

За диференциална и комплексна оценка на проби, които се различават значително по качество, се препоръчва да се определи стойността на единичен индикатор P, както следва:

където P; 5- основа (референтна стойност).

Друг, по-точен метод се основава на изследването на показателите, за да се определят видовете зависимост и, тоест, за да се разработят формули за изчисляване на оценките на показателите:

Оценка на единични показатели за качество започва с определяне на допустимите интервали на тяхната промяна (P; - P;) P; - най-добрата стойност на индикатора, превишаването на която е непрактично или невъзможно. Принципите за определяне на максимално допустимата стойност на даден индикатор зависят от целта на оценката на качеството, като е необходимо този принцип да бъде еднакъв за всички показатели.

Повишавате надеждността на експертните оценки, като разделяте сложните операции на прости, които представляват многоетапна процедура за оценка на допустимите стойности на индикатора. Преходът към всяко следващо ниво се извършва след приемане на съгласувани решения към предишното.

Експертната процедура за определяне на допустимите стойности на показателите за качество се състои от редица операции:

издаване на въпросници и обяснителни бележки на експерти, които изброяват показатели за качество и описват принципите за избор на приемливи стойности на показателите;

попълване на въпросници от експерти и посочване на конкретни модели продукти, чиито стойности считат за максимално допустими;

запознаване на всеки експерт с оценките, посочени от други експерти, и тяхното обсъждане;

провеждане на втори (понякога трети и четвърти) кръг на проучването;

Осредняване на резултатите от оценката.

При съществена разлика в мненията се провежда допълнителен кръг на гласуване. Стойността на индикатора се приема за максимална, ако за него са подадени най-малко 70% от гласовете. Ако това условие не е изпълнено, средната стойност от 50% от най-високите пимакс стойности се приема като максимално допустима стойност;

Да се ​​определи от експерти вида зависимости (и) между стойността на показателите G; и техните оценки за K често се използват от "метода на основната точка". Необходимостта от използването му се дължи на факта, че разделянето на процедурата по оценка на няколко етапа опростява работата на експерта и му позволява да даде оценки на някои характерни точки, въз основа на които може да се изгради модел на действителната стойност.

„Метод на основната точка“ в зависимост от броя им има няколко разновидности.

„Метод на три основни точки“ - базиран на разделяне на стойностите на G индикаторите; за максимални, минимални, средни стойности и определяне на стойностите на оценките P; в тези точки. Интервалът на скалата между максималната и минималната точка се задава предварително (скали 0-1 или 0-10). Задачата на експерта включва и определяне на тенденцията на зависимост в интервала между основните точки и изграждане на графика. След това от графичната зависимост можете да преминете към аналитичната формула за изчисляване на оценките на индикатора за качество Ki "Методът на трите основни точки" ви позволява да разработите само приблизителен модел за оценка.

"Метод на седемте основни точки" - метод за оценка по седемстепенна скала за оценка на показателите, чиито стойности се определят експериментално или чрез изчисление, както и по органолептичен метод.

Скалата от седем точки е еднаква, тоест при преминаване от един качествен клас в друг оценката се променя с една точка. Тези скали са намерили широко приложение, особено за сензорна оценка. За по-точни резултати трябва да отидете на определението за вида на връзката между оценките и точките.

За да се улесни работата на експерт в обяснителна бележкапет графики са дадени към въпросника. Експертът избира кривата (или комбинация от криви), която според него най-добре отразява естеството на зависимостта и След това на всеки качествен клас се присвоява оценка в съответствие с естеството на зависимостта и стойностите на качествените показатели. В този случай е препоръчително да използвате числа в диапазона от 0-10, кратни на 0,5 и класа " най-високо качество"получава оценка 10.

По този начин, изградената от експерта графика характеризира връзката между абсолютните стойности на показателите Pi и техните оценки на K;, а за показателите, оценени по органолептични методи, между класовете по качество и техните оценки.

В заключение резултатите се обсъждат, обработват и анализират. За показатели, които се определят чрез методи за измерване и изчисление, е желателно да се даде аналитично описание на кривите, което ви позволява да изчислите оценка за всякакви стойности на показателите.

Използването на "метод на основните точки" дава възможност за групиране и класифициране на показателите по вид зависимост.

Определянето на сложни показатели за качество се извършва по два вида методи:

методи за цялостна оценка на качеството на мостри от стоки;

методи за конструиране на модели на комплексни показатели за качество.

Методите за цялостна оценка на качеството са два вида – експресен метод и методи за преминаване през нива без подготовка и с подготовка.

Експресни методи за цялостна оценка на качеството на мостри от стоки въз основа на определянето на комплексен показател за качество чрез анализиране на стойностите на отделните единични показатели и външен видбез тяхната предварителна оценка и отчитане на коефициентите на тежест.

При използването на тези методи е необходимо да се има предвид, че ограниченият брой оценени показатели, дори за висококвалифициран експерт, е 7-9 индикатора, разположени на едно и също ниво на йерархията, които съставляват доста хомогенна група. Освен това експертите трябва да вземат предвид важността на отделните показатели, използващи коефициенти на тежест, връзката между тях, както и да разгледат качеството на продукта като система.

Метод за преминаване през нива без подготовка е набор от операции, които се извършват последователно, с постепенно повишаване на нивото. В този случай анализът започва от долното ниво на индикаторното дърво. Като се вземат предвид стойностите на показателите от по-ниско ниво, експертът оценява показателите от по-високото ниво. Тези операции се повтарят с повишаване на нивото до достигане на горното ниво - комплексна (обобщена) оценка на качеството.

Метод на движение по ниво с подготовка въз основа на предварителното определяне от експерти на коефициентите на тежест на показателите за качество и техните оценки. При определяне на комплексни оценки експертът знае средните стойности на коефициентите на тежест и оценките на единични показатели. Процедурата за определяне на комплексни показатели е подобна на процедурата за преминаване през нива без подготовка.

Формализиране на процеса на партньорска проверка е да се намери връзката между стойностите на качествените показатели G; (или техните оценки K) и индикатора за качество от по-високо ниво, тоест при определяне на вида на решаващата функция, която експертите използват при определяне на сложни показатели. В същото време решаващата функция, както всеки модел, опростява обекта на изследване, тъй като не се вземат предвид всички показатели и връзки между тях.

Изходните данни за определяне на вида на функцията могат да бъдат резултатите от оценка на качеството на различни проби чрез експресни методи или методи за придвижване по нива. След това оценките, определени от експертите, се обобщават в обща матрица, всеки ред от които е набор от оценки на единични показатели на извадката и комплексни експертни оценки. Въз основа на това могат да бъдат разработени машинни алгоритми и компилирани програми за намиране на функции за вземане на решения с помощта на компютър.

Механизмът на потребителския избор е доста консервативен, тъй като по правило се основава на използването само на това, което вече се е доказало добре. Той е по-фокусиран върху миналото, отколкото върху възможното бъдеще.

В пазарните условия основата за оценка на качеството на продуктите трябва да бъде обективната обществена полезност на продуктите, която ще отразява нейната прогресивност и съответствие с характеристиките на новия начин на живот. Един от методите, които могат да осигурят точно такава оценка на продукта, може да бъде експертният метод.

Експертен методоценката на качеството на продуктите включва откриване на мненията на експерти.

ЕкспертЕ квалифициран специалист, който отговаря на изискванията за професионална и квалиметрична компетентност, ефективност и обективност, а също така се интересува от работата на експертната комисия.

Използването на експертни методи е рационално, ако има една от двете причини:

· Задачата не може да бъде изпълнена по друг метод;

· Други методи за изпълнение на задачата, или по-малко точни, или по-трудоемки.

Експертните методи, съвместно с други или самостоятелно, могат да се използват за:

· Класификация на продуктите;

· Определяне на номенклатурата на показателите за качество на продукта;

· Определяне на коефициентите на тежестта на отделните качествени показатели;

· Избор на основни мостри на продукти и определяне на стойностите на отделните качествени показатели на тези проби;

· Определяне на органолептични показатели за качеството на оценяваните продукти;

· Определяне на комплексни показатели за качество на продукта.

Привличането на висококвалифицирани експерти за работа в експертни комисии дава възможност да се получи точна и възпроизводима оценка на качеството на стоките. Проведените експерименти потвърждават, че при правилната методика за експертна оценка грешката в резултатите е в рамките на 5-10% и може да бъде напълно съпоставена с резултатите от инструменталните методи.

За оценка на качеството на продуктите по експертен метод се създават експертни комисии. Редът за създаване, целите и задачите на такава комисия се определят със заповед или заповед на ръководителя на министерство, ведомство, сдружение, фирма. Общ алгоритъмОперациите по създаването и работата на експертната комисия, която използва методите на групово проучване, е показана на фигура 7.1.

Работата на експертната група завършва със статистическа обработка на експертните оценки, техния анализ и вземане на информирани решения.

Основните предимства на груповата експертна оценка са във възможността за цялостен анализ на проблемите, свързани с определянето на индивидуалните характеристики на продукта. Взаимодействието между експертите увеличава количеството обобщена информация в сравнение с информацията на всеки член на групата. При групова оценка има по-малък шанс за грешка в крайния резултат от работата. В повечето случаи груповата оценка е по-надеждна от оценката на всеки експерт поотделно.

Работната група изготвя и извършва експертна оценка на качеството на продукта. Неговата задача е да обучава експерти, да подпомага оценката на качеството, да обработва, анализира, обобщава резултатите и да установява колективното мнение на експертите. Започва с избора на експерти и сформирането на експертна група.

Ориз. 7.1. Общ алгоритъм на операциите за създаване и работа на експертна комисия

Експертната комисия се състои от две групи – работна и експертна.

Работната група включва:

· организатор(председател е и на експертната комисия) осигурява методическо ръководство на работата на всички етапи. Той трябва да е квалифициран специалист в областта на методологията за оценка на качеството на продуктите, да познава основите на неговото производство и процесите, които могат да протичат в този продукт, по време на неговото производство, транспортиране и съхранение. Той създава работна група; съставя работна програма; участва в анкета на експерти; анализира резултатите от всяка операция, както и крайните резултати, формулира заключения и предложения въз основа на резултатите от проведената дегустация;

· специалист -това е висококвалифициран служител на фирмата, към който е сформирана експертна комисия. Желателно е той да има универсални познания за продукта, както по отношение на неговото производство, така и по отношение на характеристиките на употреба. Задачата на специалиста е да анализира информацията, получена от експертите, за да коригира по-нататъшната работа на компанията. програмист.Ако оценката на качеството на продукта или обработката на резултатите се извършва с помощта на компютърни технологии, тогава основната задача на този специалист е да разработи програма за извършване на такава работа и последваща обработка на получените резултати;

· технициобясняват разпоредбите на въпросника, ако не са достатъчно ясни за експертите, провеждат тяхното проучване, получават въпросници от експерти, могат да изяснят резултатите, но не трябва да изразяват мнението си по оценката на експертите.

Формиране на експертна група.Организаторът и специалистът съставят списък от експерти (като се вземат предвид официалната позиция, времето и естеството на работа, професията). Групата трябва да включва специалисти от различни области на производство и оценка на качеството на стоките (дизайн, технология на производство, естетика, изследване на качеството).

Експертна група може да се формира от служители на една или няколко фирми, които произвеждат (продават) стоки от тази група. В същото време е необходимо да се вземат предвид тенденциите и възгледите за качеството на продуктите, които доминират в дадена компания, служебната позиция (подчинение) на експертите, създаването и поддържането на психологическия климат в групата. Препоръчително е да се даде предпочитание на създаването на експертна група на базата на една фирма с покана за работа на няколко специалисти от други фирми.

Резултатът от работата на експертната комисия до голяма степен зависи от броя на експертите и тяхната компетентност. Намирането на експерти е изключително трудна задача. Свързано е с факта, че:

· Необходимо е да се вземат предвид индивидуалните способности на експертите, като няма надежден метод за определяне на тези способности;

· Психофизиологичните характеристики на човек не са достатъчно проучени, от което до голяма степен зависи работата на експертите;

· Съществува противоречие между желанието за намаляване на разходите за експертиза чрез използване на ограничен брой експерти за оценка на качеството на широка гама от стоки и желанието за повишаване на точността и надеждността на експертната преценка.

Според Г.Г. Азгалдова и Е.П. Райхман, компетентността на експертите се определя от 4 групи имоти (фиг. 7.2).

Професионална тренировкаосигурява познаване на различни аспекти от проектирането и производството на продуктите, изискванията на клиента, условията и естеството на използване (експлоатация).

Квалиметричниобучението предоставя на експерта ясно разбиране на принципите и методите за оценка на качеството на продукта, познаване на методите за определяне на отделни показатели за качество и способност да ги използва в процеса на практическа работа (използване на различни видове рейтингови скали, способност за разграничават достатъчен брой градации на оценяваните продукти).

Ориз. 7.2. Показатели за компетентност на експертите

Интересексперт в работата на експертна комисия зависи от много фактори:

· Целите на изпита;

· Естеството на заключенията;

· индивидуални характеристикиексперт,

· Заетост на основната работа;

Възможността за използване на резултатите от експертната оценка в своя собствена практическа работа.

Деловивоексперт включва мобилност и еластичност на вниманието (способност за бързо превключване на вниманието от един индикатор към друг); хладнокръвие; ефективност; валидността на заключенията; контакт (способност за работа с хора в конфликтни ситуации); мотивацията за оценката.

Обективностексперт е, че прави заключения въз основа на действителното ниво на качество на оценявания продукт, а не се ръководи от други мнения.

Методи за оценка на компетентността на експертитеразделени на 5 групи: евристични, статистически, тестови, документални и комбинирани.

Евристичен(от гръцки heurisko - търся, отварям) оценката на експерта се основава на оценката на хората около него или самочувствие. Има такива видове евристични оценки: самооценка, взаимна оценка, оценка на работната група.

СамочувствиеТова е метод, при който експертът сам оценява собствената си компетентност. Установено е, че колкото по-висока е средната самооценка на членовете на експертната група, толкова по-висока е надеждността на средната експертна оценка. Междувременно трябва да се има предвид, че резултатите от самооценката почти винаги са субективни, което е недостатък на този метод.

С цел подобряване на точността на резултатите от самооценката се извършва диференцирано. Показателят за самочувствие се определя като функция на два коефициента: информираност и познаване на оценявания продукт и валидност на неговата оценка. T.G. Роднин и Г.О. Vux предлага да се определи осведомеността и познанията на експерта за оценяваните продукти с помощта на „Въпросник за самооценка“ (Приложение А). Във въпросника експертът отбелязва редовността на запознаване с източниците на информация, както и степента на запознаване с оценяваните продукти. Самооценката се изчислява по формулата:

K sam = In esp I ex,

където К е самият коефициент на самооценка на експерта;

В ех - тежестта на показателите за осведоменост и знания;

I ex - оценка, която зависи от степента на информираност.

Пример за изчисляване на самия K е даден в Приложение Б.

Взаимна оценка- това е евристична оценка на експерт, която се дава от други експерти, тя трябва да намали субективността на самооценката на всеки експерт. Известно е, че има връзка между компетентността на експерта и средната оценка, която той е получил от колегите си. Същността на този вид оценка е, че всеки член на експертната група дава оценка на всички останали експерти, след което се изчислява средната оценка на всеки експерт.

Недостатъци на взаимното оценяване:

· Експертите може да не се познават добре;

· Резултатите от оценката могат да бъдат повлияни от взаимни харесвания или нехаресвания;

· Различните експерти могат да възприемат нееднозначно понятието „експертна компетентност”;

· Използвайте взаимна оценка само в онези комисии, където експертите се познават добре;

· Провеждане на анонимна анкета;

· Обяснете, че резултатите от проучването ще се използват само за коригиране на оценките на продуктите.

Експертна оценка от работната група- Това е евристична оценка, която трябва да определи количествено интереса на експерта към експертната оценка и неговото внимание в процеса на интервюто. Оценката се дава от специалисти анализатори, които провеждат анкета на експерти след експертна оценка на продукта. В същото време те оценяват отношението на експертите към експертизата, както и тяхната активност при обсъждане на резултатите. Най-често за такава оценка се препоръчва да се използва оценка от 10 точки.

Статистическа оценка... - това е оценката, получена след статистическа обработка на мненията на експерти за обекта на оценката. Тези оценки се използват за намаляване на грешките, които възникват при експертни преценки. Необходимостта от статистическа обработка на резултатите от изследването се дължи на факта, че за разлика от измерванията, които се извършват с помощта на технически средства и се основават на сравняване на неизвестни стойности с известни, с експертни методи често има няма известна стойност. Освен това върху точността на експертните оценки влияят множество фактори от обективен и субективен характер, в резултат на които възникват системни или случайни грешки.

Систематичната грешка е грешка, която се повтаря отново и отново в процеса. това определение... Основната причина за появата му е недостатъчна или неточна информация от експерти. Тя може да бъде намалена чрез запознаване на експертите с необходимата информация преди началото на работата на експертната комисия. Систематичната грешка може да се определи чрез отклонението на оценката на всеки експерт от средната стойност, получена в експертната комисия.

Случайната грешка зависи от психофизиологичните характеристики на експерта (хладнокръвие, внимание, увереност в собствената си праведност). То намалява, ако експертът често участва в работата на експертни комисии и има практически опит.

Оценяване на обективността на експертТова е оценка на способността на експерта да оцени по невнимание конкретна извадка от стоки. Това е много важна характеристика на експертната компетентност, която значително влияе върху точността на резултатите от експертната оценка.

Резултати от тестпозволяват използването на тестове за определяне на психофизиологичните характеристики на експертите. Те се използват за оценка на обективността, квалиметричността и професионалната подготвеност на експерта. Тестването ви позволява да оцените личностните черти, което не може да се направи по друг метод. Недостатъкът на този метод е невъзможността за сравняване на данните, получени чрез метода на тестване, с данните, получени чрез други обективни методи.

Когато пишете тестове, трябва да се придържате към следните изисквания:

· Експертът трябва да разбира формулировката на тестовата задача и условията, на които отговаря неговото решение;

· Вероятността за произволно отгатване на решението на задачата трябва да бъде близка до нула;

· Тестовата задача трябва да има точен отговор;

· Необходимо е да се обоснове сближаването на тестовата задача и реалните проблеми, които експертът решава при оценка на качеството на продуктите.

Оценка на квалиметрична подготовкаексперт е оценка теоретични знанияметоди за оценка на показателите за качество на продукта и възможността за тяхното използване в практическата работа. Тази оценка може да се извърши чрез устен или писмен контрол на знанията с помощта на тестове.

Малко по-трудно е да се тества такова знание като способността за използване Различни видовескали за оценка, определяне на субективна вероятност, разпознаване достатъчностепени на показателите за качество.

Документална оценка- Това е експертна оценка по документи, които потвърждават съответствието му с установените изисквания. Например може да се потвърди компетентността на експерт Главна информация, които са дадени във въпросника: опит - копие от трудовата книжка; професионално обучение - диплома за професионално образование; специално обучение - свидетелство или удостоверение по установена форма за специално обучение; повишаване на квалификацията - със съответното удостоверение.

Документалната оценка може да бъде само допълнение към други методи за оценка на компетентността на експерт и няма самостоятелно значение. Това се дължи на факта, че част от информацията, която е в документите, дублира други оценки.

Комбинирана оценкавключва използването на различни методи за оценка на компетентността на експертите. Тъй като различните методи на тази оценка имат своите предимства и недостатъци, те споделянеможе да засили предимствата и да смекчи недостатъците на отделните методи.

Контролни въпросии задачи

1. Каква е същността на методите за сензорен анализ на потребителите?

2. Какви условия трябва да се създадат при създаване на дегустационни комисии за оценка на потребителите?

3. Какви правила трябва да се спазват при изготвянето на въпросник за оценка на потребителите?

4. Каква е същността на сдвоените и триъгълни методи на изследване?

5. Каква е същността на аналитичните методи на сензорния анализ?

6. С каква цел най-често се използва методът на отглеждане?

7. Каква е същността на точковата оценка на качеството на стоките?

8. Какви изисквания трябва да се спазват при разработването на точкова система за оценка на качеството на стоките?

9. С каква цел се установяват коефициентите на значимост на качествените показатели?

10. Каква е същността на експертния метод за оценка на качеството на стоките?

11. Кои са основните етапи и операции, които се извършват при експертната оценка.

12. Какви са методите за оценка на компетентността на експертите?

13. Опишете основните методи за оценка на компетентността на експертите (евристични, тестови, документални).

Експертни методи за оценка на качеството на продукта

Име на параметъра	смисъл
Тема на статията:	Експертни методи за оценка на качеството на продукта
Рубрика (тематична категория)	Производство

Методи за оценка на качеството на продукта

Съществуват редица математически методи и свързан софтуер за оценка на качеството на продукта. Те включват:

· Експертна оценка на качеството на продукта, в частност по метода Delphi;

· Оценка на качеството на продукта с помощта на размита логика;

· Оценка на качеството на продукта чрез клъстерен анализ;

· Вероятностни методи за оценка на качеството на продукта;

Най-разпространена е експертната оценка на качеството на продукта.

Експертната оценка на качеството на продукта позволява решаването на редица проблеми, които включват:

· Формиране на експертна група и оценка на компетентността на експертите;

· Избор на метод за експертни измервания;

· Обработка на експертни оценки и установяване степента на съгласуваност на експертните заключения;

· Подобряване на последователността на експертните оценки.

Експертните методи за измерване включват директна оценка, класиране, сравнение по двойки и т.н.
Публикувано на ref.rf
.

Пряката оценка на обектите на експертиза (частни или интегрални показатели за качество на продукта) се състои в присвояване на оценка от експерти по скалите на отношенията (фигура 5.1). Скала на съотношението - ϶ᴛᴏ вид интервална скала с нулева референтна точка. В този случай е допустимо да се използва адитивна конволюция на частични показатели, за да се получи интегрален индикатор за производството. Обикновено се използват 5-, 10- и 100-точкова скала. За обработка на резултатите от експертни оценки се използват статистически методи и следните статистически показатели:

· Медиана – за получаване на средно групово мнение на експерти;

· Горен и долен квартил – за характеризиране на разпространението на експертните оценки;

· Коефициент на съгласуваност – за характеризиране на степента на съгласуване на мненията на експертите.

Ориз. 5.1. Оценка на индикатора за качество на продукта от група експерти

Горният и долният квартил определят границите на оценките, отвъд които се намират 25% от оценките на експертите.

Коефициентът на съгласуваност варира в диапазона от 0 до 1, като 0 е пълно несъответствие на експертите, 1 е пълно единодушие.

Един от най ефективни методиформиране на групова оценка от експерти е методът Delphi.

За да се повиши степента на съгласуваност на мненията на експертите, този метод предвижда многоетапна процедура за интервюиране на експерти.

На първия етап експертите правят своите оценки изолирано. На следващите етапи всеки експерт се запознава с преценките на други експерти, за да коригира евентуално своята оценка. Многоетапната процедура за интервюиране на експерти продължава, докато стойността на разсейването на оценките не е в определените граници.

Характеристиките на метода Delphi са:

· групов характер на изпита;

· Многоетапна процедура за интервюиране на експерти;

· Изолиране на експерти при извършване на оценки на всеки етап;

· Обосновка на експертни оценки по време на дискусията след всеки етап.

Процедурата за допитване по метода Delphi се състои в разпитване на експерти с помощта на персонални компютри, свързани към локална или глобална мрежа с обработка и централизирана обработка на информацията след всеки кръг.

Статистическите софтуерни продукти могат да се използват като софтуер за обработка на експертни оценки. Statistica(разработчик StatSoft) и SPSS (Решение за статистически продукти и услуги- статистически продукти и решения за услуги, разработчик SPSS Inc.).

Важно е да се отбележи, че за координиране на експертните оценки чрез тяхното „изглаждане“ трябва да се използва апаратът на размитата логика, разгледан в точка 5.7.

Експертни методи за оценка на качеството на продукта – понятие и видове. Класификация и характеристики на категорията "Експертни методи за оценка на качеството на продуктите" 2017, 2018 г.

Лекция 7. Особености на технологията на експертна оценка на качеството.

Същността на експертните методи и организацията на работата по използването

в управлението на качеството

Като научен метод експертният метод е разработен сравнително наскоро и се нарича "Делфи". По-късно са разработени и други подобни методи, базирани на експертни оценки. Първоначално експертните методи се използват главно за решаване на проблеми, свързани с прогнозирането в областта на науката и технологиите, а след това започват да се прилагат и в други области, включително управлението.

Същността на експертните методисе състои в осредняване на мненията (преценките) на експертите по разглежданите въпроси, получени по различни начини. Среден резултат (ДА СЕ)се определя по формулата

където н- броят на експертите,

К и - дадена оценка и-м експерт.

Най-често срещаните експертни методи за предкласификация на базата на оценка на предпочитанията са метод на ранг, метод на директно оценяване и метод на сравнение... Последният включва две разновидности - сравнение по двойки и последователно сравнение.

ДА СЕ различни експертни методис известна степен на условност може да се припише на органолептични и социологически. Органолептичен методвъз основа на използването на сетивата (вкус, слух, зрение, мирис, тактилност) на експерт. Използва се при оценяване например на хранителни продукти. Социологически методсе основава на проучване, събиране и анализ на мненията на респондентите (например действителни или потенциални потребители). Такова проучване и събиране на мнения се извършва писмено (с помощта на въпросници) или устно (на конференции, търгове, изложения и др.). При използването му трябва да се прилагат научно обосновани методи на изследване, математически принципи за събиране и обработка на информация. Общото между експертните методи се крие в последователността на процедурите за тяхното използване. Те включват организиране на експертна оценка, събиране на експертни становища и обработка на резултатите.

Намаляването на субективността на резултатите от използването на експертни методи зависи значително от спазването на правилата за организиране, подготовка и провеждане на експертна работа. Това зависи особено от организацията на експертната оценка, назначаването на лице, отговорно за организиране и извършване на работата по експертна оценка, както и сформирането на експертни комисии.

д За общото ръководство на експертната работа се назначава председателят на експертната комисия. Комисията се състои от две групи – работна и експертна (фиг. 1).

Подчинени на ръководителя на работната група са техническите работници, които извършват техническата страна по подготовката на материали за работата на експерти, обработката на получените резултати и др., както и специалисти по решаваните проблеми.

Формирането на експертната група се извършва от ръководителя на работната група, който поставя проблема и определя областта на дейност на групата; съставя предварителен списък на специалистите експерти; анализира качествения състав на предварителния списък с експерти и уточнява списъка; получава съгласието на експерт за участие в работата; съставя окончателния списък на експертната група.

Броят на експертите в група зависи от много фактори и условия, в частност от важността на решавания проблем, наличните възможности и т.н. Подборът на специалисти се извършва въз основа на анализ на качествата на всеки възможен кандидат. . В същото време се използват различни методи: оценка на кандидатите въз основа на статистически анализ на резултатите от минали дейности по качество; колективна оценка на кандидата като специалист в тази област; самооценка на кандидата-експерт; аналитично определяне на компетентността на кандидатите.

Често се използват няколко метода едновременно, например самооценка и колективна оценка на качествата на предложения експерт. Този подход дава възможност за разумен избор на експерти с необходимите качества. Все пак трябва да се признае, че методът за оценка на минали резултати изглежда по-обективен от методите за самооценка и колективна оценка. Във всички случаи кандидатите за експерти трябва да притежават следните качества: професионална компетентност; креативност (способност за решаване на творчески проблеми); научна интуиция; интерес към обективните резултати от експертната работа; ефективност (концентрация, способност за превключване от един вид дейност към друг, комуникация, независимост на преценката, мотивация на действията); обективност.

Провеждането на събиране на експертни мнения включва предварително дефиниране на: място и време; форми и техники; броя на кръговете за събиране на становища, състава и съдържанието на документацията, реда за вписване на експертни становища в документи. Важно е да изберете формата за събиране на експертни мнения.

Сред всички известни форми на събиране на мнения могат да се отбележат индивидуални, колективни и смесени. Всяка от тези форми има разновидности: разпит, интервюиране, дискусия, мозъчна атака, среща, бизнес игра. В много от тях те се използват заедно, което дава повече ефект и обективност. Този подход за събиране на експертни мнения, когато се използва смесена форма, се използва в случаи на неяснота на проблема, несъответствие на индивидуалните мнения или несъгласие на експерти в колективна дискусия.

На практика по-често се използва въпросник, което позволява събирането на експертни мнения с по-малко усилия. Обичайният процес за разработване на въпросник включва:

Определяне на формата и съдържанието на обжалване пред вещо лице;

Избор на вида на въпросите;

Формулировката на въпросите;

Изявление на информация, необходима за експерт;

Разработване на формуляр за въпросник.

През последните години сред видовете въпроси най-често се използват т. нар. ветрило (предполага се един отговор от множество отговори), затворени (отговори „да“, „не“, „не знам“) и отворен (отговорът на въпроса може да бъде даден под всякаква форма) ...

При разпит на експерти е много важно правилно, просто и недвусмислено, накратко и в същото време да формулирате въпросите във въпросниците с необходимата пълнота и да посочите в текста на обяснителната бележка какво точно се изисква от експерта. За да се отговори на въпроси, тоест да се вземе решение от всеки експерт, обективните и (или) субективни измервания на разглеждания обект се извършват в изрична или имплицитна форма. В случай на субективно измерване, експертите по правило използват един от посочените по-рано методи (рангове, директна оценка, сравнения).

Методът на ранговете и пряката оценка.

Според ранговия метод експертът класира (поръчва) изследваните обекти в зависимост от относителната им важност (предпочитание). В този случай на най-предпочитания обект обикновено се присвоява първият ранг, а на най-малко предпочитания - последния, който е равен по абсолютна стойност на броя на поръчаните обекти. Такова подреждане става по-точно с по-малък брой обекти на изследване и обратно.

NS

Таблица 1.9.2Определяне на получения ранг на обектите за класиране

Обект за класиране №	Експерт №							Сборът от ранговете на обектите

При предпочитаното (по рангове) подреждане на обектите на изследване от един експерт, сборът на ранговете трябва да е равен на сбора от числата на целия естествен ред от броя на обектите H,като се започне от един [ H x (Н + 12]. Получените рангове на обектите на класиране по данни от проучването се определят като сбор от ранговете за всеки обект. В този случай в резултат първият ранг се присвоява на обекта, получил най-малкия сбор от рангове, а последният - на този с най-голям сбор от рангове, тоест най-малко значимия обект (пример за определяне полученият ранг от три обекта от седем експерти е даден в таблица 2) ...

Методът на пряка оценка (точкуване) е подреждането на изследваните обекти в зависимост от тяхната важност чрез присвояване на точки на всеки от тях. Най-значимият обект получава най-голям брой точки по приетата скала, диапазонът на скалата за оценка обикновено се приема от 0 до 1, до 5, до 10 или до 100. В най-простия случай оценката може да бъде 0 или 1. Понякога оценката се извършва в устна форма, например „много важно”, „важно”, „неважно”. За по-голямо удобство при обработката на резултатите от проучването, такива оценки могат да бъдат преобразувани в точкова скала (например съответно 3, 2, 1).

Х

Таблица 3.Определяне на резултатите от пряката оценка на обектите

Обект на оценка №	Експерт №							Сборът от точките на обекта	Полученият ранг на обекта	Тегло на обекта

Директната оценка трябва да се използва с увереност в пълните професионални познания на експертите за свойствата на изследваните обекти. Въз основа на резултатите от оценките се определят рангът и тежестта (значимостта) на всеки изследван обект (пример за оценка на три обекта по 10-бална скала е даден в таблица 3).

Според резултатите от експертни оценки мястото на всеки обект може да се определи по формулата:

(2)

Където V и - значение и-ти обект ( и = 1, 2,.., NS),изчислено въз основа на

експертни оценки ( j = 1,2,.., к),

А ij - дадена оценка (в точки). и- на обекта j-м експерт.

Метод на съвпадение.

Методът на съвпадение се извършва чрез сравнение по двойки и последователно сравнение.

Сравнение по двойкиекспертът съпоставя изследваните обекти по важност по двойки, като установява най-важните във всяка двойка. Експертът представя всички възможни двойки обекти под формата на запис на всяка от комбинациите (обект 1 - обект 2, обект 2 - обект 3 и т.н.) или под формата на матрица. Общият брой на двойките за сравнение е

, (3)

където H -броя на изследваните обекти на експертиза.

V

Таблица 4 Матрица за оценка на обекти чрез сравнение по двойки

Име на обекта	Обект №						Общ брой предпочитания

В резултат на сравнението експертът изразява мнение за важността на един или друг обект, тоест дава предпочитание на един от тях. Понякога експертите стигат до извода за еквивалентността на всеки от обектите в двойката. За да подредите всички разглеждани обекти, е необходима последваща обработка на резултатите от сравнението. Най-удобно е да се извършват сравнения по двойки и тяхната обработка с помощта на матрица като инструмент (Таблица 4). В някои случаи, при голям брой изследвани обекти, психологическите фактори влияят върху резултатите от сдвоеното сравнение, тоест понякога се дава предпочитание не на обекта, който наистина е за предпочитане пред другите, а на този, който е записан първи в списък с двойки или се намира в матрицата по-горе. в сравнение, следователно, понякога, за да се изключи психологическото влияние, се извършва двойно сравнение по двойки, т.е. отново се извършва сравнение по двойки, но само с противоположното подреждане на обекти и обекти във всеки двойка. Броят на двойките при двойно сравнение по двойки е съответно два пъти по-голям, отколкото при единично сравнение по двойки.

Когато записва всяка комбинация, експертът подчертава най-важното във всяка двойка сравнявани обекти. На пресечната точка на вертикалните и хоризонталните редове на матрицата, за всяка двойка обекти, той поставя 1 или 0 (или плюс или минус), в зависимост от значението на този или онзи обект, определен от него.

Теглото на всеки обект за сравнение се изчислява по формулата:

(4)

където А i/i, j- броя на предпочитанията (единици, или плюсове, долни черти)

итози обект по-горе и-ти обект е посочен j-m експерт;

А -общия брой двойки обекти.

Р

Таблица 5. Обобщаваща матрица на резултатите от сдвоено сравнение на обекти

Име на обекта	Обект №	Брой предпочитания аз-обект, даден от експерти					Сума от предпочитания	Тегло на обекта

Резултатите от попълването на матриците от всички експерти и изчислените данни могат да бъдат обобщени в матрица (Таблица 5).

Изчисленията за двойно сравнение по двойки се извършват по същите формули като за редовно сравнение по двойки, но броят на двойките се удвоява.

Същността на метода на последователното сравнениее както следва. Експертът подрежда всички изследвани обекти по реда на тяхната важност (като метод за класиране). На всеки обект предварително се приписва определен брой точки, например по скала от 0 до 1 (като метод за оценка). Освен това най-важният обект получава оценка, равна на 1, а всички останали се дават в ред на намаляване на тяхната важност от 1 до 0. След това експертът решава дали важността на обект с ранг 1 е по-голяма от сумата от оценките на всички останали обекти. Ако има, тогава стойността на оценката на първия обект се увеличава до това ниво, а ако не, експертът намалява тази стойност до такава числена стойност, че става по-малка от сумата на оценките на всички други обекти. Стойностите на оценките на втория, третия и следващите обекти по важност се определят последователно по същия начин като оценката на първия най-важен обект.

Методът на последователно сравнение е най-трудоемък за експертите, това се усеща особено, когато броят надвишава шест до седем изследвани обекта.

Обработка и оценка на последователността на експертните данни.

Събраните мнения на експерти се обработват както количествено (числови данни), така и качествено (информационна информация). По време на обработката се използват различни методи. При наличие на цифрови данни, за решаване на въпроси, които имат достатъчно информационен материал, се използват методи за осредняване на експертни преценки. Въпреки това, дори при наличните числени данни, но при недостатъчна информация по проблема, който трябва да бъде решен, наред с количествените методи за обработка на експертни данни се използват методи за качествен анализ и синтез.

Когато се използват разглежданите експертни методи (рангове и др.), мненията на експертите често не съвпадат, следователно е необходимо количествено да се оцени степента на съгласуваност на експертните мнения и да се определят причините за несъответствието между преценките. Мярката за последователност се определя естествено въз основа на статистиката на цялата експертна група. За оценка на мярката за съгласуваност на мненията на експертите, като правило, се използват коефициенти на съгласуваност.

Мярката за последователност се определя чрез математическа и статистическа обработка на всички налични резултати от изпитите. Така че съгласуваността на мненията на компетентни експерти при използване на всички посочени експертни методи, при които се определят ранговете на обекти, може да се определи с помощта на коефициента на съгласуване (съгласие) по формулата:

(5)

където C е сумата от квадратите на отклоненията на сумите на ранговете за всеки обект от средната сума на ранговете за всички обекти и експерти, т.е.

(6)

където
- средният брой звания.

Коефициентът на съгласуваност може да бъде в диапазона
... В У= 0 няма съгласуваност на експертните мнения и кога W = 1 - пълна консистенция. Последователността обикновено се счита за достатъчна, ако W> = 0,5.

Да предположим, че въз основа на резултатите от работата на компетентни експерти са получени определени данни за класиране и е необходимо да се изчисли коефициентът на съответствие въз основа на тях (Таблица 6)

Коефициентът на съгласуване е

, (7)

T

Таблица 6. Данни за изчисляване на коефициента на съгласуваност

Експерт №	Експертни звания Пет обекта за класиране ( H = 5)

.е. мненията на експертите могат да се считат за последователни, тъй като получената стойност на коефициента на съгласуване удовлетворява условието W> = 0,5.

При използване на експертни методи, при които ранговете не се определят, за да се намери съответствието, изчислените стойности на обектите трябва да се преобразуват в рангове. Ранг 1 се присвоява на обекта с най-голяма значимост и т.н., в противен случай оценката на съгласуваността на мненията се извършва по други критерии за съгласие.

Изчислената стойност на коефициента на съгласуваност трябва да се претегли според критерия на Пиърсън. (Х 2 ) с определено ниво на значимост (V),тоест максималната вероятност за неправилен резултат | от работата на експертите. Обикновено е достатъчно да зададете значимостта в диапазона от 0,005 - 0,05.

В случай на получаване на изчислената стойност х 2 селище> табличен NS 2 табл (с избраното ниво на значимост) мненията на експертите окончателно се признават за договорени.

Таблични стойности NS 2 табл(Таблица 7) зависят от приетото ниво на значимост и броя на степените на свобода (С), което се определя от формулата

, (8)

Изчислена стойност NS 2 селищесе определя по формулата

По този начин, за данните от предишния пример

. (10)

При ниво на значимост 0,05, табличната стойност NS 2 табле приблизително 9, т.е., мненията на експертите могат накрая да бъдат признати с вероятност 0,95 за последователни, тъй като NS 2 селище > NS 2 табл .

ЦЕЛИ НА УРОКА: 1) изучаване на методи за количествена оценка на качеството на експертите при формиране на експертна група;

2) използване на методи статистическа оценкаексперти по качеството при създаване на експертна група, предназначена да оцени качеството на конкретен продукт.

1. ОБЩИ РАЗПОРЕДБИ

Един от най-важните въпроси, които трябва да бъдат разгледани в процеса на експертна оценка на качеството на продукта, е подборът на експерти. Точно както в метрологията, точността на резултата от измерването зависи от точността на инструмента, който прави това измерване, а обективността на експертната оценка, нейната точност зависи главно от квалификацията на експерта, способността му за аналитично мислене, синтетично обобщение. , на неговия мироглед, ерудиция, психофизиологични способности и др.

Понастоящем на практика се използват следните методи за количествена оценка на качеството на експертите:

1. Евристичен, при който стойността на оценките се определя от човек; методите на евристична оценка се основават на факта, че представата, която хората около (или самият той) имат за този експерт отразява истинското му качество съвсем правилно; Евристичните оценки включват: самооценка, взаимна оценка, експертна оценка от членове на работната група.
2. Статично, при което стойността на оценките се получава в резултат на обработка на експертни оценки за оценявания продукт.
3. Тест, при който стойностите на оценките се получават в резултат на специални тестове, базирани на решаването на специално подбрани тестови задачи.
4. Документален, в който стойностите на оценките се получават въз основа на анализа на документални данни за експертите.
5. Комбиниран, при който стойностите на оценките се получават с помощта на всяка комбинация от горните методи.

Най-разумните в момента са статистическите методи за оценка на качеството на експертите, така че ще ги разгледаме по-подробно.

Методите на статичната оценка включват оценка на отклонението от средното мнение на експертната група на Кос и оценка на възпроизводимостта на резултата Kvr, която може да се получи след обработка на резултатите от специални проучвания, предшестващи операцията по формиране на експерт група.

Първият метод се основава на предпоставката, че истински смисълопределената от експерти стойност (собственост) е стойността на средната оценка на експертната група. Колкото по-малко е отклонението на стойността на индивидуалната оценка, назначена от експерта от средната оценка на групата, толкова по-високо е качеството на този експерт, което може да се вземе предвид, като в резултат на всеки експерт се присвои подходяща „тегла“ или коефициент на тежест.

В случай, че експертът определя числените стойности на оценените свойства (в точки, части от единица или процент), се предлага да се използва разстоянието между „средната“ серия от стойности на оценка и стойностите на оценката възложена от този експерт като експертна оценка. Например:

освен това, n

j = 1 / 2А Кi - Киj

където Ki е средната стойност на i-тата прогнозна стойност (свойство);

Киj е стойността на i-тата стойност (свойство), определена от j-тия експерт; н

Вторият метод се основава на предпоставката, че качеството на такъв експерт, което се характеризира с възпроизводимост на присвоените стойности на оценките, може да се счита за високо, т.е. стойностите на оценките на един и същ обект в няколко кръга трябва да са достатъчно близки. В този случай можем да говорим за стабилност на неговото мнение. Методите за оценка на качеството на експерта относно възпроизводимостта на резултата са подобни на методите за оценка на отклонението от средното мнение.

В случай, че експертите класират оценените стойности (свойства), за да измерят тяхното качество или последователност, на практика най-често се използва коефициентът на съгласуване, който се изчислява, както следва:

m2 (n3 - n) - m Tj

където Si е сумата от ранговете, присвоени от m експерти на i-фактора;

S е средната стойност на сумите на ранговете;

Стойностите на Si и S се определят от съотношенията:

Si = Kij; S = Si / n

където j е номерът на експерта;

i е числото на оценявания фактор.

Стойността на Tj се определя от израза:

Tj = (t3jl - tjl),

където tjl е броят на еднакви рангове от 1-ви вид в оценките на j-тия експерт;

Lj е броят на групите фактори със съвпадащи рангове в оценките на j-тия експерт.

Коефициентът на съгласуваност варира от нула до единица, а стойността му, равна на единица, съответства на пълното съгласие на мненията на експертите. Обикновено последователността на експертните мнения се счита за достатъчна, когато W> 0,5.

Консенсусът в мненията на експертите може да бъде случаен или неслучаен. Нивото на значимост на коефициента на съгласуваност се използва като количествена оценка на степента на тази случайност. Това ниво се намира от таблицата въз основа на данни за броя на степените на свобода n = 1 и стойност 2 (критерий на Пиърсън).

Стойността 2 се определя по формулата:

mn (n +1) - 1 Tj

Така определеното ниво на значимост на коефициента на съгласуваност дава стойността на вероятността за случайно съвпадение на експертни мнения, т.е. надеждност на оценките. Ако съгласуваността на мненията на експертите е висока и не е случайна, тогава тази експертна група може да се вземе като основа за експертна оценка на качеството на продукта. Ако съгласуваността на мненията е недостатъчна (W<0,5), то анализируя оценки отдельных экспертов, выделяют эксперта (экспертов), имеющего наиболее отличающиеся оценки от общей совокупности оценок других экспертов и подсчитывают значение коэффициента конкордации опять. Эту операцию повторяют до тех пор, пока не будет достигнута приемлемая согласованность экспертных оценок. При этом рекомендуется, чтобы количество оставшихся экспертов было не менее 2/3 от первоначального состава экспертной группы. В противном случае требуется заново сформировать экспертную группу. Для решения большинства задач по экспертной оценке качества продукции, оптимальными могут считаться экспертные группы, включающие от 7 до 20 экспертов.

II Самостоятелна работа.

Задача 1. За даден аналог на оценявания продукт направете експертна оценка на ергомичните свойства, в съответствие с разработената йерархична структура на свойствата на този продукт (виж практически урок No2). Определете числовите стойности на съответните ергономични показатели, като се ръководите от следната скала за оценка:

Извършете необходимата статистическа обработка на получените данни, за да оцените качеството на всеки експерт, участващ в експеримента. Препоръчително е резултатите от задачата да се представят под формата на следната таблица:

						Брой съвпадащи оценки	Максимално отклонение

Задача 2. Използвайки експресния метод за експертна оценка на качеството, направете класация на редица предложени продукти (3 ... 5 бр.), Подобно на оценявания продукт, в зависимост от нивото на тяхното качество, извършете необходимите статистически обработка на получените данни, за да се оцени качеството на всеки експерт, участващ в експеримента ... Препоръчително е резултатите от задачата да се представят под формата на следната таблица:

							Максимално отклонение	Сумата от отклоненията	Брой съвпадащи оценки
Обща оценка (среден резултат)