Ekspertinių metodų klasifikacija ir charakteristikos. Ekspertinis prekių vertinimo metodas

Ekspertų metodai - vertinimo metodai, kuriuos ekspertų grupė atlieka neapibrėžtumo ar rizikos sąlygomis.

Ekspertų metodai naudojami kokybės rodiklių nomenklatūrai, jų svorio koeficientams nustatyti, kokybės rodikliams matuoti ir jų vertinimui jusliniu metodu. Kokybės rodiklių įvertinimas matavimo, registravimo, skaičiavimo metodais naudojamas sudėtingiems kokybės rodikliams įvairiuose hierarchijos lygiuose nustatyti.

Skirtas kolegų peržiūra prekes tais atvejais, kai kiti, anksčiau išvardyti būdai yra netaikomi arba neekonomiški.

Ekspertiniai metodai yra pagrįsti euristinių sprendimų priėmimu, remiantis tam tikros srities ekspertų praeityje sukauptomis žiniomis ir patirtimi.

Ekspertų metodai turi tam tikrų privalumų ir trūkumų.

Privalumai yra tai, kad jie leidžia priimti sprendimus, kai objektyvūs metodai nereaguoja. Kiti pranašumai apima jų atkuriamumą. Šių metodų taikymo sfera yra ne tik prekių kokybės vertinimas, bet ir technologinio ciklo operacijų tyrimas, sprendimų priėmimas, vadovai, prognozavimas.

Kvalifikuotų ekspertų taikomi ekspertiniai metodai leidžia tiksliai įvertinti prekes. Atlikti eksperimentai rodo, kad val teisingas metodas eksperto vertinimu, rezultatų paklaida yra 5-10%, o tai leidžiama matavimo metodams. Eksperimentiškai gauti ekspertinių vertinimų įvairiose ekspertų grupėse rezultatai parodė gana didelį jų atsiperkamumą.

Ekspertinių metodų trūkumai yra subjektyvumas, ribotas naudojimas, didelės jų įgyvendinimo išlaidos.

Ekspertinių metodų subjektyvumas yra pasekmė to, kad ekspertinį vertinimą atlieka kiekvienas ekspertas atskirai ir, EP Raikhmano ir G. G. Azgaldovo nuomone, jis atspindi „nieką daugiau, kaip jo psichologinę reakciją į fizines ir chemines produktas“. Tačiau reikia nepamiršti, kad ekspertinį vertinimą sudaro kelių ekspertų nuomonės, kurių kiekvienas yra ne tik tam tikros žinių srities specialistas, bet ir vartotojas. Todėl ekspertinis vertinimas tam tikru mastu atspindi ir vartotojų nuomones, o tai neįmanoma įgyvendinti kitais būdais.

Dėl didelio subjektyvumo ekspertiniai metodai turi tam tikrų apribojimų. jų naudojimas yra racionalus dviem atvejais: pirma, kai ekspertams keliami tikslai negali būti išspręsti kitais metodais; antra, kai galimi alternatyvūs metodai suteikia ne tokius tikslius ir patikimus rezultatus arba yra brangesni.

Siekiant pašalinti šį trūkumą, atliekant prekių ekspertizę ekspertiniai metodai derinami su kitais metodais. Dažniausiai ekspertiniai ir organoleptiniai metodai naudojami kartu. Be to, kuriant organoleptinio balo skales, pasirenkant kokybės rodiklių nomenklatūrą, nustatant svorinius koeficientus, būtini ekspertiniai metodai.

Ekspertiniai metodai skirstomi į tris pogrupius: 1) grupinės ekspertų apklausos metodai; 2) matematinis statistiniais metodais ekspertinių vertinimų apdorojimas 3) kokybės rodiklių ekspertinio vertinimo metodai.

Kiekviena ekspertinių metodų grupė savo ruožtu yra suskirstyta į tipus ir veisles. Ekspertinių metodų klasifikacija parodyta fig. 1.3.

Ryžiai. 1.3. v

Grupinės ekspertų apklausos metodai – metodai, pagrįsti ekspertų grupės apklausos atlikimu, vėliau iš jų gautos informacijos analize ir apdorojimu.

Šių metodų tikslas – gauti galutinių sprendimų tarpusavio vertinimą.

Pasirinkimo pagrindas – poreikis priimti sunkius sprendimus neapibrėžtumo situacijoje arba moksliškai pagrįstos prognozės parengimas, reikalaujantis nepriklausomų ir kompetentingų siauros srities specialistų grupės ar daugelio žinių sričių (pvz. vienarūšės prekių grupės ar visų maisto produktų išmanymas).

Pagrindiniai grupinės tarpusavio peržiūros privalumai yra galimybė visapusiškai išanalizuoti kiekybinius ir kokybinius problemų nustatymo ir (arba) prognozavimo problemų aspektus. individualios savybės prekės ar jų derinys. Sąveika tarp ekspertų gali žymiai padidinti ekspertų grupei priklausančios apibendrintos informacijos kiekį, palyginti su bet kurio grupės nario informacija. Be to, veiksnių, į kuriuos atsižvelgiama atliekant grupės vertinimą ir turinčių įtakos sprendimo veiksmingumui, skaičius yra didesnis nei veiksnių, į kuriuos atsižvelgė vienas ekspertas, suma. Taikant grupinį vertinimą, mažiau klaidų priimant pagrindinius sprendimus ir rodiklius, kurie nėra reikšmingi problemos sprendimui. Štai kodėl svarbus pranašumas grupinis vertinimas – tai gebėjimas gauti apibendrintą rezultatą.

Grupinio vertinimo trūkumai yra šie: sunku gauti patikimą ir nuoseklų įvertinimą; gauti nevienodus atsakymus į tą patį klausimą su dideliu nuomonių skirtumu dėl skirtingos ekspertų kompetencijos; vienareikšmių atsakymų gavimas negarantuoja jų pagrįstumo ir patikimumo, o to neįmanoma patikrinti apžiūros metu; daugiau neteisingos informacijos iš ekspertų grupės nei atskiro eksperto gali sukelti didelių klaidų galutiniuose rezultatuose; konfrontacijos galimybė, kai atskiri ekspertai dėl netikrumo ar kitų priežasčių gali sutikti su daugumos nuomone.

Nepaisant šių trūkumų, eksperimentiškai nustatyta, kad įvykdžius tam tikrus reikalavimus grupinis vertinimas yra patikimesnis nei individualus. Šie reikalavimai apima: priimtiną reitingų paskirstymą; grupės patikimumas; ekspertizės rengimas.

Tyrimo efektyvumas priklauso nuo gautų rezultatų tikslumo ir patikimumo, tai yra nuo naudojamų metodų ir nuo eksperto kvalifikacijos. Eksperto pasirinkimas yra sudėtinga užduotis, dažniausiai atsižvelgiama į keletą asmeninių savybių: kompetencija – profesionali ir kokybinė, eksperto domėjimasis ekspertizės rezultatais, požiūris į bylą, objektyvumas. Beveik neatsižvelgiama į tokias savybes kaip noras rizikuoti ir kitos psichologinės savybės.

Sisteminis eksperto kokybės vertinimo metodas dar nesukurtas; Esami vertinimo metodai skirstomi į penkias grupes:

Euristinė;

Statistiniai – įverčiai, gauti atlikus ekspertinių vertinimų analizę su nukrypimų nuo vidutinių verčių apibrėžimu;

Testas – įvertinimai, gauti ekspertams atlikus testo užduotis;

Dokumentinis - kompetencijos įvertinimai, gauti analizuojant atskirus eksperto atliktų ekspertizių dokumentinius duomenis;

Kombinuoti – įverčiai, gauti analizuojant duomenis, gautus derinant išvardintus metodus.

Euristinė vertinimai apima savęs ir ekspertų grupės įvertinimą. Savigarba dažniausiai yra subjektyvi; siekiant sumažinti subjektyvumą, atskiroms eksperto savybėms taikoma balų skalė. Įsivertinimas atliekamas pagal prekių rūšis ir kokybės rodiklius, pavyzdžiui, gaminių estetiką, ekspertas save vertina apklausdamas. Klausimynas apima susipažinimo su šiuolaikinėmis buitinėmis ir užsienio literatūra, su moderniais gaminių pavyzdžiais, su nuomonių apklausų rezultatais.

Kaip savotišką savęs vertinimą jie taiko vertinimo argumentuojant ir supažindinant su analizuojamais produktais metodą. Vertinimas atliekamas naudojant klausimyną su kompetencijos koeficiento nustatymu.

Naudojant testų balai galima vertinti tokias svarbias eksperto savybes kaip kokybinė ir profesinė kompetencija, objektyvumas. Kokybinė kompetencija atliekant juslinį vertinimą – tai daugkartiniai ekspertų pokalbiai, siekiant kelis kartus nustatyti svorio koeficientus ir nustatyti vertinimų patikimumą.

Profesinė kompetencija tikrinama kontrolės forma, gebėjimu naudoti įvairaus tipo vertinimo skales – eiliškumą, ryšius, intervalus, taip pat gebėjimą išskirti nemažą skaičių charakteristikų, gradacijų vertinant analizuojamo produkto savybes.

Kolektyviniame vertinime ir diskusijoje dalyvaujant ekspertams, pastebimas konformizmo reiškinys, tai yra, ekspertas patenka į kitų ekspertų išvadų įtaką, o tai neigiamai veikia objektyvaus eksperto vertinimo susidarymą. Todėl gebėjimas laikytis savo nuomonės ir apginti savo išvadas turi teigiamą reikšmę atliekant tyrimą kolektyviniu metodu ir formuojant objektyvų vertinimą.

Ekspertų metodai kokybės vertinimai grindžiami ekspertų nuomone. Jie naudojami, kai neįmanoma arba netikslinga, neefektyviai naudoti matavimo ar skaičiavimo metodus. Taip atsitinka, kai trūksta informacijos, reikia taikyti ir kurti specialius techninėmis priemonėmis, vertinant estetinės kokybės rodiklius ir panašiai. Ekspertiniai metodai gali būti derinami su kitais metodais arba naudojami kaip savarankiška rūšis vertinant gaminių ir gaminių norminių dokumentų kokybę, nustatant rodiklių nomenklatūrą ir jų svorio koeficientus, renkantis pagrindinius pavyzdžius ir kokybės rodiklius, atliekant nustatymą. ir kokybės rodiklių matavimas organoleptiniu metodu, pavienių ir kompleksinių kokybės rodiklių, nustatytų matavimo ar skaičiavimo metodu, vertinimo metu.

Kokybės ekspertinio vertinimo pagrindas yra objektyvus gaminio naudingumas visuomenei, atspindintis jo modernumą. Kvalifikuoto eksperto nuomonė apie gaminių kokybę atitinka visuomenės poreikius ir sutampa su masinio vartotojo nuomone.

Tačiau rinkdamasis prekę vartotojas laikosi konservatyvios pozicijos ir naujus produktus priima atsargiai, o kartais jų visai nesuvokia. Prekių kokybės ekspertų išvadoje apibendrinama prekių vartotojų nuomonių visuma. Tyrimai parodė, kad užfiksuoti ekspertų prekių kokybės vertinimai sutampa su gaminių kokybės vertinimais, kurie buvo gauti atliekant masinę vartotojų apklausą. Ekspertinių tyrimų tikslumo nustatymas atitikimo ekspertizės metodikai parodė, kad jis yra 5-10 proc.

Kalbant apie produkto kokybę, jo vartotojo savybes, tokiais atvejais naudojami ekspertiniai metodai:

Rodiklių nomenklatūros nustatymas apžiūros metu;

Prekės ar prekės vertinimo kriterijų parinkimas ir rodiklių išdėstymas pagal hierarchijos principą;

Kokybės rodiklių svorio koeficientų nustatymas prekės, prekės kokybės lygiui nustatyti;

Rodiklių tyrimas organoleptiniu metodu, naudojant kiekybinės jų išraiškos metodus;

Kokybės rodiklių įvertinimas matavimo, registravimo, skaičiavimo metodais, siekiant nustatyti sudėtingus kokybės rodiklius įvairiuose hierarchijos lygiuose.

Dažniausiai naudojami ekspertų metodai:

Vadovaujantis ekspertas (vienišas);

komisiniai;

sujungti.

Vadovaujančio eksperto metodas leidžia greitai atlikti ekspertizę, sutrumpinti grupės narių patvirtinimo ir diskusijų procedūros bei statistinių duomenų apdorojimo laiką. Tačiau vieno eksperto atliktos ekspertizės rezultatai priklauso nuo jo profesinių žinių lygio, asmenybės, kompetencijos lygio.

Ekspertų komisijų metodas apima specialistų grupę, kuri atlieka analizę ir vertinimą. Šis metodas leidžia gauti patikimus, objektyvius rezultatus, tačiau reikalauja didelių laiko investicijų tyrimui paruošti ir organizuoti. Nuo reikalingo ekspertizės rezultatų tikslumo ir patikimumo priklauso komisiją sudarančių ekspertų skaičius. Ekspertų komisiją sudaro dvi grupės – darbinė ir ekspertinė. Darbo grupė rengia, organizuoja ir atlieka ekspertinį gaminių kokybės vertinimą, tolesnę jo rezultatų analizę. Darbo grupę sudaro organizatorius, konsultantas, turintis profesionalių žinių apie produktą, vertinamas techninių darbuotojų. Ekspertų grupę gali sudaryti keli pogrupiai, kurių kiekvienas specializuojasi sprendžiant atitinkamas užduotis – nustatant rodiklių diapazoną, įvertinant atskiras rodiklių grupes ir panašiai.

Kai kuriais atvejais naudojamas kombinuotas metodas, pagrįstas nuosekliu pirmaujančio eksperto ir nedidelės ekspertų komisijos darbo naudojimu.

Bendrojoje klasifikacijoje ekspertinių metodų nėra. Tačiau klasifikacija naudojama atsižvelgiant į eksperto ar analizės metodu gautų duomenų kiekio santykį, informacijos gavimo iš eksperto būdą ir kai kuriuos kitus veiksnius.

Atsižvelgiant į informacijos gavimo iš eksperto metodą, išskiriami šie metodai:

Kolektyvinis;

Individualus.

Taikant kolektyvinį metodą, technikas atlieka apklausą iš karto visai ekspertų grupei, individualiu metodu – kiekvienam ekspertui atskirai. Gauti patikimi rezultatai būtina aiškiai ir teisingai nustatyti tikslą ir uždavinius ekspertui, grupiniu metodu tai sunku, tačiau tai įmanoma su nuolat formuojama grupės sudėtimi. Individualaus metodo atveju naudojami interviu, interviu anketos, anketos, mišrios anketos. Apklausos gali būti atliekamos asmeniškai arba nedalyvaujant. Akis į akį metodu ekspertas išsako savo nuomonę apklausą atliekančiam asmeniui. Neatvykusių asmenų apklausos atveju tarp jų nėra kontakto, o ekspertas pats užpildo anketą arba apklausos kortelę.

Pokalbio metu technikas pažymi pokalbio, kuris vyksta per programą ir konkretų klausimų sąrašą, forma. Interviu-anketos metu klausimų sąrašas yra konkretesnis, kryptingesnis, griežtai apibrėžta klausimų seka. Anketa pildoma dalyvaujant ekspertui.

Anketa išsiskiria tuo, kad ekspertas anketą pildo pats, turėdamas užpildyti aiškinamąjį raštą. Mišrus klausimynas apima išankstinį eksperto paaiškinimą dėl anketos užpildymo su problemos paaiškinimu.

Pagal informacijos turinį didžiausios galimybės turėti interviu metodus, interviu – anketas, anketas. Didžiausias sprendimų nepriklausomumas būdingas klausimyno metodui.

Dėl sprendimų sunkios situacijos neapibrėžtumo metu arba formuojant mokslinę ir techninę prognozę, egzaminui reikalinga eruditų specialistų grupė, išmananti daugelį žinių sričių. Pagrindinis dalyvaujamojo vertinimo privalumas – gebėjimas visapusiškai analizuoti kiekybinius ir kokybinius problemų aspektus. Yra problemų, kurių neįmanoma išspręsti be specialistų dalyvavimo. Daroma prielaida, kad ekspertų grupės nuomonė yra patikimesnė nei individo, ty dvi vienodai kompetentingų ekspertų grupės labiau randa objektyvų sprendimą.

Ekspertų pokalbių rengimo ir vykdymo bei techninių operacijų derinys leido sukurti kelis ekspertinius metodus, sulaukusius didžiausio pripažinimo ir platinimo. Tai apima Delphi, PATTERN ir kombinuotus metodus.

Delphi metodas (kai kuriuose šaltiniuose – Delphi) – ekspertų apklausos metodas, pagrįstas nuosekliai vykdomomis procedūromis, kuriomis siekiama suformuoti grupės nuomonę apie procedūras, turinčias nepakankamą informaciją.

Delphi metodą amerikiečių tyrimų bendrovėje RAND Corporation sukūrė W. Helmeris, N. Dolky ir T. Gordonas. Jis buvo naudojamas kariniam moksliniam ir techniniam ateities prognozavimui. Terminas Delphi kilęs iš Graikijos miesto, kuriame dievo Apolono šventykloje gyveno orakulai, pavadinimo.

Delphi metodo ypatumai: atsisakymas bendro ekspertų darbo; vertinimų anonimiškumas; reguliuojamas Atsiliepimas; grupės atsakymas.

Ekspertų atsisakymas dirbti kartu ir anonimiškumas pasiekiamas tuo, kad kiekvienas ekspertas išreiškia savo nuomonę anketoje, be grupinės diskusijos. Naudojami ir kiti individualaus klausimo būdai, pavyzdžiui, atsakymus į klausimus ekspertai įveda į kompiuterį. Tai leidžia sumažinti atskirų vertinimų neatitikimą ir gauti grupinį atsakymą, kuris teisingai atspindi kiekvieno eksperto nuomonę.

Apklausos anonimiškumas padeda sumažinti tam tikrų dominuojančių ekspertų autoritarinės įtakos atitikimą, reguliuojamas grįžtamasis ryšys mažina individualių ir grupinių interesų įtaką. Grįžtamojo ryšio įdiegimas taip pat padidina vertinimų objektyvumo ir patikimumo kriterijų.

Taikant šį metodą plataus vartojimo prekių kokybės ekspertinio vertinimo tikslais, išryškėja šie trūkumai: ekspertų apklausos ir anketų pildymo sudėtingumas, vertinimo sudėtingumas dėl didelio kokybės rodiklių skaičiaus (kartais). iki 20-40) ir kelių anketų pildymas (3-10), sudėtingas paaiškinimų įrašymas dėl tiesioginio kontakto tarp organizatoriaus ir ekspertų trūkumo.

Metodas yra perspektyvus norint gauti grupinį ekspertinį vertinimą ir gilią įvykių analizę neapibrėžtumo situacijose.

PATTERN metodas - ekspertų apklausos metodas, pagrįstas hierarchinės struktūros – tikslų medžio – sukūrimu ir sprendimų dėl šių tikslų priėmimu po atviros diskusijos.

Metodo pavadinimą sudaro pirmosios anglų kalbos žodžių, reiškiančių „Pagalba planuojant, kiekybiškai įvertinant techninius duomenis“, raidės.

Metodą sukūrė amerikiečių firma „Honquell“ naujų ginklų sistemų projektams įvertinti. Metodas turi analogų: PROFILIS, Prancūzijoje – KPI metodas, PROPLEN ir panašiai.

PATTERN metodas apima kelis etapus.

I etapas – pagrindinės sprendžiamos problemos formulavimas ir suskirstymas į eilę pirmos, antros ir kt. eilės antraeilių problemų, kurios vėliau skirstomos į siauresnes užduotis. Dalijimas tęsiamas tol, kol gaunami paprasti elementai, kuriuos gali įvertinti ekspertai.

Dėl šio skirstymo gaunama hierarchinė susijusių pagrindinių, antrinių problemų ir užduočių struktūra, vadinama tikslų medžiu.

II etapas - padedant ekspertams, kiekvienos užduoties svorio (arba reikšmingumo) koeficientų nustatymas pagrindinio tikslo atžvilgiu, o ekspertai sprendimą priima po atviros diskusijos ekspertų grupėje.

Tokia atvira diskusija kartu su teigiamu veiksniu – ekspertų, siekiančių priimti teigiamą sprendimą, sąveika – turi ir Neigiamos pasekmės dėl konformizmo, tai yra tikrosios ekspertų nuomonės iškraipymo dėl pasiūlymo ar prisitaikymo prie daugumos nuomonės.

III etapas - kompiuterio naudojimas gautų duomenų apdorojimui ir jų analizei. PATTERN metodo privalumas – ekspertinės apklausos procedūros supaprastinimas. Trūkumai: nepagrindžiamas optimalus ekspertų grupės narių skaičius, taip pat nėra parengta kompetentingų specialistų atrankos į ekspertų grupę metodika; apklausos rezultatų apdorojimas neatsižvelgiant į skirtumus kaip atskiri ekspertai; kliūčių ekspertų konformizmo pasireiškimui nebuvimas; nepakankamas tikslo medžio konstravimo principų išsivystymas ir neapibrėžtumas.

Kadangi Delphi ir PATTERN metodai turi didelių trūkumų ir nevisiškai atitinka tarpusavio peržiūros tikslus, Oe. L. Raikhmanas ir G. G. Azgaldovas pasiūlė kombinuotą metodą, kuriame buvo panaudotos teigiamos kitų ekspertinių metodų savybės ir neįtraukti jų trūkumai.

Kombinuotas metodas - metodas, pagrįstas individualių ir kolektyvinių ekspertų vertinimų deriniu.

Kombinuoto metodo privalumai – pakankamas lankstumas, leidžiantis pašalinti klaidas apklausiant ekspertus ir padidinti ekspertizės rezultatų patikimumą, aiškus strategijos apibrėžimas klasifikuojant užduotis pagal svarbos laipsnį ir jų įgyvendinimo operacijos, didelis rezultatų atkuriamumas.

Metodo trūkumai yra neveiksmingumas, dėl kurio reikia didelių laiko ir pinigų investicijų. Tačiau šis trūkumas atsiperka padidinus patikimumą ir rezultatų atkūrimą.

Norint įvertinti prekių kokybę, kombinuotas metodas turi bendrą ekspertinių operacijų algoritmą:

1. Parengiamasis etapas:

Darbo grupės formavimas;

Ekspertų grupės formavimas;

Produktų ir vartotojų klasifikacija;

Kokybės rodiklių struktūrinės schemos konstravimas.

2. Individualių ekspertinių vertinimų gavimo etapas:

Ekspertų vertinimų skyrimo tvarkos parinkimas;

Informacijos gavimo iš eksperto metodo parinkimas ir apklausai reikalingų dokumentų rengimas;

Ekspertų apklausa.

3. Kolektyvinių ekspertinių vertinimų gavimo etapas:

Atskirų ekspertinių vertinimų apibendrinimai;

Atskirų ekspertinių vertinimų nuoseklumo nustatymas;

Kolektyvinių ekspertinių vertinimų objektyvumo nustatymas.

Kiekvienam etapui yra atitinkamos užduotys. Per laikotarpį parengiamasis etapas sprendžiami tokie uždaviniai kaip darbo grupės funkcijų ir struktūros apibrėžimas, kiekybinė sudėtis, atskirų narių atsakomybė. Nustatomi ir plėtojami ekspertų grupės formavimo principai: dėl ekspertų skaičiaus, jų profesinio pasirengimo ir panašiai.

Antrajame etape nustatoma ekspertų apklausos technika, įvertinamas ekspertų kontakto buvimas, informacijos perdavimo būdas ir ekspertinio vertinimo forma. Vertintojai įvertinimus gali nustatyti patys arba pasitarę su kitais ekspertais arba susipažinę su anoniminiais ekspertais. Vertinimai yra pagrįsti, nustatyti kiekybine forma ir dichotominiai, kur atsakymai pateikiami „taip“, „ne“ arba 0-1 forma.

Racionaliai panaudoti iš ekspertų gautą informaciją galima, jei ji paverčiama analizei, rengimui ir sprendimų priėmimui patogia forma. Informacijos konvertavimo į tinkamas formas galimybės priklauso nuo specifinių objekto savybių, duomenų apie jį išsamumo, patikimumo, sprendimo priėmimo lygio, taip pat nuo priimto kriterijaus, priklauso nuo tiriamos problemos.

Vienas iš daugelio ekspertų metodų bendrų elementų yra svorio koeficientas.

Reikšmingumo koeficientas – kiekybinė konkretaus rodiklio reikšmingumo laipsnio charakteristika vertinant kokybę.

Kokybės rodiklių svertinių koeficientų nustatymas atliekamas ekspertiniu metodu. Svorio koeficientai skirti prekių kokybės ekspertinio vertinimo patikimumui padidinti.

Kiekvienas rodiklis pagal svarbą užima tam tikrą vietą kokybės rodiklių nomenklatūroje. Ekspertai reitinguoja rodiklius pagal reikšmingumo laipsnį pagal profesines žinias ir įgūdžius. Be to, bet kuris kvalifikuotas ekspertas siekia įvertinti tiriamos prekės kokybės rodiklius masinio vartotojo požiūriu.

Jeigu ekspertas geba palyginti ir įvertinti galimi variantai veiksmus, kiekvienam iš jų suteikiant tam tikrą skaičių, tada jis turi tam tikrą pirmenybių sistemą ar skalę. Norint užtikrinti ekspertų sprendimų tikslumą, labai svarbu teisingai taikyti skales. Išskiriami šie svarstyklių tipai: vardinis, eilinis, intervalas, santykiai. Tačiau užsakymo skalė turi didžiausių pranašumų prieš kitus dėl santykinio kokybės rodiklių ekspertinio vertinimo paprastumo pagal reikšmingumo laipsnį. Svarstyklių charakteristikos pateiktos lentelėje. 1.1.

Vardinių nominalų skalė naudojamas atskirti vieną objektą nuo kito. Objektai turi būti sunumeruoti, bet skaičiai nurodo objektą, o ne jo kiekybinę charakteristiką. Tai paprastesnis matavimo būdas, kai skaičiai arba simboliai naudojami tik objektams klasifikuoti. Skalė gali būti naudojama skaitmeniniam atskirų savybių kodavimui anketose, svoriniams koeficientams nustatyti.

Eilinė skalė (gretai) - toks vertinimo būdas, kai vertinami parametrai, rodikliai ar objektai išdėstomi objekto parametro (rodiklio) rodiklio ar savybių augimo arba mažėjimo tvarka. Klasikinis vertinimo, naudojant eilės skalę, pavyzdys yra mineralų kietumo vertinimas pagal Mopso skalę (santykinio kietumo skalė susideda iš 10 kietumo standartų, talko kietumas laikomas 1, deimanto – 10). Šiuo metodu galima nustatyti miltų spalvos intensyvumą, vaisių sulčių aromatą, vynų puokštę, sūrių konsistenciją. Eilinė skalė turi pranašumų, kai naudojama svoriniams veiksniams nustatyti, nes supaprastina kokybės rodiklių užsakymo procesą pagal jų svarbą vartotojams.

stalo 1.1. Svarstyklių tipai ir jų charakteristikos

Skalės tipas	Skalės apibrėžimas	Santykiai pateikti skalėje
Nominalus	Paprastas matavimo tipas, kai skaičiai arba simboliai naudojami tik objektams klasifikuoti.	Lygiavertiškumas (=)
Eilinis (gretai)	Vienos klasės objektai yra atitinkamame santykyje su 3 kitos klasės objektais (daugiau nei, daugiau pranašumų, stipresni ir pan.). Jei [A]> [B] kai kuriems A ir B klasių objektams, tada yra iš dalies sutvarkyta skalė.	Ekvivalentiškumas (=). Didesnis nei (>).
Intervalas	Eilinė skalė, kuri yra padalinta į žinomus atstumus tarp bet kurių dviejų skalės skaičių, skalės nulinis taškas ir matavimo vienetas yra laisvai pasirenkami.	Ekvivalentiškumas (=) Didesnis nei (>). Bet kurių dviejų intervalų santykis yra žinomas.
Santykiai	Intervalų skalė naudojant tikrąjį nulinį tašką, bet kurių dviejų taškų santykis nepriklauso nuo vieneto.	Ekvivalentiškumas (=). Didesnis nei (>). Nustatomas bet kurių dviejų intervalų santykis. Nustatomas ryšys tarp bet kurių dviejų taškų.

Nustatydami kokybės rodiklių svertinius koeficientus, ekspertai pirmiausia įvertina (jų nuomone) svarbiausią iš šių rodiklių ir priskiria jam tam tikrą skaičių, pavyzdžiui, 1. Visi tolesni rodikliai vertinami žudymo arba svarbos didėjimo tvarka.

Po to visų ekspertų duomenys suvidurkinami kiekvienam rodikliui.

Prekių kokybės vertinimo praktikoje dažnai naudojamas svorinių koeficientų nustatymo metodas, vadinamas „fiksuotų sumų metodu“. Jo esmė yra ta, kad ekspertai priskiria rodiklių, įtrauktų į viršutinio lygio rodiklį, svorio koeficientą, o šių koeficientų suma turi būti lygi iš anksto nustatytam skaičiui.

„Fiksuoto dydžio metodas“ tikslingai taikomas tik tuo atveju, jei jo nėra didelis skaičius rodikliai.

Praktinė patirtis rodo, kad ekspertiniame prekių kokybės vertinime patartina taikyti tokią svorio koeficientų nustatymo tvarką.

1. Preliminarus vienalytės grupės rodiklių ekspertų reitingavimas. Svarbiausiam rodikliui priskiriama 1 eilė, kitam pagal svarbą – 2 ir tt Jei rodikliai yra vienodos svarbos, tai jiems skiriami vienodi rangai. Rodiklių skaičius vienalytėje grupėje turėtų būti 4 ar daugiau. Jei skaičius mažesnis, reitingas nevykdomas.

2. Rodiklių svertinių koeficientų nustatymas ekspertų. 1 eilės rodikliui priskiriamas svorio koeficientas 10. Kito pagal svarbą rodiklio svorio koeficientas apibrėžiamas kaip pirmojo rodiklio svarbos dalis. Nustatant trečiąjį ir vėlesnius rodiklius, atsižvelgiama į jų svarbą, palyginti su ankstesniais. Atlikdamas šiuos nuoseklius veiksmus, ekspertas nustato pavienių, o vėliau ir sudėtingų kokybės rodiklių svorio koeficientus.

3. Ekspertų supažindinimas su kitų ekspertų paskirtomis svertinių koeficientų reikšmėmis (jų pagrindimu).

Svorio koeficientų pagrindimas yra labai daug pastangų reikalaujantis veiksmas, todėl naudojamas su ribotu rodiklių skaičiumi (apie 10-15). Kitu atveju ekspertai kviečiami savo nuožiūra pagrįsti tik kai kuriuos rodiklius.

4. Visų ekspertų nustatytų svorinių koeficientų verčių vidurkis. Ją atlieka techniniai darbuotojai, skaičiuodami aritmetinį vidurkį arba svertinį vidurkį.Pastaruoju atveju atsižvelgiama į visapusį eksperto kokybės įvertinimą.

Skalės trūkumai yra rangų įverčių netikslumas, nes nėra intervalų lygties, neįmanoma apskaičiuoti net aritmetinio vidurkio.

Intervalų skalė. Tai įvertinimo metodas, kurio esminė charakteristika yra apskaičiuotų parametrų verčių skirtumas, kuris gali būti išreikštas šioje skalėje numatytu vienetų skaičiumi. Tokios skalės pagalba objektai reitinguojami, o taip pat tam tikruose vienetuose nustatoma, kiek vienas objektas yra didesnis už kitą. Intervalų skalės pavyzdys yra Celsijaus skalė, kuri yra padalinta į 100 vienodų intervalų ir naudojama apibūdinti tokioms produkto savybėms, kurios yra susijusios su temperatūros sąlygos pvz., sintetinės odos atsparumas šalčiui, minimali temperatūra šaldiklisšaldytuve.

Santykių skalė leidžia pasiekti aukščiausio lygio matavimai. Tai vertinimo metodas, kai naudojamas matavimo vienetas, jis naudojamas daugeliui parametrų, kurie yra fiziniai dydžiai: dydis, svoris, tankis, stiprumas, įtampa, dažnis ir panašiai. Matavimų skalėje rezultatai turi skaičių savybių, kurias galima statistiškai apdoroti. Tokios skalės pavyzdys yra Kelvino temperatūros skalė, kuri prasideda nuo absoliutaus nulio.

Lyginant intervalų ir santykių skalę, nustatyta, kad pastarųjų pagalba gaunami tikslesni rezultatai. Be to, intervalų skalėje gautais įverčiais galima skaičiuoti svertinius vidurkius, kurių skaičiavimai būdingi eksperimentinėms apklausoms. Santykių skalė ekspertiniam metodui gali būti pagrindinė, užsakymo skalė gali būti taikoma pakankamai pagrįstai.

Ekspertinio vertinimo praktikoje naudojamos dvi pagrindinės svarstyklių rūšys – matmenų ir bematės. Bedimensinių svarstyklių duomenys išreiškiami vieneto trupmenomis, procentais, taškais.

Matematiniai ir statistiniai ekspertinių vertinimų apdorojimo metodai – tai metodai, skirti padidinti ekspertų atliekamo prekių kokybės vertinimo rezultatų patikimumą.

Jie skirstomi į keturis pogrupius: reitingai, tiesioginiai vertinimai, nuoseklios nuostatos ir poriniai palyginimai.

Range - metodas, pagrįstas tyrimo objektų išdėstymu didėjančia arba žudymo tvarka.

Skirta spręsti daugelį praktinių problemų, kai galutinius rezultatus lemiantys objektai nėra tiesiogiai išmatuojami. Be to, atskiri objektai, pasižymintys skirtingomis prigimtimis, yra nesuderinami, nes neturi bendro palyginimo mato. Reitingavimo pagrindas yra būtinybė užsakyti bet kokį objektą laike ir erdvėje, taip pat pagal išmatuotą kokybę neatliekant tikslių matavimų. Ir galiausiai, situacijoje, kai matuojama kokybė iš esmės negali būti išmatuota dėl praktinių ir teorinių priežasčių.

Reitingavimo procedūra susideda iš eksperto atliekamo objektų išdėstymo racionaliausia tvarka ir tam tikro rango priskyrimo natūralaus skaičiaus forma. Šiuo atveju 1 rangas suteikiamas svarbiausiam objektui, o n – mažiausiai svarbus. Dėl to gaunama eilės skalė, kurioje eilučių skaičius lygus objektų skaičiui.Jei du objektai turi vienodas eiles, tai jiems priskiriami vadinamieji standartizuoti rangai, kurie apskaičiuojami kaip vidurkis vienodos eilės objektų vietų suma.

Pavyzdžiui, šešiems objektams priskiriamos šios eilės:

2 ir 5 objektai pasidalijo 2 ir 3 vietas. jų standartizuotas rangas bus

(2 + 3) /2 = 2,5.

3, 4 ir 6 tiriamieji užėmė lygiąsias 4, 5 ir 6 vietas, o jų standartizuotas reitingas yra 5:

(4 4-5 + b) / 3 = 5. Rezultatas yra toks:

Reitingavimo metodas gryniausia forma naudojamas retai. Dažniausiai jis derinamas su tiesioginio vertinimo metodu ar jo modifikacijomis (reitingavimas pagal vertinimų sumą, kombinuotas metodas ir pan.).

Tiesioginio vertinimo metodas susideda iš to, kad bet kurio kiekybinio kintamojo kitimo diapazonas yra padalintas į kelis intervalus, kurių kiekvienam priskiriamas tam tikras balas, pavyzdžiui, nuo 0 iki 10. Vertinimo skalė gali būti teigiama ir neigiama, pvz. nuo +3 iki -3. Kiekvienas objektas turi būti įtrauktas į tam tikrą intervalą, priklausomai nuo jo vertės. Intervalų, į kuriuos padalinamas visas kokybės pokyčių diapazonas, skaičius skirtingiems ekspertams gali būti skirtingas. Vertinti leidžiama atskiriems ekspertams tas pats numeris kokybiškai skirtingi veiksniai.

Kai kuriais atvejais patogiau pasirinkti tinkamiausią veiksnį iš pradžių įvertinus, o paskui reitinguojant.

Bendrus rangų įvertinimus galima normalizuoti, tai leidžia nustatyti glaudesnį ryšį tarp įvertinimų, kuriuos ekspertai suteikė atskiriems objektams. Šiuo tikslu sumuojamos visų objektų sąmatos ir ateityje kiekvienas dalinamas iš gautos sumos. Tokiu būdu apskaičiuotus normalizuotus įverčius galima vėl reitinguoti.

Atlikdami kelių ekspertų tyrimą, jie siekia gauti vidutinę kiekvieno objekto sąmatą. Tam tikslui sumuojami kiekvieno objekto normalizuoti įverčiai, gauta suma dalijama iš ekspertų skaičiaus. Antras būdas nustatyti ryšį tarp veiksnių vertinimų yra toks, kad svarbiausiam veiksniui suteikiamas įvertinimas (nustatomas svoris) tam tikram skaičiui 1 arba 10, šie veiksniai vertinami kaip svarbiausio veiksnio dalis. Metodo privalumas yra tai, kad palengvėja įverčių parinkimo procesas, nes nereikia kaskart lyginti visos eilės, o tik atsižvelgti į pirmos ir ankstesnės svarbiausios įverčio reikšmę. Balai apskaičiuojami apskaičiuojant aritmetinį vidurkį.

Nuosekliosios naudos metodas - remiantis atskiro objekto palyginimu su vėlesnių objektų suma, siekiant nustatyti jo svarbą. naudojami matuojant kokybės lygį, vertinant našumą mokslo organizacijos... Šis metodas turi tokį didelį pranašumą prieš kitus metodus, kad leidžia palyginti ir kokybiškai išmatuoti skirtingus veiksnius.

Metodą sukūrė V. Churchmanas ir G. Akofas ir jis skirtas palyginimams atlikti atsižvelgiant į tam tikras leistinas nuokrypas.

Rezultatų pateikimo ar grupavimo tvarka naudai įtakos neturi.

Nuosekliojo palyginimo procedūra yra tokia. Ekspertui pateikiama keletas objektų (rodiklių, veiksnių, rezultatų), kuriuos reikia įvertinti pagal jų santykinę svarbą (reikšmę), ir jis sudaro reitingą. Svarbiausias objektas įvertinamas 1 balu, o kiti objektai – nuo ​​1 iki 0 pagal jų santykinę svarbą. Tada ekspertas nustato, ar 1 balu įvertintas elementas yra svarbesnis už pastarųjų veiksnių sumą. Jei objekto svarba yra didelė, tai jis padidina įvertinimą taip, kad jis būtų didesnis už visų kitų sumą.

Jei objekto vertė yra mažesnė už visų kitų sumą, jis koreguoja balą.

Taigi naudojama procedūra yra sistemingai tikrinti įverčius, juos lyginant iš eilės.

Jei lyginamų objektų skaičius neviršija 7, tikslinga taikyti nuosekliųjų pirmenybių metodą. daugiau objektai, jie turi būti suskirstyti į pogrupius, kuriuose yra 6 objektai. Tais atvejais, kai tai neįmanoma, reikėtų naudoti porų palyginimo metodą.

Porų palyginimo metodas - remiantis poromis tiriamų objektų palyginimu, nustatyti svarbiausius kiekvienoje poroje.

Jis naudojamas nustatyti pranašumą tarp daugybės veiksnių, problemų, rodiklių. Ekspertai gali tiesiog palyginti su teiginiu, kad vienas veiksnys yra pranašesnis už kitą. Galima naudoti specialią pirmenybių skalę, kur kiekvienas pranašumo laipsnis turi savo specifinį įvertinimą.

Suporuotas palyginimo metodas taip pat gali būti naudojamas nustatant bendras veiksnių eiles.

Procedūrai palengvinti sudaromos porinių lygčių matricos, kuriose visi objektai (veiksniai) įrašomi ta pačia tvarka du kartus: viršutinėje eilutėje ir kairiajame stulpelyje. Kiekvienas ekspertas turi surinkti balą dviejų lyginamų veiksnių eilutės ir stulpelio sankirtoje. Priklausomai nuo to, kuris veiksnys yra svarbiausias, šis įvertis bus lygus 1 arba 0. Pagrindinėje tokios matricos įstrižainėje rašomi brūkšneliai arba nuliai (1.2 lentelė).

stalo 1.2.

Kiekvieną veiksnių porą galima palyginti vieną ar du kartus. Egzistuoja skirtingų variantų dalinis porinis palyginimas: pageidaujamo objekto parinkimas iš iš anksto sugrupuotų porų; dalinis porinis vienos objektų grupės palyginimas su visais kitais, o kiti veiksniai lyginami su kai kuriais kitais; nustatant bendras veiksnių gretas.

Poriniai palyginimai kartais derinami su preliminariu objektų reitingavimu, kai poriniai palyginimai naudojami pranašumui išsiaiškinti. atskirus objektus... Šiuo atveju sudaroma papildoma matrica, kuri parodo atvejų, kai vienas veiksnys pasirodo reikšmingesnis už kitą, proporciją. iš viso gautas sąmatas.

Prekių kokybės rodiklių ekspertinio vertinimo metodai- tai yra pavienių ir sudėtingų kokybės rodiklių faktinių verčių nustatymo metodai.

Skirta kokybės rodiklio reikšmėms nustatyti skaičiavimo ar euristiniu būdu tais atvejais, kai matavimo metodų naudojimas yra neįmanomas arba neekonomiškas dėl pernelyg didelių jų naudojimo sąnaudų ar ilgo bandymo laiko. Pavyzdžiui, nustatant maisto skonį ir kvapą, naudojami tik organoleptiniai metodai. Matavimo metodai nepateikia tikslių patikimų įverčių, nepaisant padidėjusių išlaidų.

Norint diferencijuoti ir kompleksiškai vertinti mėginius, kurių kokybė labai skiriasi, vieno rodiklio P reikšmę rekomenduojama nustatyti taip:

kur P; 5 – bazė (atskaitos vertė).

Kitas, tikslesnis metodas yra pagrįstas rodiklių tyrimu, siekiant nustatyti priklausomybės tipus, tai yra, siekiant sukurti rodiklių įverčių apskaičiavimo formules:

Vienetinių kokybės rodiklių vertinimas prasideda nuo leistinų jų kitimo intervalų nustatymo (P; - P;) P; - geriausia rodiklio reikšmė, kurią viršyti nepraktiška arba neįmanoma. Didžiausios leistinos rodiklio reikšmės priskyrimo principai priklauso nuo kokybės vertinimo tikslo, tuo tarpu būtina, kad šis principas būtų vienodas visiems rodikliams.

Jūs padidinate ekspertinių vertinimų patikimumą, suskirstydami sudėtingas operacijas į paprastas, kurios sudaro daugiapakopę leistinų rodiklio verčių vertinimo procedūrą. Perėjimas į kiekvieną kitą lygį vykdomas priėmus sutartus sprendimus į ankstesnįjį.

Kokybės rodiklių leistinų verčių nustatymo ekspertinė procedūra susideda iš kelių operacijų:

išduoda ekspertams klausimynus ir aiškinamuosius raštus, kuriuose išvardijami kokybės rodikliai ir aprašomi rodiklių leistinų verčių pasirinkimo principai;

užpildyti ekspertų anketas ir nurodyti konkrečius gaminių modelius, kurių vertes jie laiko didžiausiomis leistinomis;

kiekvieno eksperto supažindinimas su kitų ekspertų nurodytais vertinimais ir jų aptarimas;

antrojo (kartais trečiojo ir ketvirtojo) apklausos turo vykdymas;

Vertinimo rezultatų vidurkis.

Jei nuomonės labai skiriasi, rengiamas papildomas balsavimo turas. Rodiklio reikšmė imama maksimali, jeigu už jį atiduota ne mažiau kaip 70% balsų. Jei ši sąlyga neįvykdoma, didžiausia leistina reikšme laikoma 50 % didžiausių pimax verčių vidurkis, o mažiausia leistina reikšme laikoma 50 % didžiausių pimax verčių vidurkis. ​naudojami ekspertų K kokybės rodiklių vertinimams nustatyti.

Ekspertų nustatyti priklausomybių tipą (ir) tarp rodiklių reikšmių G; o jų K įverčiai dažnai naudojami „pagrindinio taško metodu“. Jį naudoti būtina dėl to, kad vertinimo procedūros suskirstymas į kelis etapus supaprastina eksperto darbą ir leidžia jam pateikti kai kurių charakteringų taškų įverčius, kuriais remiantis galima sukurti tikrosios vertės modelį.

„Pagrindinio taško metodas“ priklausomai nuo jų skaičiaus, turi keletą veislių.

"Trijų pagrindinių punktų metodas" - pagrįstas G rodiklių verčių padalijimu; didžiausioms, mažiausioms, vidutinėms vertėms ir įverčių P verčių nustatymui; šiuose taškuose. Skalės intervalas tarp didžiausio ir mažiausio balų nustatomas iš anksto (skalės 0-1 arba 0-10). Eksperto užduotis taip pat apima intervalo tarp pagrindinių taškų priklausomybės tendencijos nustatymą ir grafiko sudarymą. Po to iš grafinės priklausomybės galima pereiti prie kokybės rodiklio Ki vertinimų analizės formulės „Trijų pagrindinių taškų metodas“ leidžia sukurti tik apytikslį vertinimo modelį.

"Septynių pagrindinių balų metodas" - vertinimo metodas septynių balų skalėje, skirtas įvertinti rodiklius, kurių reikšmės nustatomos eksperimentiniu arba skaičiavimo būdu, taip pat organoleptiniu metodu.

Septynių balų skalė yra vienoda, tai yra, pereinant iš vienos kokybės klasės į kitą, įvertinimas pasikeičia vienu balu. Šios svarstyklės buvo plačiai pritaikytos, ypač jutiminiam vertinimui. Norėdami gauti tikslesnius rezultatus, turėtumėte pereiti prie pažymių ir taškų santykio tipo apibrėžimo.

Siekiant palengvinti eksperto darbą aiškinamasis raštas anketoje pateikiami penki grafikai. Ekspertas pasirenka kreivę (arba kreivių derinį), kuri, jo nuomone, geriausiai atspindi priklausomybės pobūdį. ir Tada kiekvienai kokybės klasei priskiriamas įvertinimas pagal priklausomybės pobūdį ir kokybės rodiklių reikšmes. Tokiu atveju patartina naudoti skaičius nuo 0 iki 10, 0,5 kartotinius ir klasę " aukščiausios kokybės"gauna 10 balų.

Taigi eksperto sudarytas grafikas apibūdina ryšį tarp Pi rodiklių absoliučių verčių ir jų K įverčių, o organoleptiniais metodais įvertintų rodiklių – tarp kokybės klasių ir jų įvertinimų.

Pabaigoje rezultatai aptariami, apdorojami ir analizuojami. Rodikliams, kurie nustatomi matavimo ir skaičiavimo metodais, pageidautina pateikti analitinį kreivių aprašymą, leidžiantį apskaičiuoti bet kokių rodiklių verčių įvertį.

„Pagrindinių taškų metodo“ naudojimas leidžia sugrupuoti ir klasifikuoti rodiklius pagal priklausomybės tipą.

Sudėtingi kokybės rodikliai nustatomi dviem būdais:

prekių pavyzdžių kokybės kompleksinio vertinimo metodai;

kompleksinių kokybės rodiklių modelių konstravimo metodai.

Visapusiško kokybės vertinimo metodai yra dviejų tipų - greitasis metodas ir perėjimo per lygius be pasiruošimo ir pasiruošimo metodai.

Ekspresiniai metodai visapusiškam prekių pavyzdžių kokybės įvertinimui remiantis kompleksinio kokybės rodiklio nustatymu, analizuojant atskirų pavienių rodiklių reikšmes ir išvaizda be išankstinio jų vertinimo ir neatsižvelgus į svertinius koeficientus.

Taikant šiuos metodus, būtina atsižvelgti į tai, kad ribinis vertinamų rodiklių skaičius net ir aukštos kvalifikacijos ekspertui yra 7-9 tame pačiame hierarchijos lygyje esantys rodikliai, kurie sudaro gana homogenišką grupę. Be to, ekspertai turėtų atsižvelgti į atskirų rodiklių svarbą naudojant svorio koeficientus, jų tarpusavio ryšį, taip pat atsižvelgti į produkto, kaip sistemos, kokybę.

Metodas pereiti per lygius be pasiruošimo yra operacijų rinkinys, kuris atliekamas nuosekliai, palaipsniui didinant lygį. Šiuo atveju analizė pradedama nuo apatinio rodiklių medžio lygio. Atsižvelgdamas į žemesnio lygio rodiklių reikšmes, ekspertas įvertina aukštesnio lygio rodiklius. Šios operacijos kartojamos didinant lygį, kol pasiekiamas aukščiausias lygis – kompleksinis (apibendrintas) kokybės įvertinimas.

Lygio judesio metodas su pasiruošimu remiantis ekspertų preliminariu kokybės rodiklių svertinių faktorių nustatymu ir jų vertinimais. Skirdamas kompleksinius vertinimus, ekspertas žino vidutines svertinių koeficientų reikšmes ir pavienių rodiklių vertinimus. Sudėtingų rodiklių nustatymo procedūra yra panaši į perėjimo per lygius procedūrą be pasiruošimo.

Tarpusavio vertinimo proceso formalizavimas yra rasti ryšį tarp kokybės rodiklių G reikšmių; (arba jų įverčiai K) ir aukštesnio lygio kokybės rodiklis, tai yra nustatant lemiamos funkcijos tipą, kurį ekspertai naudoja skirdami sudėtingus rodiklius. Tuo pačiu metu lemiama funkcija, kaip ir bet kuris modelis, supaprastina tyrimo objektą, nes neatsižvelgiama į visus rodiklius ir ryšius tarp jų.

Pradiniai funkcijos tipo nustatymo duomenys gali būti įvairių mėginių kokybės įvertinimo greitaisiais metodais arba judėjimo lygiais metodais rezultatai. Tada ekspertų skirti vertinimai apibendrinami bendra matrica, kurių kiekviena eilutė yra imties vienetinių rodiklių vertinimų ir kompleksinių ekspertinių vertinimų rinkinys. Tuo remiantis galima kurti mašininius algoritmus ir sudaryti programas sprendimų funkcijoms rasti naudojant kompiuterį.

Vartotojo pasirinkimo mechanizmas yra gana konservatyvus, nes jis paprastai grindžiamas tik tuo, kas jau pasiteisino. Ji labiau orientuota į praeitį nei į galimą ateitį.

Rinkos sąlygomis gaminių kokybės vertinimo pagrindas turėtų būti objektyvus gaminių visuomeninis naudingumas, atspindintis jo progresyvumą ir atitikimą naujo gyvenimo būdo ypatumams. Vienas iš metodų, galinčių pateikti būtent tokį produkto įvertinimą, gali būti ekspertinis metodas.

Ekspertinis metodas vertinant gaminių kokybę, reikia išsiaiškinti ekspertų nuomones.

Ekspertas Yra kvalifikuotas specialistas, atitinkantis profesinės ir kokybinės kompetencijos, operatyvumo ir objektyvumo reikalavimus, taip pat besidomintis ekspertų komisijos darbu.

Ekspertų metodų naudojimas yra racionalus, jei yra viena iš dviejų priežasčių:

· Užduotis negali būti atlikta jokiu kitu būdu;

· Kiti užduoties atlikimo būdai, ne tokie tikslūs, arba sudėtingesni.

Ekspertų metodai, kartu su kitais arba atskirai, gali būti naudojami siekiant:

· Gaminio klasifikacija;

· Gaminių kokybės rodiklių nomenklatūros apibrėžimas;

· Atskirų kokybės rodiklių svorio koeficientų nustatymas;

· Bazinių gaminių pavyzdžių parinkimas ir atskirų šių mėginių kokybės rodiklių verčių nustatymas;

· Vertinamų produktų kokybės organoleptinių rodiklių nustatymas;

· Kompleksinių gaminių kokybės rodiklių nustatymas.

Aukštos kvalifikacijos ekspertų pritraukimas dirbti ekspertų komisijose leidžia gauti tikslų ir atkuriamą prekių kokybės įvertinimą. Atlikti eksperimentai patvirtina, kad taikant teisingą ekspertinio vertinimo metodiką rezultatų paklaida svyruoja 5–10% ribose ir ją galima visiškai palyginti su instrumentinių metodų rezultatais.

Gaminių kokybei įvertinti ekspertiniu metodu sudaromos ekspertų komisijos. Tokios komisijos sudarymo tvarka, tikslai ir uždaviniai nustatomi ministerijos, skyriaus, asociacijos, firmos vadovo įsakymu ar potvarkiu. Bendras algoritmas Grupinės apklausos metodus taikančios ekspertų komisijos sudarymo ir darbo operacijos parodytos 7.1 pav.

Ekspertų grupės darbas baigiamas statistiniu ekspertinių vertinimų apdorojimu, jų analize ir pagrįstų sprendimų priėmimu.

Pagrindiniai grupinio ekspertinio vertinimo privalumai yra galimybė visapusiškai išanalizuoti problemas, susijusias su individualių produkto savybių nustatymu. Sąveika tarp ekspertų padidina apibendrintos informacijos kiekį, palyginti su kiekvienu grupės nariu. Atliekant grupinį vertinimą, galutiniame darbo rezultate yra mažesnė klaidų tikimybė. Daugeliu atvejų grupės vertinimas yra patikimesnis nei kiekvieno eksperto individualus vertinimas.

Darbo grupė parengia ir atlieka ekspertinį gaminių kokybės vertinimą. Jos užduotis – rengti ekspertus, padėti vertinti kokybę, apdoroti, analizuoti, apibendrinti rezultatus ir suformuoti kolektyvinę ekspertų nuomonę. Pradedama nuo ekspertų atrankos ir ekspertų grupės sudarymo.

Ryžiai. 7.1. Bendras ekspertų komisijos sudarymo ir darbo operacijų algoritmas

Ekspertų komisiją sudaro dvi grupės – darbinė ir ekspertinė.

Į darbo grupę įeina:

· organizatorius(jis yra ir ekspertų komisijos pirmininkas) teikia metodinius nurodymus darbui visuose etapuose. Jis turi būti kvalifikuotas gaminių kokybės vertinimo metodikos srities specialistas, išmanyti jos gamybos pagrindus ir procesus, kurie gali vykti šiame gaminyje, jo gamybos, transportavimo ir sandėliavimo metu. Jis sudaro darbo grupę; sudaro darbo programą; dalyvauja ekspertų apklausoje; analizuoja kiekvienos operacijos rezultatus, taip pat galutinius rezultatus, pagal atliktos degustacijos rezultatus formuluoja išvadas ir pasiūlymus;

· specialistas - tai aukštos kvalifikacijos įmonės darbuotojas, prie kurio sudaroma ekspertų komisija. Pageidautina, kad jis turėtų universalių žinių apie gaminį tiek apie jo gamybą, tiek apie naudojimo ypatybes. Specialisto užduotis – analizuoti iš ekspertų gautą informaciją, siekiant koreguoti tolesnį įmonės darbą. programuotojas. Jeigu gaminio kokybės vertinimas ar rezultatų apdorojimas atliekamas naudojant kompiuterines technologijas, tai pagrindinė šio specialisto užduotis yra parengti tokio darbo atlikimo ir vėlesnio gautų rezultatų apdorojimo programą;

· technikai paaiškinti anketos nuostatas, jeigu jos nėra pakankamai aiškios ekspertams, atlikti jų apklausą, gauti ekspertų anketas, gali patikslinti rezultatus, tačiau savo nuomonės dėl ekspertų vertinimo neturėtų reikšti.

Ekspertų grupės formavimas. Organizatorius ir specialistas sudaro ekspertų sąrašą (atsižvelgdami į pareigas, darbo laiką ir pobūdį, profesiją). Grupėje turėtų būti įvairių gamybos sričių ir gaminių kokybės vertinimo (dizainas, gamybos technologija, estetika, kokybės tyrimai) specialistai.

Ekspertų grupė gali būti sudaryta iš vienos ar kelių firmų, gaminančių (parduodančių) šios grupės prekes, darbuotojų. Kartu būtina atsižvelgti į tam tikroje įmonėje dominuojančias tendencijas ir požiūrį į produktų kokybę, oficialią ekspertų padėtį (pavaldumą), psichologinio klimato grupėje kūrimą ir palaikymą. Patartina teikti pirmenybę ekspertų grupės kūrimui vienos firmos pagrindu, į darbą pakviečiant kelis specialistus iš kitų firmų.

Ekspertų komisijos darbo rezultatas labai priklauso nuo ekspertų skaičiaus ir jų kompetencijos. Ieškoti ekspertų yra nepaprastai sudėtinga užduotis. Tai susiję su tuo, kad:

· Būtina atsižvelgti į individualius ekspertų gebėjimus, o patikimo metodo šiems gebėjimams nustatyti nėra;

· Nepakankamai ištirtos psichofiziologinės žmogaus savybės, nuo kurių labai priklauso ekspertų darbas;

· Egzistuoja prieštaravimas tarp noro sumažinti ekspertizės kainą pasitelkus ribotą ekspertų skaičių įvairių prekių kokybei įvertinti ir noro padidinti ekspertinio sprendimo tikslumą ir patikimumą.

Pasak G.G. Azgaldova ir E.P. Raikhmano, ekspertų kompetenciją lemia 4 savybių grupės (7.2 pav.).

Profesionalus mokymas suteikia žinių apie įvairius gaminių projektavimo ir gamybos aspektus, klientų reikalavimus, naudojimo (eksploatavimo) sąlygas ir pobūdį.

Kokybinis mokymai suteikia ekspertui aiškų supratimą apie gaminių kokybės vertinimo principus ir metodus, individualių kokybės rodiklių nustatymo metodų išmanymą ir gebėjimą juos panaudoti praktinio darbo procese (įvairių tipų vertinimo skalių naudojimas, gebėjimas išskirti pakankamą vertinamų produktų gradacijų skaičių).

Ryžiai. 7.2. Ekspertų kompetencijos rodikliai

Palūkanos ekspertas ekspertų komisijos darbe priklauso nuo daugelio veiksnių:

· Egzamino tikslai;

· Išvadų pobūdis;

· individualios savybės ekspertas,

· Įdarbinimas pagrindinėje darbovietėje;

Galimybė panaudoti ekspertinio vertinimo rezultatus savo praktinis darbas.

Versliškas ekspertas apima dėmesio mobilumą ir elastingumą (gebėjimą greitai perjungti dėmesį nuo vieno rodiklio prie kito); santūrumas; efektyvumas; išvadų pagrįstumas; kontaktas (gebėjimas dirbti su žmonėmis konfliktinėse situacijose); vertinimo motyvacija.

Objektyvumas ekspertas yra tai, kad jis daro išvadas pagal faktinį vertinamo produkto kokybės lygį, o ne vadovaujasi kitomis nuomonėmis.

Ekspertų kompetencijos vertinimo metodai suskirstyti į 5 grupes: euristinę, statistinę, bandomąją, dokumentinę ir kombinuotą.

Euristinė(iš graik. heurisko – ieško, atveria) eksperto vertinimas remiasi jį supančių žmonių vertinimu arba savigarba. Egzistuoja tokie euristinių vertinimų tipai: savęs vertinimas, abipusis vertinimas, darbo grupės vertinimas.

Savigarba Tai metodas, kai ekspertas pats įvertina savo kompetenciją. Nustatyta, kad kuo aukštesnis ekspertų grupės narių savęs vertinimo vidurkis, tuo didesnis ekspertinio vertinimo vidurkio patikimumas. Tuo tarpu reikia turėti omenyje, kad savęs vertinimo rezultatai beveik visada yra subjektyvūs, o tai yra šio metodo trūkumas.

Siekiant pagerinti savęs vertinimo rezultatų tikslumą, jis atliekamas diferencijuotai. Savigarbos rodiklis nustatomas kaip dviejų koeficientų funkcija: vertinamo produkto žinomumas ir žinojimas bei jo vertinimo pagrįstumas. T.G. Rodninas ir G.O. Vux siūlo eksperto žinomumą ir žinojimą apie vertinamus produktus nustatyti naudojant „Įsivertinimo klausimyną“ (A priedas). Anketoje ekspertas pažymi susipažinimo su informacijos šaltiniais reguliarumą, taip pat savo susipažinimo su vertinamais produktais laipsnį. Savęs įvertinimas apskaičiuojamas pagal formulę:

K sam = Esp I ex,

kur pats K yra eksperto įsivertinimo koeficientas;

Pavyzdžiui, sąmoningumo ir žinių rodiklių svoris;

I ex – įvertinimas, kuris priklauso nuo sąmoningumo laipsnio.

Paties K apskaičiavimo pavyzdys pateiktas B priede.

Abipusis vertinimas- tai euristinis eksperto įvertinimas, kurį pateikia kiti ekspertai, tai turėtų sumažinti kiekvieno eksperto savęs vertinimo subjektyvumą. Yra žinoma, kad yra ryšys tarp eksperto kompetencijos ir vidutinių balų, kuriuos jis gavo iš kolegų. Tokio tipo vertinimo esmė ta, kad kiekvienas ekspertų grupės narys pateikia vertinimą visiems kitiems ekspertams, o tada apskaičiuojamas kiekvieno eksperto įvertinimo vidurkis.

Abipusio vertinimo trūkumai:

· Ekspertai gali blogai vienas kitą pažinti;

· Vertinimo rezultatams gali turėti įtakos abipusės simpatijos ar antipatijos;

· Skirtingi ekspertai gali nevienareikšmiškai suvokti „ekspertų kompetencijos“ sąvoką;

· Abipusį vertinimą naudoti tik tose komisijose, kuriose ekspertai vieni kitus gerai pažįsta;

· Atlikti anoniminę apklausą;

· Paaiškinkite, kad apklausos rezultatai bus naudojami tik prekių įvertinimams koreguoti.

Darbo grupės ekspertinis vertinimas Tai euristinis vertinimas, kuris turėtų kiekybiškai išreikšti eksperto susidomėjimą ekspertiniu vertinimu ir jo dėmesingumą pokalbio procese. Įvertinimą pateikia analitikai specialistai, kurie, atlikę produkto ekspertinį įvertinimą, atlieka ekspertų apklausą. Kartu jie įvertina ir ekspertų požiūrį į ekspertizę, ir jų aktyvumą aptariant rezultatus. Dažniausiai šiam vertinimui rekomenduojama naudoti 10 balų įvertinimą.

Statistinis įvertinimas... - tai įvertinimas, gautas statistiškai apdorojus ekspertų nuomones apie vertinimo objektą. Šie įvertinimai naudojami siekiant sumažinti klaidų, atsirandančių ekspertų vertinimuose, skaičių. Tyrimo rezultatų statistinio apdorojimo poreikis atsiranda dėl to, kad, priešingai nei matavimai, atliekami techninėmis priemonėmis ir yra pagrįsti nežinomų dydžių palyginimu su žinomomis, ekspertiniais metodais, dažnai nėra žinomos vertės. Be to, ekspertinių vertinimų tikslumą įtakoja daugelis objektyvaus ir subjektyvaus pobūdžio veiksnių, dėl kurių atsiranda sisteminių ar atsitiktinių klaidų.

Sisteminė klaida yra klaida, kuri proceso metu kartojasi nuolat. šis apibrėžimas... Pagrindinė jo atsiradimo priežastis – nepakankama arba netiksli ekspertų informacija. Jį galima sumažinti prieš pradedant ekspertų komisijos darbą supažindinant ekspertus su reikiama informacija. Sisteminę paklaidą galima nustatyti pagal kiekvieno eksperto įvertinimo nukrypimą nuo ekspertų komisijoje gauto vidurkio.

Atsitiktinė klaida priklauso nuo eksperto psichofiziologinių savybių (ramybės, dėmesingumo, pasitikėjimo savo teisumu). Jis mažėja, jei ekspertas dažnai dalyvauja ekspertų komisijų darbe ir turi praktinės patirties.

Eksperto objektyvumo vertinimas Ar eksperto gebėjimo netyčia įvertinti konkretų prekių pavyzdį įvertinimas. Tai labai svarbi eksperto kompetencijos ypatybė, kuri labai įtakoja ekspertinio vertinimo rezultatų tikslumą.

Testų rezultatai leisti naudojant testavimą nustatyti psichofiziologines ekspertų charakteristikas. Jie naudojami vertinant eksperto objektyvumą, kokybinį ir profesinį pasirengimą. Testavimas leidžia įvertinti asmenybės bruožus, ko negalima padaryti jokiu kitu metodu. Šio metodo trūkumas yra tai, kad neįmanoma palyginti testavimo metodu gautų duomenų su duomenimis, gautais naudojant kitus objektyvius metodus.

Rašydami testus turite laikytis šių reikalavimų:

· Ekspertas turi suprasti testo užduoties formuluotę ir sąlygas, kurias atitinka jo sprendimas;

· Tikimybė atsitiktinai atspėti užduoties sprendimą turėtų būti artima nuliui;

· Testo užduotis turi turėti tikslų atsakymą;

· Būtina pagrįsti apytikslį testo uždavinį ir realias problemas, kurias ekspertas sprendžia vertindamas gaminių kokybę.

Kvalimetrinio mokymo įvertinimas eksperto vertinimu teorinių žinių gaminių kokybės rodiklių vertinimo metodai ir gebėjimas juos panaudoti praktiniame darbe. Šis vertinimas gali būti atliekamas žodžiu arba raštu tikrinant žinias naudojant testus.

Kiek sunkiau patikrinti tokias žinias kaip gebėjimas naudotis Įvairių tipų vertinimo skales, nustatyti subjektyvią tikimybę, atpažinti pakankamai kokybės rodiklių gradacijos.

Dokumentinis vertinimas– Tai ekspertinis vertinimas, pagrįstas dokumentais, patvirtinančiais jo atitiktį nustatytiems reikalavimams. Pavyzdžiui, gali būti patvirtinta eksperto kompetencija Bendra informacija, kurie pateikiami anketoje: patirtis - darbo knygelės kopija; profesinis mokymas – profesinio išsilavinimo diplomas; specialusis mokymas - pažymėjimas arba nustatytos formos pažymėjimas apie specialų mokymą; išplėstinis mokymas – pagal atitinkamą pažymėjimą.

Dokumentinis vertinimas gali būti tik priedas prie kitų eksperto kompetencijos vertinimo metodų ir neturi savarankiškos reikšmės. Taip yra dėl to, kad dalis informacijos, kuri yra dokumentuose, dubliuoja kitus vertinimus.

Kombinuotas vertinimas apima įvairių ekspertų kompetencijos vertinimo metodų taikymą. Kadangi įvairūs šio vertinimo metodai turi savų privalumų ir trūkumų, jie dalijimasis gali padidinti atskirų metodų pranašumus ir sušvelninti trūkumus.

Kontroliniai klausimai ir užduotys

1. Kokia vartotojų juslinės analizės metodų esmė?

2. Kokias sąlygas reikia sudaryti kuriant degustacijos komisijas vartotojų vertinimui?

3. Kokių taisyklių reikia laikytis rengiant vartotojų vertinimo anketą?

4. Kokia yra porinio ir trikampio tyrimo metodų esmė?

5. Kokia juslinės analizės metodų esmė?

6. Kokiu tikslu dažniausiai naudojamas auginimo būdas?

7. Kokia taškinio prekių kokybės vertinimo esmė?

8. Kokių reikalavimų reikia laikytis kuriant balų sistemą prekių kokybei įvertinti?

9. Kokiu tikslu nustatomi kokybės rodiklių reikšmingumo koeficientai?

10. Kokia yra ekspertinio prekių kokybės vertinimo metodo esmė?

11. Kokie pagrindiniai etapai ir operacijos vyksta ekspertinio vertinimo metu.

12. Kokie yra ekspertų kompetencijos vertinimo metodai?

13. Apibūdinti pagrindinius ekspertų kompetencijos vertinimo metodus (euristinis, testinis, dokumentinis).

Ekspertiniai gaminių kokybės vertinimo metodai

Parametrų pavadinimas	Reikšmė
Straipsnio tema:	Ekspertiniai gaminių kokybės vertinimo metodai
Kategorija (teminė kategorija)	Gamyba

Produktų kokybės vertinimo metodai

Yra daug matematinių metodų ir susijusios programinės įrangos produktų kokybei įvertinti. Jie apima:

· Ekspertinis gaminių kokybės vertinimas, ypač Delphi metodu;

· Prekės kokybės vertinimas naudojant neaiškią logiką;

· Produkto kokybės vertinimas naudojant klasterinę analizę;

· Tikimybiniai gaminių kokybės vertinimo metodai;

Labiausiai paplitęs ekspertinis gaminių kokybės vertinimas.

Ekspertinis gaminio kokybės įvertinimas leidžia išspręsti daugybę problemų, tarp kurių:

· Ekspertų grupės formavimas ir ekspertų kompetencijos vertinimas;

· Ekspertinių matavimų metodo parinkimas;

· Ekspertinių vertinimų apdorojimas ir ekspertinių išvadų nuoseklumo laipsnio nustatymas;

· Ekspertinių vertinimų nuoseklumo gerinimas.

Ekspertiniai matavimo metodai apima tiesioginį vertinimą, reitingavimą, palyginimą poromis ir kt.
Paskelbta ref.rf
.

Tiesioginis ekspertizės objektų (privačių ar vientisų gaminių kokybės rodiklių) vertinimas susideda iš ekspertų, naudojant santykių skales, skiria balus (5.1 pav.). Santykio skalė yra intervalo skalės tipas su nuliniu atskaitos tašku. Šiuo atveju, norint gauti vientisą gamybos rodiklį, leidžiama naudoti adityvią dalinių rodiklių konvoliuciją. Paprastai naudojamos 5, 10 ir 100 balų skalės. Ekspertinių vertinimų rezultatams apdoroti naudojami statistiniai metodai ir šie statistiniai rodikliai:

· Mediana – gauti vidutinę ekspertų grupės nuomonę;

· Viršutiniai ir apatiniai kvartiliai – apibūdinti ekspertinių vertinimų diapazoną;

· Sutapimo koeficientas – apibūdinti ekspertų nuomonių sutapimo laipsnį.

Ryžiai. 5.1. Ekspertų grupės atliktas gaminio kokybės rodiklio įvertinimas

Viršutinis ir apatinis kvartiliai apibrėžia įverčių ribas, už kurių yra 25% ekspertų įverčių.

Sutapimo koeficientas svyruoja nuo 0 iki 1, 0 - visiškas ekspertų nenuoseklumas, 1 - visiškas vienbalsiškumas.

Vienas is labiausiai veiksmingi metodai grupinio ekspertų vertinimo formavimas yra Delphi metodas.

Siekiant padidinti ekspertų nuomonių nuoseklumo laipsnį, šis metodas numato kelių etapų ekspertų apklausos procedūrą.

Pirmajame etape ekspertai savo vertinimus atlieka atskirai. Kituose etapuose kiekvienas ekspertas susipažįsta su kitų ekspertų sprendimais, kad būtų galima pakoreguoti jų vertinimą. Daugiapakopė ekspertų apklausos procedūra tęsiama tol, kol sąmatų sklaidos vertė neviršija nustatytų ribų.

Delphi metodo ypatybės yra šios:

· Grupinis egzamino pobūdis;

· Daugiapakopė ekspertų apklausos procedūra;

· Ekspertų izoliavimas atliekant vertinimus kiekviename etape;

· Ekspertinių vertinimų pagrindimas diskusijos metu po kiekvieno etapo.

Apklausos procedūra pagal Delphi metodą susideda iš ekspertų apklausos naudojant asmeninius kompiuterius, prijungtus prie vietinio ar pasaulinio tinklo, apdorojant ir centralizuotai apdorojant informaciją po kiekvieno turo.

Statistinės programinės įrangos produktai gali būti naudojami kaip programinė įranga ekspertų vertinimams apdoroti. Statistica(programuotojas StatSoft) ir SPSS (Statistiniai produktai ir paslaugų sprendimas- statistinių produktų ir paslaugų sprendimai, kūrėjas SPSS Inc.).

Svarbu pažymėti, kad ekspertinių vertinimų koordinavimui jų „išlyginimu“ turėtų būti naudojamas 5.7 punkte aptartas neaiškios logikos aparatas.

Ekspertiniai gaminių kokybės vertinimo metodai – samprata ir rūšys. Kategorijos „Ekspertiniai gaminių kokybės vertinimo metodai“ klasifikacija ir ypatumai 2017, 2018 m.

7 paskaita. Ekspertinio kokybės vertinimo technologijos ypatumai.

Ekspertinių metodų esmė ir naudojimo organizavimas

kokybės vadyboje

Kaip mokslinis metodas, ekspertinis metodas buvo sukurtas palyginti neseniai ir vadinosi „Delphi“. Vėliau, remiantis ekspertų vertinimais, buvo sukurti ir kiti panašūs metodai. Iš pradžių ekspertiniai metodai buvo naudojami daugiausia sprendžiant problemas, susijusias su prognozavimu mokslo ir technologijų srityje, o vėliau jie pradėti taikyti kitose srityse, įskaitant vadybą.

Ekspertinių metodų esmė susideda iš įvairiais būdais gautų ekspertų nuomonių (sprendimų) nagrinėjamais klausimais vidurkio. Vidutinis balas (Į) nustatoma pagal formulę

kur n- ekspertų skaičius,

K i - suteiktas įvertinimas i-m ekspertas.

Labiausiai paplitę ekspertiniai išankstinio klasifikavimo metodai, pagrįsti pirmenybių vertinimu rango metodas, tiesioginis balų skaičiavimo metodas ir palyginimo metodas... Pastarasis apima dvi veisles - porinis palyginimas ir nuoseklus palyginimas.

KAM ekspertinių metodų įvairovė organoleptiniai ir sociologiniai gali būti priskirti tam tikram susitarimui. Organoleptinis metodas remiantis eksperto pojūčių (skonio, klausos, regos, uoslės, lytėjimo) naudojimu. Jis naudojamas vertinant, pavyzdžiui, maisto produktus. Sociologinis metodas yra pagrįsta apklausa, respondentų nuomonių rinkimu ir analize (pavyzdžiui, faktinės ar potencialių vartotojų). Tokia apklausa ir nuomonių rinkimas vykdomas raštu (naudojant anketas) arba žodžiu (konferencijose, aukcionuose, parodose ir kt.). Ją naudojant reikėtų taikyti moksliškai pagrįstus tyrimo metodus, matematinius informacijos rinkimo ir apdorojimo principus. Ekspertinių metodų bendrumas slypi jų naudojimo procedūrų sekoje. Tai apima ekspertinio vertinimo organizavimą, ekspertų nuomonių rinkimą ir rezultatų apdorojimą.

Ekspertinių metodų taikymo rezultatų subjektyvumo mažinimas labai priklauso nuo ekspertinio darbo organizavimo, rengimo ir vykdymo taisyklių laikymosi. Tai ypač priklauso nuo ekspertinio vertinimo organizavimo, už ekspertinio vertinimo darbų organizavimą ir atlikimą atsakingo asmens paskyrimo, taip pat nuo ekspertų komisijų sudarymo.

D Ekspertų komisijos pirmininkas skiriamas bendrajai ekspertinio darbo priežiūrai. Komisija susideda iš dviejų grupių – darbinės ir ekspertinės (1 pav.).

Darbo grupės vadovui pavaldūs techniniai darbuotojai, kurie atlieka techninę medžiagų paruošimo ekspertų darbui, rezultatų apdorojimo ir kt. pusę, taip pat sprendžiamų problemų specialistai.

Ekspertų grupę sudaro darbo grupės vadovas, kuris iškelia problemą ir nustato grupės veiklos sritį; sudaro preliminarų specialistų ekspertų sąrašą; analizuoja preliminaraus ekspertų sąrašo kokybinę sudėtį ir patikslina sąrašą; gauna eksperto sutikimą dalyvauti darbuose; sudaro galutinį ekspertų grupės sąrašą.

Ekspertų skaičius grupėje priklauso nuo daugelio veiksnių ir sąlygų, ypač nuo sprendžiamos problemos svarbos, turimų galimybių ir kt. Specialistų atranka atliekama remiantis kiekvieno galimo kandidato savybių analize. . Kartu naudojami įvairūs metodai: kandidatų vertinimas remiantis statistine praeities veiklos rezultatų kokybės analize; kolektyvinis kandidato, kaip šios srities specialisto, vertinimas; kandidato į ekspertą įsivertinimas; analitinis kandidatų kompetencijos nustatymas.

Dažnai vienu metu naudojami keli metodai, pavyzdžiui, įsivertinimas ir kolektyvinis siūlomo eksperto savybių vertinimas. Šis metodas leidžia pagrįstai pasirinkti reikiamų savybių ekspertus. Tačiau reikia pripažinti, kad praeities veiklos vertinimo metodas atrodo objektyvesnis nei įsivertinimo ir kolektyvinio vertinimo metodai. Visais atvejais kandidatai į ekspertus turi turėti šias savybes: profesinę kompetenciją; kūrybiškumas (gebėjimas spręsti kūrybines problemas); mokslinė intuicija; domėjimasis objektyviais ekspertinio darbo rezultatais; efektyvumas (koncentracija, gebėjimas pereiti nuo vienos veiklos rūšies prie kitos, bendravimas, sprendimo savarankiškumas, veiksmų motyvacija); objektyvumas.

Rengiant ekspertų nuomones, preliminariai nustatoma: vieta ir laikas; formos ir technikos; nuomonių rinkimo turų skaičius, dokumentacijos sudėtis ir turinys, ekspertų išvadų įrašymo į dokumentus tvarka. Svarbu pasirinkti ekspertų nuomonių rinkimo formą.

Tarp visų žinomų nuomonių rinkimo formų galima išskirti individualias, kolektyvines ir mišrias. Kiekviena iš šių formų skiriasi: apklausa, interviu, diskusija, minčių šturmas, susitikimas, verslo žaidimas. Daugelyje jų jie naudojami kartu, o tai suteikia daugiau efekto ir objektyvumo. Toks ekspertų nuomonių rinkimo metodas, kai naudojama mišri forma, taikomas esant problemos dviprasmiškumui, atskirų nuomonių nesutapimui ar ekspertų nesutarimui kolektyvinėje diskusijoje.

Praktikoje dažniau naudojamas klausimynas, kuris leidžia surinkti ekspertų nuomones su mažiau pastangų. Įprastas klausimyno rengimo procesas apima:

Kreipimosi į ekspertą formos ir turinio nustatymas;

Klausimų tipo pasirinkimas;

Klausimų formuluotės;

Ekspertui reikalingos informacijos išrašas;

Anketos formos kūrimas.

Pastaraisiais metais tarp klausimų tipų dažniausiai naudojami vadinamieji gerbėjų tipai (mano, kad vienas atsakymas iš daugelio atsakymų), uždarieji (atsakymai „taip“, „ne“, „nežinau“). ) ir atviras (atsakymas į klausimą gali būti pateiktas bet kokia forma) ...

Apklausiant ekspertus, labai svarbu teisingai, paprastai ir nedviprasmiškai, trumpai ir tuo pačiu reikiamai išsamiai suformuluoti klausimus anketose, o aiškinamojo rašto tekste nurodyti, ko tiksliai iš eksperto reikalaujama. Norint atsakyti į klausimus, tai yra, kad kiekvienas ekspertas priimtų sprendimą, objektyvūs ir (ar) subjektyvūs nagrinėjamo objekto matavimai atliekami eksplicitine arba numanoma forma. Subjektyvaus matavimo atveju ekspertai paprastai taiko vieną iš anksčiau nurodytų metodų (greitai, tiesioginis vertinimas, palyginimai).

Rangų ir tiesioginio vertinimo metodas.

Pagal rango metodą ekspertas išrikiuoja (surikiuoja) tiriamus objektus, atsižvelgdamas į jų santykinę svarbą (pirmybę). Šiuo atveju labiausiai pageidaujamam objektui paprastai priskiriamas pirmasis rangas, o mažiausiai pageidaujamam - paskutiniam, kuris absoliučia verte yra lygus užsakomų objektų skaičiui. Toks išdėstymas tampa tikslesnis esant mažesniam tiriamųjų objektų skaičiui, ir atvirkščiai.

NS

1.9.2 lentelė Gauto reitinguojamų objektų rango nustatymas

Reitingavimo objektas Nr.	Ekspertas Nr.							Objektų eilių suma

Esant pageidaujamam (pagal eiles) vieno eksperto tyrimo objektų išdėstymui, eilių suma turi būti lygi visos natūralios objektų skaičiaus serijos skaičių sumai. H, pradedant nuo vieno [ H x (H + 1): 2]. Gautos reitingavimo objektų eilės pagal tyrimo duomenis nustatomos kaip kiekvieno objekto eilių suma. Tokiu atveju pirmasis rangas priskiriamas objektui, kuris gavo mažiausią rangų sumą, o paskutinis - tam, kurio rangų suma didžiausia, tai yra mažiausiai reikšmingam objektui (nustatymo pavyzdys gautas septynių ekspertų trijų objektų reitingas pateiktas 2 lentelėje) ...

Tiesioginio vertinimo (balais) metodas – tai tiriamų objektų eilės tvarka pagal svarbą, kiekvienam iš jų skiriant balus. Reikšmingiausiam objektui suteikiamas didžiausias priimtos skalės balų skaičius, vertinimo skalės diapazonas dažniausiai imamas nuo 0 iki 1, iki 5, iki 10 arba iki 100. Paprasčiausiu atveju įvertinimas gali būti 0 arba 1. Kartais vertinimas atliekamas žodžiu, pavyzdžiui, „labai svarbu“, „svarbu“, „nesvarbu“. Kad būtų patogiau apdoroti apklausos rezultatus, tokius įvertinimus galima konvertuoti į balų skalę (pavyzdžiui, atitinkamai 3, 2, 1).

N

3 lentelė. Tiesioginio objektų vertinimo rezultatų nustatymas

Vertinimo objektas Nr.	Ekspertas Nr.							Objekto taškų suma	Gautas objekto rangas	Objekto svoris

Tiesioginis vertinimas turėtų būti naudojamas pasitikint visomis profesionaliomis ekspertų žiniomis apie tiriamų objektų savybes. Remiantis vertinimų rezultatais, nustatomas kiekvieno tiriamo objekto rangas ir svoris (reikšmingumas) (trijų objektų vertinimo 10 balų skalėje pavyzdys pateiktas 3 lentelėje).

Remiantis ekspertinių vertinimų rezultatais, bet kurio objekto vietą galima nustatyti pagal formulę:

(2)

Kur V i - reikšmę i- objektas ( i = 1, 2,.., NS), apskaičiuojamas remiantis

ekspertų vertinimai ( j = 1,2,.., k),

A ij - pateiktas įvertinimas (taškais). i- objekte j-m ekspertas.

Suderinimo metodas.

Sutapimo metodas atliekamas poriniu palyginimu ir nuosekliu palyginimu.

Porinis palyginimas ekspertas lygina tiriamus objektus pagal svarbą poromis, kiekvienoje poroje nustatydamas svarbiausius. Ekspertas pavaizduoja visas įmanomas objektų poras kiekvienos kombinacijos (objektas 1 - objektas 2, objektas 2 - objektas 3 ir tt) arba matricos pavidalu. Bendras palyginamų porų skaičius yra

, (3)

kur H - ištirtų ekspertizės objektų skaičius.

V

4 lentelė Matrica, skirta objektams įvertinti poriniu palyginimu

Objekto pavadinimas	Objekto Nr.						Bendras pageidavimų skaičius

Lyginimo rezultate ekspertas išsako nuomonę apie vieno ar kito objekto svarbą, tai yra teikia pirmenybę vienam iš jų. Kartais ekspertai daro išvadą apie kiekvieno iš poros objektų lygiavertiškumą. Norint užsakyti visus svarstomus objektus, būtinas vėlesnis palyginimo rezultatų apdorojimas. Patogiausia atlikti porinius palyginimus ir jų apdorojimą naudojant matricas kaip priemonę (4 lentelė). Kai kuriais atvejais, kai tiriamų objektų yra daug, porinio palyginimo rezultatams įtakos turi psichologiniai veiksniai, ty kartais pirmenybė teikiama ne tam objektui, kuris iš tikrųjų yra pranašesnis už kitus, o tam, kuris įraše įrašytas pirmasis. porų sąrašas arba yra aukščiau esančioje matricoje. lyginama, todėl kartais, siekiant atmesti psichologinę įtaką, atliekamas dvigubas suporuotas palyginimas, tai yra, dar kartą atliekamas porinis palyginimas, bet tik esant priešingam objektų ir objektų išdėstymui kiekvienoje poroje. Dvigubo porų palyginimo porų skaičius yra atitinkamai dvigubai didesnis nei palyginus vieną porą.

Įrašydamas kiekvieną derinį, ekspertas pabrėžia svarbiausią kiekvienoje lyginamų objektų poroje. Kiekvienos objektų poros matricos vertikalių ir horizontalių eilučių sankirtoje jis deda 1 arba 0 (arba pliusą arba minusą), priklausomai nuo jo nustatytos to ar kito objekto reikšmės.

Kiekvieno palyginimo objekto svoris apskaičiuojamas pagal formulę:

(4)

kur A i/i, j- pirmenybių skaičius (vienetai arba pliusai, apatiniai brūkšniai)

i aukščiau esantis objektas i- nurodytas objektas j-m ekspertas;

A - viso objektų porų skaičiaus.

R

5 lentelė. Suporuoto objektų palyginimo rezultatų suvestinė

Objekto pavadinimas	Objekto Nr.	Pirmenybių skaičius aš- ekspertų pateiktas objektas					Preferencijų suma	Objekto svoris

Visų ekspertų matricų pildymo rezultatus ir apskaičiuotus duomenis galima apibendrinti matricoje (5 lentelė).

Dvigubo porinio palyginimo skaičiavimai atliekami pagal tas pačias formules kaip ir įprasto porinio palyginimo atveju, tačiau porų skaičius padvigubinamas.

Nuosekliojo palyginimo metodo esmė yra taip. Ekspertas visus tiriamus objektus išdėsto jų svarbos tvarka (kaip rangavimo metodą). Kiekvienam objektui preliminariai priskiriamas tam tikras balų skaičius, pavyzdžiui, skalėje nuo 0 iki 1 (kaip vertinimo metodas). Be to, svarbiausiam objektui suteikiamas 1 balas, o visiems likusiems - mažėjančia svarbos tvarka nuo 1 iki 0. Toliau ekspertas nusprendžia, ar objekto, kurio reitingas 1, svarba bus didesnė nei visų kitų objektų balų suma. Jei yra, tada pirmojo objekto balo reikšmė padidėja iki tokio lygio, o jei ne, ekspertas sumažina šią reikšmę iki tokios skaitinės reikšmės, kad ji tampa mažesnė už visų kitų objektų įverčių sumą. Antrojo, trečiojo ir paskesnių objektų įvertinimų reikšmės pagal svarbą nustatomos nuosekliai taip pat, kaip ir pirmojo svarbiausio objekto vertinimas.

Nuosekliojo palyginimo metodas yra pats sunkiausias ekspertams, tai ypač jaučiama, kai tiriamų objektų skaičius viršija šešis ar septynis.

Ekspertinių duomenų apdorojimas ir nuoseklumo įvertinimas.

Surinktos ekspertų nuomonės apdorojamos tiek kiekybiškai (skaitiniai duomenys), tiek kokybiškai (informacinė informacija). Apdorojimo metu naudojami įvairūs metodai. Esant skaitiniams duomenims sprendžiant klausimus, turinčius pakankamai informacinės medžiagos, naudojami ekspertų išvadų vidurkinimo metodai. Tačiau net ir turint skaitinius duomenis, tačiau neturint pakankamai informacijos apie sprendžiamą klausimą, kartu su kiekybiniais ekspertinių duomenų apdorojimo metodais naudojami kokybinės analizės ir sintezės metodai.

Taikant svarstomus ekspertinius metodus (greitas ir pan.), ekspertų nuomonės dažnai nesutampa, todėl būtina kiekybiškai įvertinti ekspertų išvadų nuoseklumo laipsnį ir nustatyti sprendimų neatitikimo priežastis. Nuoseklumo matas natūraliai nustatomas remiantis visos ekspertų grupės statistika. Ekspertų nuomonių nuoseklumo matui įvertinti paprastai naudojami šie: atitikimo koeficientai.

Nuoseklumo matas nustatomas matematiškai ir statistiškai apdorojant visus turimus tyrimo rezultatus. Taigi kompetentingų ekspertų nuomonių nuoseklumą taikant visus nurodytus ekspertinius metodus, kai nustatomos objektų eilės, galima nustatyti naudojant sutapimo koeficientą (susitarimą) pagal formulę:

(5)

čia C – kiekvieno objekto eilučių sumų nuokrypių kvadratų suma nuo vidutinės visų objektų ir ekspertų eilių sumos, t.y.

(6)

kur
- vidutinis rangų skaičius.

Sutapimo koeficientas gali būti diapazone
... At W= 0 nėra ekspertų nuomonių nuoseklumo, o kada W = 1 – nuoseklumas baigtas. Nuoseklumas paprastai laikomas pakankamu, jei W> = 0,5.

Tarkime, pagal kompetentingų ekspertų darbo rezultatus buvo gauti tam tikri reitingavimo duomenys ir pagal juos reikia apskaičiuoti atitikimo koeficientą (6 lentelė)

Sutapimo koeficientas yra

, (7)

T

6 lentelė. Duomenys atitikimo koeficientui apskaičiuoti

Ekspertas Nr.	Ekspertų reitingai Penki reitingavimo objektai ( H = 5)

.e. ekspertų nuomones galima laikyti nuosekliomis, nes gauta atitikties koeficiento reikšmė tenkina sąlygą W> = 0,5.

Taikant ekspertinius metodus, kai rangai nenustatomi, norint rasti atitiktį, apskaičiuotas objektų vertes reikia paversti rangais. 1 rangas priskiriamas didžiausią reikšmę turinčiam objektui ir pan., kitu atveju nuomonių nuoseklumo vertinimas atliekamas pagal kitus susitarimo kriterijus.

Apskaičiuota atitikties koeficiento reikšmė turi būti pasverta pagal Pirsono kriterijų. (X 2 ) su tam tikru reikšmingumo lygiu (V), tai yra didžiausia klaidingo ekspertų darbo rezultato tikimybė. Paprastai pakanka nustatyti reikšmingumą 0,005 - 0,05 diapazone.

Tuo atveju, kai gaunama apskaičiuota vertė X 2 atsiskaitymas> lentelės NS 2 skirtukas (su pasirinktu reikšmingumo lygiu) ekspertų nuomonės galutinai pripažįstamos sutartomis.

Lentelės vertės NS 2 skirtukas(7 lentelė) priklauso nuo priimto reikšmingumo lygio ir laisvės laipsnių skaičiaus (S), kuri nustatoma pagal formulę

, (8)

Apskaičiuota vertė NS 2 atsiskaitymas nustatoma pagal formulę

Taigi dėl ankstesnio pavyzdžio duomenų

. (10)

Esant 0,05 reikšmingumo lygiui, lentelės reikšmė NS 2 skirtukas yra apytiksliai 9, t. y. ekspertų nuomones su 0,95 tikimybe galutinai galima pripažinti nuosekliomis, nes NS 2 atsiskaitymas > NS 2 skirtukas .

PAMOKOS TIKSLAI: 1) kiekybinio ekspertų kokybės vertinimo metodų studijavimas formuojant ekspertų grupę;

2) naudojant metodus statistinis įvertinimas kokybės ekspertai kurdami ekspertų grupę, skirtą konkretaus produkto kokybei įvertinti.

1. BENDROSIOS NUOSTATOS

Vienas iš svarbiausių klausimų, kuris turi būti sprendžiamas gaminių kokybės ekspertinio vertinimo procese, yra ekspertų atranka. Kaip ir metrologijoje, matavimo rezultato tikslumas priklauso nuo prietaiso, kuris atlieka šį matavimą, tikslumo, taip ir ekspertinio vertinimo objektyvumas, jo tikslumas daugiausia priklauso nuo eksperto kvalifikacijos, jo gebėjimo mąstyti analitiškai, sintetiniu požiūriu. apibendrinimas, jo požiūris, erudicija, psichofiziologiniai gebėjimai ir kt.

Šiuo metu praktikoje kiekybiškai įvertinti ekspertų kokybę taikomi šie metodai:

1. Euristinė, kurioje įverčių vertę nustato asmuo; euristinio vertinimo metodai yra pagrįsti tuo, kad aplinkinių (ar jo paties) suvokimas apie šį ekspertą gana teisingai atspindi tikrąją jo kokybę; euristiniai vertinimai apima: savęs vertinimą, abipusį vertinimą, ekspertinį darbo grupės narių vertinimą.
2. Statinis, kai įvertinimų vertė gaunama apdorojant ekspertų sprendimus apie vertinamą produktą.
3. Testas, kurio metu įverčių reikšmės gaunamos specialių testų, pagrįstų specialiai pasirinktų testo problemų sprendimu, rezultatas.
4. Dokumentinis filmas, kuriame įverčių reikšmės gaunamos remiantis dokumentinių duomenų apie ekspertus analize.
5. Kombinuotas, kuriame įverčių vertės gaunamos naudojant bet kurį aukščiau paminėtų metodų derinį.

Šiuo metu protingiausi yra statistiniai ekspertų kokybės vertinimo metodai, todėl juos nagrinėsime plačiau.

Statinio vertinimo metodai apima nukrypimo nuo vidutinės Koso ekspertų grupės nuomonės įvertinimą ir Kvr rezultato atkuriamumo įvertinimą, kurį galima gauti apdorojus specialių tyrimų, prieš sudarant ekspertą, rezultatus. grupė.

Pirmasis metodas pagrįstas prielaida, kad tikroji prasmė ekspertų nustatyta vertė (turtas) yra ekspertų grupės vertinimo vidurkio vertė. Kuo mažesnis eksperto priskirto individualaus įvertinimo vertės nuokrypis nuo grupinio vertinimo vidurkio, tuo aukštesnė šio eksperto kokybė, į kurią galima atsižvelgti, dėl to kiekvienam ekspertui priskiriant atitinkamą „svorį“. arba svorio koeficientas.

Tuo atveju, kai ekspertas nustato vertinamų savybių skaitines vertes (taškais, vienetų trupmenomis arba procentais), siūloma naudoti atstumą tarp „vidutinės“ vertinimo verčių serijos ir įvertinimo verčių. šio eksperto paskyrė ekspertiniu vertinimu. Pavyzdžiui:

be to, n

j = 1 / 2А Кi - Кij

čia Ki yra i-osios įvertintos vertės (savybės) vidutinė vertė;

Кij – j-ojo eksperto priskirtos i-osios reikšmės (savybės) reikšmė; n

Antrasis metodas pagrįstas prielaida, kad tokio eksperto kokybė, kuriai būdingas priskirtų vertinimų verčių atkartojamumas, gali būti laikoma aukšta, t.y. to paties objekto įverčių vertės keliais etapais turėtų būti pakankamai artimos. Šiuo atveju galime kalbėti apie jo nuomonės stabilumą. Eksperto kokybės vertinimo metodai dėl rezultato atkuriamumo yra panašūs į nukrypimo nuo vidutinės nuomonės vertinimo metodus.

Tuo atveju, kai ekspertai reitinguoja numatomas vertes (savybes), siekdami kiekybiškai įvertinti jų kokybę ar nuoseklumą, praktikoje dažniausiai naudojamas atitikties koeficientas, kuris apskaičiuojamas taip:

m2 (n3 - n) - m Tj

čia Si yra lygių, priskirtų m ekspertų i koeficientui, suma;

S – vidutinė rangų sumų reikšmė;

Si ir S reikšmės nustatomos pagal santykius:

Si = Kij; S = Si / n

čia j yra eksperto numeris;

i yra vertinamo faktoriaus skaičius.

Tj reikšmė nustatoma iš išraiškos:

Tj = (t3jl - tjl),

čia tjl yra identiškų 1-ojo tipo eilių skaičius j-ojo eksperto vertinimuose;

Lj yra veiksnių grupių, turinčių sutampančių eilučių skaičių, skaičius j-ojo eksperto vertinimuose.

Sutapimo koeficientas svyruoja nuo nulio iki vieneto, o jo reikšmė lygi vienam atitinka visišką ekspertų nuomonių sutarimą. Paprastai ekspertų išvadų nuoseklumas laikomas pakankamu, kai W> 0,5.

Ekspertų nuomonių sutarimas gali būti atsitiktinis arba neatsitiktinis. Kaip kiekybinis šio atsitiktinumo laipsnio įvertinimas naudojamas atitikties koeficiento reikšmingumo lygis. Šis lygis randamas iš lentelės, remiantis duomenimis apie laisvės laipsnių skaičių n = 1 ir reikšmę 2 (Pearsono kriterijus).

2 reikšmė nustatoma pagal formulę:

mn (n +1) - 1 Tj

Taip nustatytas sutapimo koeficiento reikšmingumo lygis suteikia ekspertų išvadų atsitiktinio sutapimo tikimybės reikšmę, t.y. sąmatų patikimumas. Jei ekspertų nuomonių sutarimas yra didelis ir neatsitiktinis, tai ekspertų grupe galima remtis gaminio kokybės ekspertiniu vertinimu. Jei nuomonių nuoseklumas yra nepakankamas (W<0,5), то анализируя оценки отдельных экспертов, выделяют эксперта (экспертов), имеющего наиболее отличающиеся оценки от общей совокупности оценок других экспертов и подсчитывают значение коэффициента конкордации опять. Эту операцию повторяют до тех пор, пока не будет достигнута приемлемая согласованность экспертных оценок. При этом рекомендуется, чтобы количество оставшихся экспертов было не менее 2/3 от первоначального состава экспертной группы. В противном случае требуется заново сформировать экспертную группу. Для решения большинства задач по экспертной оценке качества продукции, оптимальными могут считаться экспертные группы, включающие от 7 до 20 экспертов.

II Savarankiškas darbas.

Užduotis 1. Pateiktam vertinamo gaminio analogui atlikti ekspertinį ergominių savybių vertinimą, pagal sukurtą šio gaminio savybių hierarchinę struktūrą (žr. praktinę pamoką Nr. 2). Nustatykite atitinkamų ergonominių rodiklių skaitines reikšmes, vadovaudamiesi šia vertinimo skale:

Atlikti reikiamą statistinį gautų duomenų apdorojimą, kad būtų galima įvertinti kiekvieno eksperimente dalyvaujančio eksperto kokybę. Užduoties rezultatus rekomenduojama pateikti tokios lentelės forma:

						Atitinkamų pažymių skaičius	Maksimalus nuokrypis

2 užduotis. Ekspresiniu ekspertinio kokybės vertinimo metodu sudaryti siūlomų produktų (3 ... 5 vnt.), panašių į vertinamą prekę, reitingą, atsižvelgiant į jų kokybės lygį, atlikti reikiamą statistinį apdorojimą. gautų duomenų, siekiant įvertinti kiekvieno eksperimente dalyvaujančio eksperto kokybę... Užduoties rezultatus rekomenduojama pateikti tokios lentelės forma:

							Maksimalus nuokrypis	Nukrypimų suma	Atitinkamų pažymių skaičius
Apibendrintas įvertinimas (balų vidurkis)