Borbena primjena metode parnih poređenja. Paired Comparison Method Lab

U prvoj fazi metode analize hijerarhije konstruišu se matrice parnih poređenja mišljenja stručnjaka (DM) o svim alternativama za sve kriterijume.

Definicija

Matrica za poređenje u paru elementi hijerarhije x p X. 2 ,..., x n naziva se kvadratna matrica veličine P X P, u čijim ćelijama se nalaze prioriteti, tj. indikatori težine koji kvantitativno karakterišu težine elemenata x, x 2 ,..., xn u odnosu na neki element višeg nivoa hijerarhije.

Po pravilu se razmatraju dva tipa matrica za poređenje u paru, koje odgovaraju dva nivoa hijerarhije (vidi sliku 7.1.1):

  • matrice parnih poređenja alternativa u odnosu na parcijalne kriterijume;
  • matrice parnih poređenja pojedinih kriterijuma u pogledu postizanja glavnog cilja donosioca odluke.

Popunjavanje kvadratnih matrica parnih poređenja vrši se prema sljedećem pravilu. Ako element x dominira nad elementom x 2 , tada je ćelija matrice koja odgovara redu x i stupcu x 2 ispunjena cijelim brojem " 12 , a ćelija koja odgovara redu x 2 i stupcu x je popunjena svojim inverznim brojem a. P= 1/a |2 . Ako element x 2 dominira x, tada je cijeli broj a. P stavlja se u ćeliju koja odgovara redu x 2 i koloni x, a razlomak 1/a 21 stavlja se u ćeliju koja odgovara redu x i koloni x 2. Ako su elementi x i x 2 podjednako poželjni, tada su obje pozicije matrice postavljene na jedinice. Ostatak matrice se popunjava na isti način. Dijagonalni elementi su, naravno, jednaki jedan (element x k podjednako preferiran sam sa sobom).

Za dobijanje svake matrice, stručnjak vadi n(n 2- 1)/2 presude (ovdje P- redoslijed matrice parnih poređenja; p 1 je ukupan broj elemenata u matrici; (p 2 - p) - broj elemenata u matrici, osim P dijagonala; (p 2 - p) / 2 - broj elemenata u gornjoj trokutastoj matrici, tj. iznad dijagonale).

Proces konstruisanja matrice parnih poređenja je jednostavan, intuitivan i dobro u skladu sa psihološkim karakteristikama osobe. Poređenje alternativa u parovima je uvijek lakše nego rangiranje ili bodovanje, jer nema potrebe da se uporedi cijeli skup alternativa u isto vrijeme.

Bilješka!

Poređenje objekata u parovima svojstveno je samoj ljudskoj prirodi. Nema potrebe da sve elemente imate u vidu u svakom trenutku x v x 2 ,..., xtl ili barem grupa njih omogućava stručnjaku da se fokusira na određeni problem: koliko je element.r superiorniji x 2 ili mu se prepusti. Kao rezultat toga, treba očekivati ​​preciznije rezultate od MAI.

Bilješka!

Konvencionalne numeričke skale nisu uvijek pogodne za poređenje elemenata izraženih u različitim dimenzijama i konceptima. Posebno je teško upoređivati ​​elemente čiji su pokazatelji, s jedne strane, kvantitativne vrijednosti, a s druge kvalitativne. Dakle, najčešće korištena Harringtonova skala "prihvata na ulazu" samo relativne kvantitativne karakteristike raspoređene u rasponu od 0 do 1. Verbalno-numeričke skale, čija je jedna od varijanti 10-stepena Saatyjeva skala, dizajnirane su za procjenu tako različiti po prirodi indikatori.

Prilikom poređenja u paru potrebno je odgovoriti na sljedeća pitanja: koji je od dva upoređena elementa važniji ili ima veći uticaj, koji je vjerovatniji, a koji poželjniji? Kada se porede kriterijumi, obično se pita koji je od kriterijuma važniji; kada se porede alternative u odnosu na kriterijum – koja od alternativa je poželjnija ili verovatnija.

Bilješka!

Svaki element aik matrica poređenja u paru pokazuje koliko puta je element X, važniji (ili poželjniji, vjerovatniji) od elementa x k u odnosu na neki kriterijum (ili cilj) koji se nalazi na višem nivou hijerarhije.

Drugim riječima, matrica uparenih poređenja omogućava vam da izrazite relativnu superiornost jednog objekta nad drugim u smislu zajedničke karakteristike za njih.

Razmotrimo općenito primjer formiranja matrice poređenja u paru.

Primjer 7.3.1

Matrica parnih poređenja elemenata sa datim težinama

Neka x v x 2 ,..., x n - set of P elementi (alternative), a v vv 2 ,..., v n - prema njihovoj težini, odnosno intenzitetu. Uporedimo u parovima težinu, odnosno intenzitet, i>. svaki element x i sa težinom ili intenzitetom, v k bilo koji drugi element x k skupova u odnosu na njihovo zajedničko svojstvo ili kriterijum. Najlakši način da se napravi takvo poređenje je da se napravi omjer težina vjv k . U ovom slučaju, matrica poređenja u paru ALIće poprimiti sljedeći oblik (Tabela 7.3.1).

Tabela 73.1

Bilješka!

Ovako popunjena matrica ima sljedeća dva svojstva:

Reverzna simetrija: aik = -;

Homogenost, tj. logična konzistentnost svih procjena među sobom: a jk =

A je * a sir_

Naravno, u većini stvarnih situacija, težina v v v 2 , ..., v n nisu unaprijed poznati, pa matricu popunjava stručnjak ne prema formuli vjv k , a u skladu sa stručnim procjenama, tj. ne mora imati oba ova svojstva. Međutim, ova svojstva su i dalje poželjna jer pokazuju prirodna logička pravila koja odražavaju odnose između elemenata.

Bilješka!

Prilikom popunjavanja matrice parnih poređenja, po pravilu, stručnjacima se preporučuje da striktno poštuju svojstvo inverzne simetrije, odnosno unosom broja u neku ćeliju matrice aki, odmah ući u simetrično u odnosu na

dijagonalni broj ćelije aik = Drugo svojstvo homogenosti a. k = a je a, isto-

u isto vrijeme, poremećaji su minimalni.

Zahtijevati od stručnjaka da striktno poštuje svojstvo homogenosti značilo bi mu nametnuti, pored glavnog zadatka vještačenja, dodatne odgovornosti za međusobno slaganje svih procjena.

U ovom slučaju, stručnjak bi morao istovremeno da ima u vidu sve faktore, jer, dodeljivanjem određene numeričke vrednosti određenom indikatoru težine, on ga mora istovremeno uporediti sa svim ostalim. Složenost se ovdje eksponencijalno povećava kako se broj alternativa povećava. Ovo bi minimiziralo jednu od glavnih prednosti AHP-a - lakoću dobijanja uparenih recenzija.

Još jedna važna prednost AHP-a je mogućnost dopune originalne matrice. U praksi sistemskog istraživanja često se javljaju situacije kada se promijeni broj alternativa ili kriterija. Ovo se dešava i kao rezultat uticaja prirodnih procesa i kao rezultat promena društveno-ekonomskih uslova.

Bilješka!

Prilikom primjene AHP-a, promjena alternativa ili kriterija dovodi samo do potrebe da se uporede novonastali parovi ili do brisanja redova i stupaca matrica parnog poređenja koji odgovaraju elementima koji su povučeni iz razmatranja, tj. do formiranja matričnog minora. Rezultati prethodnih stručnih procjena se čuvaju, a kompletno ažuriranje upitnika, kao što je to slučaj sa drugim metodama, nije potrebno.

Daljnji postupak AHP-a, u suštini, svodi se na numeričku obradu odgovarajuće matrice, pa je, sa “tehničke” tačke gledišta, uključivanje dodatnih varijabli (ili njihovo isključivanje) promjena dimenzije matrice. matrica, tj. odgovarajući linearni prostor. Stoga su promjene u daljem algoritmu proračuna minimalne.

  • Saaty T. Donošenje odluka prema zavisnostima i povratnim informacijama: Analitičke mreže: per. sa engleskog. / znanstveni ed. A. V. Andreičikov, O. N. Andreičikova. M.: LKI, 2008.

Metoda uparene poređenja je jedna od najčešćih metoda za procjenu relativne preferencije alternativnih opcija.

Prilikom korištenja ove metode, stručnjaku se uzastopno nude parovi alternativnih opcija, od kojih mora navesti onu poželjniju.

Ako stručnjak smatra da je to teško učiniti u odnosu na bilo koji par objekata, on ima pravo da upoređene alternative smatra ekvivalentnim ili neuporedivim.

Nakon uzastopnog predstavljanja svih parova alternativnih opcija stručnjaku, utvrđuje se njihova uporedna preferencija prema procjenama ovog stručnjaka.

Kao rezultat parnih poređenja, ako se stručnjak pokaže dosljednim u svojim preferencijama, sve procijenjene alternative mogu se pokazati rangiranim prema jednom ili drugom kriteriju, pokazatelju ili svojstvu. Ako je stručnjak prepoznao neke alternativne opcije kao neuporedive, onda će se kao rezultat dobiti samo njihovo djelomično sređivanje.

U praksi korišćenja metode parnih poređenja često se susrećemo sa nedoslednošću, pa čak i nedoslednošću u stručnim ocenama. U tim slučajevima potrebno je provesti posebnu analizu rezultata pregleda.

Također napominjemo da s dovoljno velikim brojem alternativnih opcija koje se procjenjuju, procedura za parno poređenje svih njihovih mogućih parova postaje dugotrajna za stručnjaka. U ovom slučaju preporučljivo je koristiti odgovarajuće modifikacije metode parnih poređenja.

Na primjer, ako pretpostavimo konzistentnost procjena stručnjaka, onda je praktično dovoljno svaku alternativu predstaviti jednom u paru s bilo kojom drugom.

3. Rangiranje alternativnih opcija.

Prilično uobičajena procedura je i direktno rangiranje od strane stručnjaka prema preferenciji procijenjenih alternativa. U ovoj metodi, ekspertu su predstavljene alternativne opcije odabrane za uporednu evaluaciju, ali poželjno ne više od 20 ÷ 30, za njihovo poređanje po želji. Ako postoji više alternativnih opcija, onda je preporučljivo koristiti odgovarajuće modifikacije metode rangiranja.

Na primjer, u ovom slučaju, rangiranju alternativnih opcija može prethoditi njihova podjela na klase koje su poređane po preferencijama koristeći metodu ekspertske klasifikacije.

Rangiranje upoređenih objekata stručnjak može izvršiti na različite načine. Predstavljamo dva od njih.

U skladu s prvim, stručnjaku je predstavljen čitav niz alternativnih opcija, a on među njima ukazuje na najpoželjniju. Zatim stručnjak među preostalima naznači najpoželjniju alternativu i tako dalje, sve dok on ne rangira sve alternative koje se ocjenjuju.

U drugoj metodi, stručnjaku se u početku prikazuju dvije alternativne opcije ili više, koje se od njega traži da sortira po želji. Ako se stručnjaku u početku nudi nekoliko alternativnih opcija za naručivanje prema preferencijama, tada u ovoj fazi može koristiti metodu prvog rangiranja.

Nakon početnog rangiranja, stručnjaku se dosljedno nude nove alternativne opcije koje još nije procijenio. Stručnjak mora odrediti mjesto novopredstavljene alternative među već rangiranima.

Postupak se završava nakon prezentacije i evaluacije posljednje alternative.

Plan:

1. Opis metode parnih poređenja.

2. Prednosti i nedostaci metode parnih poređenja.

1. Opis metode parnih poređenja

Metoda poređenja u paru- jedan od alata za evaluaciju i odabir odluka, široko se koristi u stručnim procjenama kada je potrebno odrediti prioritet u procesu bilo koje aktivnosti ili rangiranja različitih objekata.

Ideja metode je da se svaka dva objekta upoređuju u paru i da se utvrđuje superiornost jednog od njih, pa je naziv „poređenje u paru (ili upareno)“. Smatra se da je prilikom rješavanja problema mnogo lakše napraviti kvalitativno poređenje dva objekta, na osnovu mišljenja stručnjaka, nego utvrditi kvantitativne kriterije. Strogo govoreći, PS metoda je metoda za dobijanje početnih podataka, metoda svojevrsnog anketiranja ispitanika. Na osnovu dobijenih podataka moguće je rješavati različite probleme koji ne uključuju nužno izradu skale evaluacije. Pretpostavimo da nas zanima kako ispitanici proučavane populacije ocjenjuju bilo koje objekte - profesije, političke lidere, radio programe, određene vrste dobara itd. Označimo ove objekte kroz a1, a2, ..., an (n je broj evaluiranih objekata).

Tabela 1. Primjer korištenja PS metode

Metoda koja se razmatra omogućava da se dobije odgovor na ovo pitanje u prilično neobičnom obliku. Svakom ispitaniku se nude svi mogući parovi sastavljeni od predmeta koji se razmatraju. Za svaki par mora reći koji predmet iz ovog para mu se najviše sviđa. Recimo, u slučaju da neke profesije smatramo našim objektima - na primjer, tokar, pekar, ljekar itd. - pitamo svakog ispitanika koje zanimanje najviše voli: tokar ili pekar (popravi odgovor), tokar ili doktor (popravi odgovor), pekar ili doktor (popravi odgovor) itd. za sve moguće parove objekata koji se razmatraju.

2. Prednosti i nedostaci metode parnih poređenja

Glavne prednosti metode su sljedeće:

Dozvoljeno je mjerenje neravnomjerno promjenjivog značaja indikatora, koji je toliko potreban za rješavanje većine praktičnih ekonomskih problema;

Ekspert se u procesu analize ne fokusira na sve indikatore odjednom, već samo na dva, upoređena u svakom trenutku, što olakšava rad, a samim tim i poboljšava njegov kvalitet;

Možete dobiti veliki broj poređenja svakog indikatora sa drugima, što povećava tačnost procjene i otvara mogućnost proučavanja kvaliteta većeg broja aspekata predmeta proučavanja nego korištenjem drugih metoda;

Moguće je dobiti ne samo prosječnu ocjenu indikatora koju daje svaki stručnjak, već i varijansu ove procjene, što omogućava provođenje dublje ekonomske i matematičke analize u budućnosti.

Metoda uparene usporedbe je najjednostavniji od postojećih klasifikacijskih testova, jer uključuje poređenje samo dva uzorka proizvoda.

Prednost poređenja u paru u odnosu na rangiranje je u tome što je lakše donijeti prosudbu jer supervizor treba da uporedi samo dvije osobe istovremeno. Druga prednost je što pruža mogućnost da se ljudi sa istim sposobnostima stave na isti nivo.

Metoda parnih poređenja omogućava da se izvrši rigorozna, statistički potkrijepljena analiza konzistentnosti mišljenja stručnjaka, da se utvrdi da li su dobijene procjene slučajne ili ne. Nesumnjivo je da je postupak metode parnih poređenja složeniji od metode jednostavnog rangiranja, ali jednostavniji od metode sekvencijalnih poređenja.

Ova metoda je vrlo jednostavna i omogućava vam da istražite veći broj objekata (u poređenju, na primjer, s metodom rangiranja) i to sa većom preciznošću.

Glavni nedostaci metode su sljedeće:

- u potrebi da izvršite ogroman broj parnih poređenja ako morate procijeniti velike grupe. Supervizor sa 60 zaposlenih moraće da izvrši 1770 poređenja! Ako se poređenje vrši na pet odvojenih parametara, tada će se broj uparenih poređenja povećati za pet puta. Obično se metoda uparene poređenja koristi u dva slučaja: ili kada se procjenjuju male grupe, ili kada se procjenjuje samo jedan parametar - ukupni učinak proizvodnih aktivnosti.

Jedan nedostatak parnih poređenja kao eksperimentalne metode je taj što poređenje n podražaja zahtijeva donošenje (n - 1) x (n/2) prosudbi. Na primjer, za 10 podražaja potrebno je 45 sudova, a ako bismo željeli skalirati skup od 50 stimulusa, trebalo bi nam 1225 prosudbi.

Glavni nedostatak metode uparenog poređenja je to što ne postoje gotovi softverski razvoji.

Da biste koristili ovu metodu, morat ćete uputiti nadležne zaposlenike kompanije da razviju poseban program ili ga naručiti od treće strane. Također, iako ne postoje dokazana rješenja za procjenu vrijednosti poslovanja zasnovana samo na parovima, to je više matematički poluproizvod koji služi za kreiranje alata za skaliranje. Osim toga, sama procedura testiranja izgleda prilično monotono, što utiče na objektivnost nalaza istraživanja. A kvalitet rezultata direktno zavisi od broja ocjena i indikatora koji se ocjenjuju, kao i od pravilnog odabira parova i njihove nedvosmislene interpretacije.

Po pravilu se smatra da je metoda parnih poređenja bolja od direktnog rangiranja. Ova tačka gledišta nije sasvim tačna, a evo i zašto.

Izbor metode je uvijek određen istraživačkom situacijom, ciljevima studije. Naravno, ako je moguće nedvosmisleno formulisati osnovu rangiranja, onda metoda uparene poređenja daje odličan rezultat i tu metodu treba izabrati. Ali postoje situacije kada je nemoguće i nije potrebno imati nedvosmisleno shvaćenu osnovu za rangiranje.

Nedostatak metode je povećanje složenosti postupka s povećanjem broja objekata: već sa 12-15 objekata, postupak postaje naporan. Osim toga, ispitanici ponekad upoređuju različite parove objekata prema različitim kriterijima, što dovodi do netranzitivnih preferencija. Metoda se široko koristi u stručnim procjenama.

Pitanja za samokontrolu

    Definirajte metodu parnih poređenja.

    Koja je ideja iza metode?

    Opišite proces poređenja?

    Navedite prednosti metode poređenja u paru.

    Navedite nedostatke metode poređenja u paru.

Poteškoće u korištenju rangiranja, direktne evaluacije i metode sekvencijalnih poređenja u identifikaciji preferencija za veliki broj faktora mogu se u određenoj mjeri smanjiti ako se od stručnjaka zatraži da poređenje faktora u parovima, kako bi u svakom paru postavili ono najvažnije. U opštem slučaju, stručnjak može utvrditi jednakost objekata ili ukazati na svoje preferencije na određenoj skali.

Poređenje u paru je zgodno ne samo kada je broj faktora velik, već i kada razlike između objekata toliko različitih faktora nekoliko, da direktno rangiranje ne pruža razumno poređanje.

Dakle, metoda uparene poređenja ima određenu prednost u odnosu na druge metode uređivanja u slučajevima kada postoji mnogo faktora ili ih je teško razlikovati.

Postoje dva glavna pristupa određivanju preferencija korištenjem ove metode.

Prvi sastoji se u činjenici da je stručnjak ograničen na jednostavnu izjavu da je jedan faktor poželjniji od drugog – bez navođenja stepena preferencije. Tada se u matrici parnih poređenja u ćelije upisuju 0 ili 1 - takva matrica je poznata kao "turnirska tabela".

Matrica za poređenje u paru je uvijek obrnuto simetrična u odnosu na glavnu dijagonalu, jer ako je Ai poželjniji od A 3 , tj. element A 13 = 1, tada je A 3 manje poželjan od A1, a A 13 = 0. u stvari, stručnjak treba da popuni samo polovinu matrice. Zbir bodova svakog faktora može se tumačiti kao njegov rang. Tako u primjeru rangovi faktora se bilježe u posljednjoj koloni.

Prvo, svaki stručnjak popunjava takvu matricu, određuju se pojedinačni rangovi, a zatim se prosječuju, uzimajući u obzir mišljenja svih stručnjaka (matrica A).

Na osnovu toga, konstruisana je druga matrica P, koja pokazuje procenat slučajeva gde se faktor i pokazao značajnijim od faktora j, u ukupnom broju primljenih ocena.

Na primjer, ako je 10 stručnjaka dalo ocjene, onda bi P tabela na osnovu njihovih ocjena mogla izgledati ovako.

Budući da je bilo 10 stručnjaka, udio preferencija se izračunava tako što se broj u svakoj ćeliji tabele A podijeli sa brojem stručnjaka. Rezultat je tabela R.

Sada možemo primijeniti najjednostavniju tehniku ​​za rangiranje faktora: podijeliti ukupnu relativnu procjenu svakog faktora njihovim sumom, dobivši normaliziranu relativnu važnost svakog faktora.

2nd way. Koristi se kada je važno odrediti stepen preferencije jednog faktora nad drugim. Ova metoda pokriva kako one faktore na kojima su određena mjerenja moguća, tako i nematerijalne (kvalitativne) faktore o kojima se zahtijevaju prosudbe.



Za izvođenje subjektivnih parnih poređenja koristi se skala koja se pokazala efikasnom u mnogim aplikacijama, njena valjanost je teoretski dokazana u poređenju sa drugim skalama (tabela 10.7).

Kao iu prvom metodu, prvo svaki stručnjak pravi parno poređenje faktora (osobine, posljedice odluke, itd.) prema predloženoj skali.

Kao iu prethodnoj metodi, sada moramo odrediti prioritete ili rangirati faktore. Ovo se može dobiti na bilo koji način

normalizacija ranga. Na primjer, primjenjuju se sljedeće metode:

- stručnjaci zajednički raspravljaju o svojim procjenama i kao rezultat usvajaju jedinstvene procjene za svaki faktor, razvijajući se na taj način jedna matrica parnih poređenja za sve;

> stručnjaci ne mogu razviti konsenzus, predstaviti svoje tabele uparenih poređenja i na osnovu njih, nekim sredstvom usrednjavanja, dobiju jednu tabelu; može se koristiti kao metoda usrednjavanja geometrijska sredina za svaku ćeliju, prosječno (aritmetički) ponderirano i drugi.

Bilo kojim pristupom dobija se generalizovana matrica parnih poređenja faktora.

U narednom koraku obrade stručnih mišljenja potrebno je izvršiti evaluaciju stepen konzistentnosti njihovih mišljenja IP - indeks konzistentnosti.

Rangiranje kao evaluativna istraživačka metoda je postupak u kojem analitičar, na osnovu svog znanja i iskustva, raspoređuje objekte koji se proučavaju prema preferenciji. On bira najbolji objekat koji po nekom svojstvu (skupu karakteristika) nadmašuje sve ostale i dodeljuje mu indikator jednak 1, koji karakteriše redno mesto (rang) vrednovanog objekta među ostalim objektima. Od preostalih opcija ponovo se bira najbolja i dobija se rang 2 itd. Redna skala na osnovu rezultata rangiranja mora zadovoljiti uslov da je broj rangova jednak broju objekata rangiranja.

Rangiranje rezultira nizom preferencija:

A > C > D > D > B - preferencije;

Prema tome: 1, 2, 3, 4, 5 - rang.

gdje > - znak preferencije;

A, B, C, D, D - objekti analize.

Redovi broja ne omogućavaju da se izvuče zaključak o tome koliko je ili koliko puta neki objekt poželjniji u odnosu na drugi.

Prednost metode je njena jednostavnost. Nedostatak je praktična nemogućnost naručivanja velikog broja objekata.

Upareno poređenje - metoda koja vam omogućava da postavite preferenciju za objekte analize kada uporedite sve njihove moguće parove. Poređenje objekata u paru može proizaći iz činjenice da je jedan od objekata poželjniji od drugog.

Uparena poređenja se mogu predstaviti kao matrica, a kao rezultat, opcije su rangirane prema zbiru preferencija.

Postoje varijante višestrukih poređenja, koje se razlikuju po tome što se uzastopno ne porede parovi objekata, već njihove trojke, četvorke itd.

Metoda bodovanja je postupak za dodeljivanje numeričkih vrednosti objektima analize sa datom skalom. U ovom slučaju se mogu koristiti kontinuirane i diskretne skale. U prvom slučaju, procjene pripadaju bilo kojoj tački nekog ograničenog numeričkog segmenta, u drugom, procjene odgovaraju cijelim brojevima. Vage karakteriziraju minimalne i maksimalne točke. Gornja i donja granica skale mogu biti pozitivne ili negativne. Objekat sa najvećim rezultatom smatra se najboljim.

Metoda ekspertske (grupne) evaluacije pojava najčešće se koristi u praksi vrednovanja složenih sistema. U pravilu se ova metoda koristi za dobivanje kvantitativnih vrijednosti kada ih je nemoguće izračunati.

Prilikom implementacije ove metode pretpostavlja se sljedeći slijed radnji:

  • - izbor stručnjaka;
  • - utvrđivanje bodovne skale ocjenjivanja;
  • - procjene stručnjaka za sve upoređivane objekte analize;
  • - ocjenu konzistentnosti mišljenja stručnjaka;
  • - obračun grupne procjene za svaki objekat;
  • - korištenje dobijenih procjena u praktične svrhe (na primjer, sastavljanje rangova objekata analize).

Treba napomenuti da stručne ocjene nose i usko subjektivna obilježja svojstvena svakom stručnjaku i kolektivno subjektivna svojstva svojstvena panelu stručnjaka. Prvi se eliminišu u procesu obrade pojedinačnih stručnih ocjena, drugi ne nestaju, bez obzira na to koje metode obrade se koriste.

Za kvantifikaciju stepena slaganja mišljenja stručnjaka koristi se koeficijent podudarnosti (konzistentnosti) W, koji vam omogućava da procenite koliko su mišljenja učesnika u ispitivanju konzistentna. Njegova vrijednost je unutar 0< W < 1, где W=0 означает полную противоположность, a W=1 полное совпадение оценок. Практически достоверность считается хорошей, если W более 0,7.

Niska vrijednost koeficijenta podudarnosti ukazuje na slabu saglasnost mišljenja stručnjaka.

Postoji metoda stručne komisije - neka vrsta grupnog ispitivanja. Metod stručne komisije zasniva se na identifikaciji jedinstvenog kolektivnog mišljenja od strane posebno odabranih stručnjaka prilikom rasprave o postavljenom problemu i alternativama za njegovo rješavanje kao rezultat određenih kompromisa.

Dijeli