Expertbedömning
Den aktuella versionen av sidan har ännu inte granskats av erfarna bidragsgivare och kan skilja sig väsentligt från
versionen som granskades den 16 september 2021; kontroller kräver
2 redigeringar .
Expertutvärdering - processen att få en bedömning av något, baserat på experternas åsikter , med syftet att fatta efterföljande beslut eller val .
Typer av expertbedömningar
Det finns två grupper av expertbedömningar:
- Individuella bedömningar baseras på användningen av yttranden från enskilda experter som är oberoende av varandra.
- Kollektiva bedömningar baseras på användningen av experternas samlade yttrande.
Den gemensamma åsikten är mer korrekt än den individuella åsikten från var och en av specialisterna. Denna metod används för att erhålla kvantitativa uppskattningar av kvalitativa egenskaper och egenskaper. Till exempel, utvärderingen av flera tekniska projekt i enlighet med graden av överensstämmelse med ett givet kriterium , under tävlingen, utvärderingen av skridskoåkarens prestation av domarna.
Följande metoder för expertbedömningar är kända:
- associationsmetod . Baserat på studiet av ett objekt som i egenskaper liknar ett annat objekt.
- Metod för parade (binära) jämförelser . Den är baserad på en jämförelse av en expert av alternativa alternativ, från vilka de mest föredragna måste väljas.
- Preferensvektormetod . Experten analyserar hela uppsättningen av alternativa alternativ och väljer de mest föredragna.
- Fokalobjektmetod . Den är baserad på överföringen av egenskaper hos slumpmässigt utvalda analoger till föremålet som studeras.
- Individuell expertundersökning . Enkät i form av en intervju eller i form av en analys av expertbedömningar. Innebär ett samtal mellan kunden och en expert, under vilken kunden ställer frågor till experten, vars svar är betydelsefulla för att nå programmets mål. Analysen av expertbedömningar innebär att individen av en expert fyller i ett formulär som tagits fram av kunden, baserat på vars resultat en omfattande analys av problemsituationen görs och möjliga sätt att lösa den identifieras. Den sakkunnige lämnar sina överväganden i form av en särskild handling.
- medelpunktsmetod . Två alternativa lösningar formuleras, varav en är mindre att föredra. Därefter måste experten välja det tredje alternativet, vars bedömning ligger mellan värdena för det första och andra alternativet.
Stadier av peer review
- Att sätta målet för studien.
- Val av forskningsform, fastställande av projektbudget.
- Utarbetande av informationsmaterial, frågeformulär, procedurmoderator.
- Urval av experter.
- Genomföra en undersökning.
- Analys av resultaten (bearbetning av expertbedömningar).
- Utarbetande av en rapport med resultatet av en expertbedömning.
Uttalande av forskningsmålet
Expertmetoden låter dig lösa problem som inte kan lösas på vanligt analytiskt sätt, inklusive:
- Att välja den bästa lösningen bland de tillgängliga.
- Prognostisera utvecklingen av processen.
- Att hitta möjliga lösningar på komplexa problem.
Innan en expertstudie påbörjas är det nödvändigt att tydligt definiera dess syfte (problem) och formulera en lämplig fråga för experterna. I det här fallet rekommenderas det att följa följande regler;
- En tydlig definition av problemets villkor, tid, yttre och inre begränsningar. * Förmågan att svara på en fråga med mänsklig upplevd noggrannhet.
- Frågan är bättre formulerad som ett kvalitativt påstående än som en uppskattning av ett tal. För numeriska uppskattningar rekommenderas det inte att ställa in fler än fem graderingar.
- Experter utvärderar möjliga alternativ, och man bör inte förvänta sig att de ska utveckla en komplett handlingsplan, en detaljerad beskrivning av möjliga lösningar.
Val av forskningsform, fastställande av projektbudget
Befintliga typer av expertbedömningar kan klassificeras enligt följande kriterier:
- Enligt formen för deltagande av experter: heltid, deltid. Metoden ansikte mot ansikte låter experter fokusera på problemet som ska lösas, vilket förbättrar kvaliteten på resultatet, men fjärrmetoden kan vara billigare.
- Genom antalet iterationer (upprepningar av proceduren för att förbättra noggrannheten) - ettsteg och iterativ.
- Enligt de uppgifter som ska lösas: generera lösningar och utvärdera alternativ.
- Efter typ av svar: ideologisk, rangordning, utvärdering av objektet i en relativ eller absolut (numerisk) skala.
- Enligt metoden för att bearbeta expertutlåtanden: direkt och analytisk.
- Av antalet inblandade experter: obegränsat, begränsat. Vanligtvis används 5-12 experter.
De mest kända metoderna för expertbedömningar är Delphi-metoden , brainstorming och hierarkianalysmetoden . Varje metod har sin egen timing och behov av experter. Efter att ha valt metoden för expertutvärdering är det möjligt att bestämma kostnaderna för förfarandet, som inkluderar betalning av experter, hyra av lokaler, köp av pappersvaror, betalning av en specialist för att genomföra och analysera resultaten av undersökningen.
Förberedelse av informationsmaterial
Experter innan de gör en bedömning bör diversifiera det presenterade problemet. För att genomföra denna procedur är det nödvändigt att förbereda informationsmaterial som beskriver problemet, tillgängliga statistiska data, referensmaterial, frågeformulär , inventering. Följande misstag bör undvikas: att nämna utvecklarna av material, lyfta fram ett eller annat lösningsalternativ, uttrycka ledningens inställning till de förväntade resultaten. Data bör vara mångsidig och neutral. Det är nödvändigt att i förväg utveckla frågeformulär för experter. Beroende på metod kan de vara med öppna och slutna frågor, svaret kan ges i form av en bedömning, parad jämförelse, rankade serier, i poäng eller i form av en absolut bedömning.
Själva proceduren utförs av en oberoende moderator av proceduren, som kontrollerar efterlevnaden av regelverket, distribuerar material och frågeformulär, men inte uttrycker sin egen åsikt.
Urval av experter
Experter bör ha erfarenhet inom områden som är relevanta för de uppgifter som ska lösas. När man väljer experter bör man ta hänsyn till ögonblicket av personligt intresse, vilket kan bli ett betydande hinder för att få en objektiv bedömning. För detta ändamål används till exempel Shars metoder, när en expert, den mest respekterade specialisten, rekommenderar ett antal andra och vidare i kedjan tills det nödvändiga teamet är valt.
Genomföra en undersökning
Proceduren varierar beroende på vilken metod som används. Allmänna rekommendationer:
- Förhindra påtryckningar från myndigheter (en expert är ofta rädd för att motsäga majoritetens eller den mest respekterade specialistens åsikt).
- Sätt och följ regler. Att öka tiden för att fatta ett beslut utöver det optimala förbättrar inte noggrannheten i svaret.
Analys av resultaten (bearbetning av expertbedömningar)
De viktigaste stegen i behandlingen av expertbedömningar:
- bestämma experternas kompetens ;
- definition av en generaliserad bedömning;
- bygga en generaliserad rangordning av objekt i fallet med flera utvärderade objekt eller alternativ ;
- bestämning av beroenden mellan rankningar;
- bedömning av överensstämmelsen i expertutlåtanden. I avsaknad av betydande enighet mellan experter är det nödvändigt att identifiera orsakerna till inkonsekvens (närvaro av grupper) och erkänna frånvaron av en överenskommen åsikt (oväsentliga resultat);
- bedömning av forskningsfel;
- bygga en modell av objektets (objektens) egenskaper baserat på svaren från experter (för analytisk expertis);
- utarbetande av en rapport (som anger syftet med studien, sammansättningen av experter, bedömning och analys av resultaten).
Se även
Litteratur