Sannolikhetsterminologi (intelligens)

Sannolikhetsuppskattningsterminologi ( eng.  Words of estimative probability , WEP eller WEPs) är en del av verktygssatsen för intelligensanalys , som låter dig uppskatta sannolikheten för framtida händelser. Adekvat terminologi för att bedöma sannolikhet gör det enligt underrättelseanalytiker möjligt att formulera tydliga bedömningar utifrån vilka politiska beslut fattas. Trots vikten av enhetlig terminologi på detta område har till exempel den amerikanska underrättelsetjänsten ingen standard WEP. Enligt vissa uppskattningar berodde ett antal politiska misslyckanden och underrättelser om felaktig användning av terminologin för probabilistiska uppskattningar.

Historik

Utforskning

1964, CIA -veteranen Sherman Kent, ofta kallad "underrättelseanalysens fader", tog upp problemet med felaktig terminologi som används i analytiska artiklar producerade av den amerikanska underrättelsetjänsten . I sin artikel Words of estimative probability utforskade Kent skillnaden  i stilen för intelligensanalytiska dokument mellan "poeter" (författare som föredrar verbosa probabilistiska uttalanden) och "matematiker" (de som föredrar att ge kvantitativa uppskattningar). Kent utvecklade sitt eget paradigm för att utveckla utvärderande terminologi. Dess mål var "... att utveckla en verktygslåda för underrättelsetjänsten som skulle göra det möjligt för den person som läser dokumentet att få en klar uppfattning om vilka aspekter av problemet det finns korrekt information, vad som är en rimlig slutsats och med vilken grad av förtroende för att efterföljande viktiga beslut kan fattas" [1] . Kents initiativ accepterades inte av underrättelsetjänsten, även om det är relevant än i dag.

Tabell 1: Kent sannolikhetsskattningsterminologi [2]
Precis ( engelska  visst ) 100 % Tveksamhet - 0 %
det möjligas rike
Nästan säkert ( eng.  Almost Certain ) 93 % Tvivel - 6 %
Förmodligen ( troligtvis )  75 % Tvivel - 12 %
Chanserna är ungefär lika ( eng.  Chances About Even ) femtio % Tvivel - 10 %
Förmodligen inte _  _ trettio % Tvivel - 10 %
Nästan absolut inte _  7 % Tvivel - 5 %
omöjligt _  _ _ 0 Tveksamhet - 0 %

Medicin

Inom medicin finns det ett liknande problem med att få informerat frivilligt samtycke från patienter, när det är nödvändigt att kommunicera i en tillgänglig form den faktiska sannolikheten för en eller annan variant av behandlingsresultat. Samtidigt är kvantitativa uppskattningar av en sådan sannolikhet extremt sällsynta.

En guide för att erhålla informerat samtycke från personer som deltar i forskning eller genomgår riskfyllda medicinska procedurer, utvecklad vid University of Tennessee vid Chattanooga Research, föreslår följande terminologi för uppskattningar av oddsen för ett dåligt resultat:

Termin Sannolikhet
kanske Förväntas hända mer än 50 % av tiden
Ofta Förväntas inträffa i 10 till 50 % av fallen
osannolik Förväntas inträffa i 1 till 10 % av fallen
Sällan Förväntas inträffa mindre än 1 % av tiden

Som anges i manualen:

Vid undersökning av effekterna av experimentella doser eller kombinationer av läkemedel och/eller behandlingsförfaranden bör studiedeltagarna varnas för att det kan finnas okända risker förknippade med läkemedel/behandling, men de kommer att informeras om ny information blir tillgänglig som kan påverka deras vilja. att delta i forskning

http://www.utc.edu/Administration/InstitutionalReviewBoard/faq.php Vanliga frågor för institutionell granskningsnämnd

Politiska och underrättelsefel relaterade till terminologi för sannolikhetsuppskattning

Den amerikanske analytikern D. Vozhny betraktar som ett exempel på den skada som kan orsakas av frånvaron eller vagheten av utvärderande terminologi i specialtjänsternas analytiska dokument, avsnittet från Daily Presidential Summary av den 6 augusti 2001, med titeln "Bin Laden har för avsikt att attackera USA" ( Bin Laden fast besluten att slå till i USA ).

Presidentens Daily  Brief (PDB) är ett dokument som direktören för National Intelligence presenterar dagligen för USA:s president. Det preliminära budgetförslaget är utarbetat av ett team av analytiker från Office of the Director of National Intelligence och är avsett att förse USA:s president med underrättelser om internationella situationer av relevans för USA:s intressen.

Den sammanfattande situationen den 6 augusti 2001 är i centrum för många diskussioner inom den amerikanska underrättelsetjänsten. Detta dokument har inte bara en vag titel, utan ett lika okänt innehåll:

Eftersom denna sammanfattning inte innehöll en beskrivning av Bin Ladens tidigare verksamhet , tillät den inte presidenten att ge en tydlig bedömning av Bin Ladens verksamhet under de kommande månaderna:

Bush bad underrättelsetjänsten att tillhandahålla en analys av möjliga al-Qaida- attacker i USA, sade personer som är bekanta med saken, eftersom mycket av informationen som lämnades till honom i somras gällde möjliga hot från al-Qaida mot amerikanska installationer utomlands. En källa sa att Vita huset var besviket eftersom analysen inte kom med definitiva slutsatser och inte gav nya underrättelser.

http://www.commondreams.org/headlines02/0518-04.htm August Memo fokuserat på attacker i USA

Bristen på korrekt utvärderande terminologi har lett till förvirring om sannolikheten för en terroristattack och dess möjliga datum. Attackerna den 11 september 2001 överraskade den amerikanska underrättelsetjänsten.

Resultat av undersökningskommissionen den 11 septemberoch kommissionen för massförstörelsevapen i Irakledde till en strukturell reform av den amerikanska underrättelsetjänsten. Dessa reformer syftade till att förbättra underrättelsesamfundets funktion som helhet, särskilt när det gäller samarbete mellan myndigheter och informationsutbyte, men ägnade liten uppmärksamhet åt att förbättra kvaliteten på underrättelseanalyser och utarbetandet av analytiska dokument [4] .

Metoder för att utveckla bedömningsterminologi

Utvärderande terminologi kan förbättras på fyra sätt:

Kvantitativa bedömningar av informationskällors tillförlitlighet och tillförlitlighet

Som Michael Schrege, rådgivare till programmet för säkerhetsstudier vid Massachusetts Institute of Technology (MIT), påpekade i en artikel i Washington Post , skulle krav på att underrättelseanalytiker ska inkludera kvantitativa indikatorer på informationskällans tillförlitlighet och trovärdighet i sina dokument minska tvetydigheten i dessa dokument [5] [6] . Shrej sa också att tidigare tillfälliga CIA-chefen John McLaughlin försökte implementera sådana krav i CIA, men liksom Kents initiativ accepterades inte detta förslag.

"Fd CIA:s tillförordnade direktör och mångårig underrättelseanalytiker John McLaughlin försökte på 1990-talet införa utvärderande terminologi i underrättelseanalytikers arbete, men misslyckades. Som en hög CIA-tjänsteman med mer än 20 års erfarenhet sa till mig: "Underrättelseanalytiker föredrar att använda ord snarare än siffror för att beskriva hur säkra de är i sin analys." Dessutom, "de flesta konsumenter av intelligensanalys föredrar material som inte är alltför svåra att läsa, de älskar ord och bilder. Min erfarenhet är att [de] föredrar kortfattade material som inte fokuserar på matematiska beräkningar. Det betyder inte att vi inte kan göra detta, men efterfrågan på sådana material är väldigt liten" [7] .

Stokastisk analys

Sannolikhetskvantifieringar, som ofta används inom affärsprognoser, marknadsföring , medicin (särskilt epidemiologi ), inklusive verktyg som sannolikhetsteori och Bayesiansk analys , kan också användas av underrättelsetjänsten. Användningen av sannolikhetslärans apparat och andra stokastiska metoder är attraktiv genom att de är rationella och matematiskt rigorösa, och i mindre utsträckning beroende av den "mänskliga faktorn", varför slutsatserna baserade på dem verkar entydiga. Huvudargumentet mot att använda dessa metoder är att endast ett litet antal underrättelseanalytiker och konsumenter av underrättelseanalys kan göra numeriska beräkningar. Dessutom enligt chefen för Centrum för försvarsinformationEnligt Bruce Blair har underrättelseinformation från hemliga källor ofta okänd tillförlitlighet, och användningen av avancerade matematiska metoder förbättrar inte dess tillförlitlighet. Trots det är Blair en anhängare av införandet av kvantitativa metoder i underrättelsesamfundets analytiska enheter, men menar samtidigt att införandet av stokastisk analys i dem är en ganska avlägsen utsikt. Matematisk och statistisk analys kräver en stor mängd arbete utan en snabb tillräcklig avkastning för att förbättra noggrannheten, hastigheten eller kvaliteten på aktiviteten [8] .

Standardisering

Rekommendationer från National Intelligence CouncilUSA antar användningen av WEP-paradigmet (tabell 2) i kombination med en bedömning av förtroendenivån (”hög, medel, låg”) baserat på mängden och kvaliteten på stödjande information:

Tabell 2: US National Intelligence Council sannolikhetsuppskattningsterminologi [9]
Nästan säkert _  _
Sannolikt/Möjligen ( eng.  Probably/Likely )
Lika troligt ( Eng.  Even Chance )
Osannolikt _  _ _
Utesluten ( engelsk  fjärrkontroll )

Emellertid väcker diskussioner inom National Intelligence Council självt allvarliga tvivel om effektiviteten av detta paradigm:

”Underrättelseanalytikers bedömningar av sannolikhet är avsedda att spegla underrättelsetjänstens uppfattning om sannolikheten för en händelse eller utveckling av händelser. […] Vi har inte för avsikt att använda termen "osannolikt" för att antyda att händelsen inte kommer att inträffa. Vi använder termerna "sannolikt" och "möjligt" för att indikera att sannolikheten för en händelse är mer än bara en chans. Vi använder ord som "vi kan inte utesluta" och "vi kan inte rabattera" för att återspegla en osannolik – eller till och med osannolik – händelse som inte förtjänar ett sådant omnämnande. Ord som "kanske" och "gissning" används för att spegla situationer där vi inte kan bedöma sannolikheten alls eftersom den relevanta informationen inte finns, är skissartad eller är fragmentarisk" [10] .

1964 motsatte sig Sh. Kent användningen i analytiska dokument av "uttryck ... som förmedlar en viss innebörd, men som samtidigt antingen helt befriar oss från ansvar, eller gör bedömningen ganska avlägsen ... för att undvika konsekvenser för oss själva” [11] .

Standardisering av utvärderingsterminologi (Merkihurst Institute approach)

Institutet för intelligensstudier vid Mercyhurst Universityi Erie , Pennsylvania , genomförde studier om tolkningen av utvärderande terminologi av National Intelligence Council [12] [13] ) och [14] . Forskningsresultat har visat att användningen av utvärderande terminologi (WEP) vid National  Intelligence Council (NIC) under de senaste tre decennierna har lett till betydande förändringar i hur underrättelsebeslut formuleras [14] .

Utvärderingsterminologin i Mercyhurst Institutes paradigm är ett modifierat Kent-schema:

Tabell 3: Mercyhurst Institute for Intelligence Studies Terminologi [4]
nästan säkert
Högst sannolikt
Sannolikt/Sannolikt
Osannolik
Nästan absolut inte

Trovärdigheten och tillförlitligheten för informationskällan uttrycks som ett tal från 1 till 10 (10 är maxpoängen).

Oönskad terminologi

Tabell 4 innehåller en lista över termer som är särskilt vaga och som kallas ord från icke-auktoritativa källor . Deras användning i värdeangivelser kommer nästan säkert att leda till förvirring, så de bör till varje pris undvikas i dokument [15] .

Tabell 4: Falsk terminologi för sannolikhetsuppskattningar som ska undvikas
Makt dess tänkbara
skulle kunna Maj
Eventuellt Vi tror att... (...eller inte)
Kanske … uppskatta att … (…eller inte)
en chans ... kan inte utesluta
… kan inte avvisa … kan inte rabatt
föreslå kanske

Se även

Anteckningar

  1. Sherman Kent and the Profession of Intelligence Analysis , Center for the Study of Intelligence, Central Intelligence Agency , november 2002, s. 50 , < https://www.cia.gov/library/kent-center-occasional-papers/vol1no5.htm > Arkiverad 10 januari 2019 på Wayback Machine 
  2. Sherman Kent and the Profession of Intelligence Analysis , Center for the Study of Intelligence, Central Intelligence Agency , november 2002, s. 55 , < https://www.cia.gov/library/kent-center-occasional-papers/vol1no5.htm > Arkiverad 10 januari 2019 på Wayback Machine 
  3. Wozny, JL (2005), Optimering av kommunikation mellan beslutsfattare och intelligensanalytiker: Stoppa "Slam Dunks" och undvika "Dead Wrongs" (MS Thesis) , Erie, PA: Mercyhurst College, sid. 192 
  4. 1 2 Wheaton, K. & Chido, Diane (2008), Words of Estimative Probability , Competitive Intelligence Magazine (Alexandria, VA: Society of Competitive Intelligence Professionals), ISSN 1521-5881 , < http://www.scip.org /Publications/?navItemNumber=498 > Arkiverad 3 maj 2008 på Wayback Machine 
  5. Schrage, Michael, Michael Schrage hemsida vid Massachusetts Institute of Technology , < http://ebusiness.mit.edu/schrage/ > Arkiverad 19 april 2008 på Wayback Machine 
  6. Schrage, Michael (20 februari 2005), Vilken procent är "Slam Dunk"? Ge oss odds på dessa uppskattningar , Washington Post : B01 , < https://www.washingtonpost.com/wp-dyn/articles/A37115-2005Feb19.html > Arkiverad 24 juli 2017 på Wayback Machine 
  7. Schrage, 2003
  8. Blair, Bruce (2004), The Logic of Intelligence Failure , Center for Defense Information, s. 11 , < http://www.cdi.org/blair/intel_failure.pdf > . Hämtad 21 april 2008. Arkiverad 28 juli 2004 på Wayback Machine 
  9. Utsikter för Iraks stabilitet: En utmanande väg framåt , National Intelligence Council , 2007, s. 5 , < http://www.dni.gov/press_releases/20070202_release.pdf > . Hämtad 21 april 2008. Arkiverad 2 mars 2007 på Wayback Machine 
  10. National Intelligence Council, 2007, p5
  11. Sherman Kent and the Profession of Intelligence Analysis , Center for the Study of Intelligence, Central Intelligence Agency , november 2002, s. 63 , < https://www.cia.gov/library/kent-center-occasional-papers/vol1no5.htm > Arkiverad 10 januari 2019 på Wayback Machine 
  12. Källor och metoder: Vad betyder ord med uppskattad sannolikhet? (Slutlig version med abstrakt) . Hämtad 21 september 2013. Arkiverad från originalet 30 september 2013.
  13. Wheaton, K. (24 mars 2008), Vad betyder ord av uppskattad sannolikhet? An Exercise In Analyst Education , < http://sourcesandmethods.blogspot.com/2008/03/what-do-words-of-estimative-probability.html > . Hämtad 24 april 2008. Arkiverad 8 juli 2011 på Wayback Machine 
  14. 1 2 Kesselman, Rachel (26 mars 2008), Estimative Words of Probability Trends in National Intelligence Estimates , International Studies Association 49th Annual Convention: Bridging Multiple Divides , < http://www.allacademic.com/meta/p251711_index.html > (inte tillgänglig länk)  
  15. Washington Platt . Informationsarbete av strategisk underrättelseverksamhet. Grundläggande principer . - M . : Förlag för utländsk litteratur, 1958. - S. 251. - 338 sid. Arkiverad 8 november 2014 på Wayback Machine

Litteratur