Kvartalstallene fra førti partnere kommer inn uken før styremøtet. Én linje summerer antallet unge som har fått opplæring, og det ser ut som et godt kvartal. Så begynner spørsmålene. Én partner talte alle som hadde deltatt på en økt, en annen bare dem som fullførte kurset, og en tredje tok med sine egne frivillige. Summen er matematisk riktig, men betyr nesten ingenting.
Ingen gjorde noe galt; programmet hadde aldri skrevet ned hvilket spørsmål det skulle besvare. Det er det første problemet med KPI-er for partnerprogrammer: Alle uklare definisjoner blir lagt sammen. Denne veiledningen tar for seg en liten felles kjerne av KPI-er, et referanseark for hver (en gratis mal med et utfylt eksempel), aggregeringsregler som gir et sant bilde, kontrollene som må gjøres først, KPI-er som følger partnerens stadium, og hvor mange KPI-er som er for mange.
Hvorfor KPI-er for partnerprogrammer er annerledes
OECDs evalueringsordliste definerer nøkkelindikatorer for resultater som delmengden av indikatorer som anses som viktigst for målene, overvåkes løpende, og påpeker at enhver indikator «alltid bare er omtrentlig» og må tolkes [1]. Med én partner kan du ganske enkelt spørre hva de talte. Med førti skjer tre ting:
- Definisjoner blir avtaler. Hver partner løser alle uklarheter på sin egen måte, og summen blander dem sammen. INTRAC lister opp hva som kreves for å summere på tvers av en portefølje: de samme definisjonene, at alle relevante prosjekter samler inn dataene, tilsvarende tidsrammer, de samme verktøyene og jevn kvalitet [2].
- Arbeidsmengden mangedobles. Én indikator til betyr ett tall til for deg, og førti for partnerne dine, hver rapporteringsrunde.
- Partnere er ulike. Størrelse, kontekst og modenhet varierer, så det samme tallet betyr ulike ting på ulike steder.
En liten felles kjerne, pluss hver partners egne KPI-er
Det som fungerer i de fleste programmer med flere partnere, er to lag. En felles kjerne på fem til åtte KPI-er som hver partner rapporterer med samme definisjon: Dette er de eneste tallene dere summerer. Deretter to eller tre partnerspesifikke indikatorer per partner, valgt av partneren ut fra egen kontekst og vurdert partner for partner.
IFRCs veiledning for overvåking og evaluering beskriver avveiningen: Standardindikatorer har anerkjente definisjoner og kan sammenlignes på tvers av prosjekter, men representerer kanskje ikke den lokale konteksten. Derfor er en kombinasjon ofte best [3]. INTRAC peker på risikoen ved å standardisere alt: I verste fall samler prosjekter inn informasjon som ikke er nyttig for dem [2]. Det partnerspesifikke laget er også stedet de beste indikatorene for gjennomføringspartnere kommer fra; noen av dem får senere plass i kjernen.
Leveranser, virkninger og hva en partner har kontroll over
I OECDs ordliste er leveranser produktene og tjenestene et tiltak produserer, innenfor gjennomføringsteamets kontroll; virkninger er de kort- og mellomlangsiktige effektene av dem [1]. I et program med flere partnere får dette to konsekvenser:
- Leveranser kan summeres; virkninger lar seg vanskeligere summere. INTRAC finner at aggregering er fullt mulig på leveransenivå og svært vanskelig på virkningsnivå, selv når det finnes bransjestandardiserte definisjoner [2]. KPI-er for virkninger trenger de aller tydeligste definisjonene.
- Virkninger avhenger av konteksten. En partner for ungdomssysselsetting i et distrikt med få jobber vil ikke oppnå samme resultat som en partner i hovedstaden, uansett hvor godt kurset er. Sammenlign først hver partner med sitt eget utgangspunkt.
En god kjerne inneholder begge deler: leveranser som viser at arbeidet blir gjort, og én eller to virkninger som viser om det har betydning.
Skriv ned hver KPI: KPI-referansearket
Hver KPI i kjernen trenger en skriftlig definisjon før den første partneren rapporterer. IFRCs plan for overvåking og evaluering dokumenterer en detaljert definisjon, kildene, metodene og tidspunktet for datainnsamling, de ansvarlige personene og den tiltenkte bruken for hver indikator. Definisjonen bør angi nøyaktig hvordan indikatoren beregnes, for eksempel telleren og nevneren i en prosentandel, og hvordan den deles opp etter kjønn, alder eller andre variabler. Ansvarlige personer angis også med stillingstittel, slik at indikatoren tåler utskifting av ansatte [3]. Malen nedenfor legger til tre felt som er viktige når mange partnere rapporterer: aggregeringsregelen, datakvalitetskontrollene og en versjonslogg.
| Felt | Hva feltet avklarer | I eksempelet |
|---|---|---|
| Definisjon | Alle begreper en partner kan tolke på to måter | En deltaker har fullført når vedkommende har deltatt på minst 80 % av øktene; arbeid betyr minst 10 timer i uken |
| Teller og nevner | Hva som telles, og ut fra hva | Avgangselever som ikke ble nådd etter seks måneder, blir stående i nevneren |
| Kilde og hyppighet | Hvor tallet kommer fra, og når | Kursregister og en oppfølgingssamtale; kvartalsvis |
| Aggregeringsregel | Hvordan partnernes verdier summeres | Samlet rate, pluss partnerne som ligger på 50 % eller mer |
| Kvalitetskontroller | Hva som kontrolleres før tallene summeres | En teller som er større enn nevneren, sendes tilbake til partneren |
| Versjonslogg | Hva som ble endret, når og hvorfor | Utdanning og opplæring ble lagt til i versjon 1.1 |
Mal for KPI-referanseark (gratis nedlasting)
Malen består av to A4-sider: hvordan den brukes, indikatoren, definisjonen og datainnsamlingen (side 1); aggregeringsregelen, kvalitetskontrollene, begrensningene, versjonsloggen og godkjenningen (side 2).
Last ned malen for KPI-referansearket (PDF, 2 sider). Skriv ut ett eksemplar per KPI, eller kopier feltene inn i din egen plan for overvåking og evaluering.
Definerer du KPI-er for mer enn en håndfull partnere? I Advancer.World definerer du hver KPI én gang per program og registrerer den for hver partner, ved siden av hvor partneren står i programmets stadier. Daglige øyeblikksbilder tar vare på historikken, slik at utviklingen er tilgjengelig når du skal rapportere. Gratis å komme i gang.
Eksempel: én KPI, fullstendig definert
Her er arket utfylt for en sentral virknings-KPI i Youth Pathways Program, der Horizon Child Fund samarbeider med 40 lokale partnere som holder sysselsettingskurs for unge. Begge er fiktive.
Last ned det utfylte eksempelet (PDF, 2 sider). Tre valg er verdt å kopiere:
- Avgangselever som ingen fikk tak i, blir stående i nevneren. Ellers rapporterer partneren som bare får kontakt med dem som har lykkes, den beste raten.
- Arket sier hva det ikke må brukes til. Det skal ikke brukes til å rangere partnere eller avgjøre finansiering, fordi lokale arbeidsmarkeder varierer mer enn partnerne gjør.
- Versjonsloggen forklarer alle brudd i tidsserien. Da versjon 1.1 la til utdanning og opplæring, ble det ført inn i loggen, slik at ingen forvekslet en ny definisjon med framgang.
Å summere tallene: samme data, tre historier
Når definisjonene er på plass, må du bestemme hvordan partnernes verdier skal summeres. Det høres ut som enkel matematikk, men det er her de fleste porteføljerapporter går galt, fordi de samme dataene kan gi helt motsatte overskrifter.
I dette eksempelet økte antallet unge i arbeid eller opplæring med 45 prosent, hovedsakelig fordi én partner mer enn doblet inntaket sitt. Gjennomsnittet av ratene til de ti partnerne økte med ti prosentpoeng, fordi fire små partnere gjorde det svært bra. Antallet partnere som nådde 50-prosentterskelen, ble halvert. Alle tre framstillingene er sanne. Den ærlige oppsummeringen er at den samlede raten falt fra 53 til 50 prosent, og at de fire partnerne som falt under grensen, navngis.
Å ta gjennomsnittet av partnernes prosentandeler er dobbelt misvisende. Det gir en partner med 20 avgangselever samme vekt som en med 900. Og som det står i UNDPs håndbok, «har gjennomsnitt en tendens til å skjule forskjeller» [4]: To partnere på 90 prosent og to på 10 prosent gir et gjennomsnitt på 50, akkurat som fire på 50 prosent. Vis også antallet ved siden av hver rate: Med 20 avgangselever flytter én ung person raten med fem prosentpoeng. Nivåer og stadier skal ikke gjennomsnittsberegnes; tell partnerne på hvert nivå, slik vi gjør i vår veiledning for vurdering av partnerkapasitet.
Én felle til, fra mine år med operasjonsanalyse: En samlet rate kan falle uten at noen partner gjør det dårligere, dersom veksten skjer hos partnere med lavere rater. Før du spør hvem som gikk tilbake, bør du spørre hvem som vokste.
| Type KPI | Eksempel | Summer med | Unngå |
|---|---|---|---|
| Antall unike personer eller ting | Unge som er registrert | Sum, etter at dobbelttelling er utelukket | Å legge sammen antall som er definert forskjellig |
| Prosentandel eller rate | Avgangselever i arbeid etter seks måneder | Samlet rate: summen av alle tellere delt på summen av alle nevnere | Å ta gjennomsnittet av partnernes prosentandeler |
| Nivå, vurdering eller stadium | En partners stadium innen MEAL og data | Antallet partnere på hvert nivå | Å ta gjennomsnittet av nivåene til én poengsum |
| Ja eller nei | Kontaktperson for trygghetstiltak på plass | Andelen partnere som svarer ja, og hvilke partnere | Å regne et manglende svar som nei |
| Mål eller terskel | 50 prosent eller mer i arbeid | Andelen partnere som når eller overstiger målet, med navn | En andel uten navnene bak |
Uansett hvilken regel du bruker, bør du rapportere programtallet, hvordan partnerne fordeler seg rundt det, og listen over dem: Hvert tall på et lysbilde til styret bør kunne spores tilbake til partnerne som står bak.
Kontroller dataene før du summerer dem
Summering gjør små feil om til overbevisende totalsummer. IFRC ber om rutiner for å kontrollere og rense data og håndtere manglende data, og nevner de vanligste årsakene til upålitelige data: skrivefeil, dupliserte oppføringer, inkonsistente data og data som er slettet eller gått tapt [3]. UNDPs håndbok beskriver hva som står på spill: pålitelighet (konsistente målinger) og gyldighet (at man måler det man hadde til hensikt å måle) [4]. Fem kontroller dekker det meste:
- Fullstendighet. Alle partnere som skal rapportere, har gjort det. Manglende data markeres som manglende, aldri som null.
- Konsistens. Ingen teller er større enn nevneren, og oppdeling etter kjønn eller alder summerer seg til totalen.
- Plausibilitet. En endring på mer enn 20 prosentpoeng siden forrige runde utløser et spørsmål, ikke en stille korrigering.
- Duplikater. Den samme personen er telt av to partnere, eller to ganger av én partner.
- Verifisering. Noen få oppføringer per partner per år kontrolleres mot registeret eller samtaleloggen.
Ta opp kontrollene som spørsmål med partneren, ikke som en revisjon. En verdi som flagges, skyldes ofte et definisjonsproblem, og løsningen bør føres inn i referansearket for alle.
Tilpass KPI-er til partnerens stadium
Hvis programmet følger en modenhetsvei, endres de riktige KPI-ene etter hvert som partneren går videre: En KPI som er viktig på stadium 2, sier kanskje ingenting på stadium 4. Eksempelprogrammet har fire stadier:
| Stadium | Hva partneren bygger opp | KPI-er som gir nyttig informasjon |
|---|---|---|
| 1 Oppstart | Et kurs som fungerer godt | Påmelding fordelt på kjønn og alder; fullføring av kurs |
| 2 Gjennomføring | En oppfølgingssamtale med hver avgangselev | Andelen avgangselever man får kontakt med; KPI-en for arbeid eller opplæring starter som et utgangspunkt |
| 3 Samarbeid | Relasjoner til arbeidsgivere | KPI-en for arbeid eller opplæring målt mot målet; tilbudte jobbplasseringer |
| 4 Lederskap | Varig arbeid av god kvalitet | Avgangselever som fortsatt er i arbeid etter 12 måneder; partnerens egne indikatorer |
Det følger to regler. Ikke hold en partner ansvarlig for en virkning den ennå ikke er rigget for å påvirke: En jobbplasseringsrate for en partner på stadium 1 sier mer om distriktet enn om partnerens arbeid. Og legg bort en KPI når nesten alle partnerne oppfyller den: Fullføring av kurs er viktig på stadium 1, men på stadium 4, når alle partnerne ligger over 90 prosent, skiller den ikke mellom noen og gir ingen grunnlag for beslutninger. Begge reglene forutsetter at du kjenner det nåværende stadiet til hver partner. Det finnes tre måter å holde det oppdatert på: Partnerne vurderer seg selv, fullført arbeid flytter dem videre, eller teamet ditt bestemmer. Hvis du vil beskrive selve stadiene, kan du lese veiledningen vår om å bygge en modenhetsmodell.
Hvor mange KPI-er er for mange?
Regn ut omfanget først. Seks sentrale KPI-er, hver fordelt på fire kategorier og rapportert kvartalsvis av 40 partnere, gir 3 840 tall i året. Tolv KPI-er fordelt på åtte kategorier gir 15 360. Hvert tall registreres av noen hos en partner og kontrolleres av noen i teamet ditt. IFRC anbefaler å overvåke bare det som er nødvendig og tilstrekkelig, fordi «ekstrainformasjon oftere er en byrde enn en luksus» [3]. UNDPs håndbok setter troverdighet, ikke datamengde, i sentrum for gode indikatorer [4].
Jeg vurderer hver KPI med tre spørsmål: Hvem ser på den, hvilken beslutning endrer den, og hva skal vi gjøre hvis tallet går ned? Hvis ingen kan svare på alle tre, hører den ikke hjemme i kjernen. Da står man som regel igjen med fem til åtte felles KPI-er, to eller tre per partner og noen få som slås av og på etter stadium.
Slik bruker du KPI-ene dine i Advancer.World
Advancer.World ble til gjennom digitaliseringen av programmer hos organisasjoner som UNICEF og Airbus. Et program er et rutenett av trinn og temaer, og arbeidet skjer i stegene mellom trinnene: initiativer, undersøkelser og opplasting av dokumenter som dokumentasjon bak et tall.
KPI-er defineres én gang per program og registreres for hver partner, slik at alle partnere rapporterer på de samme KPI-ene. Partnere ser sin egen status og hva neste trinn krever av dem, på ett av 22 språk, og aldri andre partneres data. Daglige øyeblikksbilder bevarer historikken for Excel-rapporter og KI-genererte Word-rapporter med diagrammer. Med Gold- og Enterprise-abonnementene kan REST API og MCP-serveren lese en partners målekort, plassering på hvert deltema og KPI-verdier, samt programmets utvikling over tid. De fem KPI-ene i Free-abonnementet er nok til å prøve ut en felles kjerne med noen få partnere.
Vanlige spørsmål
Hva er forskjellen mellom en KPI og en indikator?
Alle KPI-er er indikatorer, men ikke alle indikatorer er KPI-er. KPI-er er den delmengden som anses som viktigst for målene, og som overvåkes kontinuerlig [1]. I et program med flere partnere er den felles kjernen KPI-ene deres; andre indikatorer dekker behovene til partnere og team.
Bør implementeringspartnere velge sine egne indikatorer?
Noen av dem, ja. Felles KPI-er trenger felles definisjoner som er avtalt med partnerne; partnerne velger selv sine egne indikatorer. IFRC anbefaler at M&E-planen utvikles av dem som skal bruke den, noe som også bidrar til bedre datakvalitet [3].
Hvordan beregner man samlede prosentandeler på tvers av partnere?
Legg sammen alle tellerne, legg sammen alle nevnerne, og del deretter. Ta aldri gjennomsnittet av partnernes prosentandeler, og rapporter resultatet med navn på partnerne som ligger på eller over terskelen.
Begynn med KPI-en du har minst tillit til
Du trenger ikke et nytt rammeverk for å komme i gang. Ta KPI-en i kjernen du har minst tillit til, fyll ut et referanseark for den sammen med to eller tre partnere, og be hver av dem telle de samme fem tilfellene. Forskjellene viser deg hva du bør dokumentere. Gjør deretter det samme med den neste.
Én definisjon, hver partner, hver runde. Sett opp programmets sentrale KPI-er, inviter partnerne dine, og lag rapporter fra de samme dataene i Excel eller i en KI-generert Word-rapport, med historikken bevart. Partnere betaler aldri. Gratis å komme i gang.
Referanser
- OECD, «Ordliste over sentrale begreper innen evaluering og resultatbasert styring for bærekraftig utvikling (andre utgave)», OECD Publishing, Paris, 2023, https://alnap.org/documents/20488/OECD_glossary_key_terms_eval_rbm_sd-fr-es.pdf (besøkt oktober 2026).
- Nigel Simister, INTRAC, «Oppsummering av endringer i porteføljen: resultatrammeverk på organisasjonsnivå», M&E Paper 10, januar 2016, https://www.intrac.org/resources/paper-10-summarising-portfolio-change-results-frameworks-organisational-level/ (besøkt oktober 2026).
- International Federation of Red Cross and Red Crescent Societies, «Veiledning for overvåking og evaluering av prosjekter/programmer (M&E)», Genève, 2011, https://www.ifrc.org/sites/default/files/2021-09/IFRC-ME-Guide-8-2011.pdf (besøkt oktober 2026).
- United Nations Development Programme, «Håndbok for planlegging, overvåking og evaluering av utviklingsresultater», New York, 2009, http://web.undp.org/evaluation/handbook/documents/english/pme-handbook.pdf (besøkt oktober 2026).
© 2026 Mourinho Solutions. Alle rettigheter forbeholdt.