Utforming av KPI-er for et program med flere partnere

Når førti partnere rapporterer den samme KPI-en, blir alle uklare definisjoner lagt sammen. En liten felles kjerne, et referanseark for hver KPI, aggregeringsregler som gir et sant bilde, og en gratis mal med et utfylt eksempel.

Kvartalstallene fra førti partnere kommer inn uken før styremøtet. Én linje summerer antallet unge som har fått opplæring, og det ser ut som et godt kvartal. Så begynner spørsmålene. Én partner talte alle som hadde deltatt på en økt, en annen bare dem som fullførte kurset, og en tredje tok med sine egne frivillige. Summen er matematisk riktig, men betyr nesten ingenting.

Ingen gjorde noe galt; programmet hadde aldri skrevet ned hvilket spørsmål det skulle besvare. Det er det første problemet med KPI-er for partnerprogrammer: Alle uklare definisjoner blir lagt sammen. Denne veiledningen tar for seg en liten felles kjerne av KPI-er, et referanseark for hver (en gratis mal med et utfylt eksempel), aggregeringsregler som gir et sant bilde, kontrollene som må gjøres først, KPI-er som følger partnerens stadium, og hvor mange KPI-er som er for mange.

Hvorfor KPI-er for partnerprogrammer er annerledes

OECDs evalueringsordliste definerer nøkkelindikatorer for resultater som delmengden av indikatorer som anses som viktigst for målene, overvåkes løpende, og påpeker at enhver indikator «alltid bare er omtrentlig» og må tolkes [1]. Med én partner kan du ganske enkelt spørre hva de talte. Med førti skjer tre ting:

  • Definisjoner blir avtaler. Hver partner løser alle uklarheter på sin egen måte, og summen blander dem sammen. INTRAC lister opp hva som kreves for å summere på tvers av en portefølje: de samme definisjonene, at alle relevante prosjekter samler inn dataene, tilsvarende tidsrammer, de samme verktøyene og jevn kvalitet [2].
  • Arbeidsmengden mangedobles. Én indikator til betyr ett tall til for deg, og førti for partnerne dine, hver rapporteringsrunde.
  • Partnere er ulike. Størrelse, kontekst og modenhet varierer, så det samme tallet betyr ulike ting på ulike steder.

En liten felles kjerne, pluss hver partners egne KPI-er

Det som fungerer i de fleste programmer med flere partnere, er to lag. En felles kjerne på fem til åtte KPI-er som hver partner rapporterer med samme definisjon: Dette er de eneste tallene dere summerer. Deretter to eller tre partnerspesifikke indikatorer per partner, valgt av partneren ut fra egen kontekst og vurdert partner for partner.

IFRCs veiledning for overvåking og evaluering beskriver avveiningen: Standardindikatorer har anerkjente definisjoner og kan sammenlignes på tvers av prosjekter, men representerer kanskje ikke den lokale konteksten. Derfor er en kombinasjon ofte best [3]. INTRAC peker på risikoen ved å standardisere alt: I verste fall samler prosjekter inn informasjon som ikke er nyttig for dem [2]. Det partnerspesifikke laget er også stedet de beste indikatorene for gjennomføringspartnere kommer fra; noen av dem får senere plass i kjernen.

Leveranser, virkninger og hva en partner har kontroll over

I OECDs ordliste er leveranser produktene og tjenestene et tiltak produserer, innenfor gjennomføringsteamets kontroll; virkninger er de kort- og mellomlangsiktige effektene av dem [1]. I et program med flere partnere får dette to konsekvenser:

  • Leveranser kan summeres; virkninger lar seg vanskeligere summere. INTRAC finner at aggregering er fullt mulig på leveransenivå og svært vanskelig på virkningsnivå, selv når det finnes bransjestandardiserte definisjoner [2]. KPI-er for virkninger trenger de aller tydeligste definisjonene.
  • Virkninger avhenger av konteksten. En partner for ungdomssysselsetting i et distrikt med få jobber vil ikke oppnå samme resultat som en partner i hovedstaden, uansett hvor godt kurset er. Sammenlign først hver partner med sitt eget utgangspunkt.

En god kjerne inneholder begge deler: leveranser som viser at arbeidet blir gjort, og én eller to virkninger som viser om det har betydning.

Skriv ned hver KPI: KPI-referansearket

Hver KPI i kjernen trenger en skriftlig definisjon før den første partneren rapporterer. IFRCs plan for overvåking og evaluering dokumenterer en detaljert definisjon, kildene, metodene og tidspunktet for datainnsamling, de ansvarlige personene og den tiltenkte bruken for hver indikator. Definisjonen bør angi nøyaktig hvordan indikatoren beregnes, for eksempel telleren og nevneren i en prosentandel, og hvordan den deles opp etter kjønn, alder eller andre variabler. Ansvarlige personer angis også med stillingstittel, slik at indikatoren tåler utskifting av ansatte [3]. Malen nedenfor legger til tre felt som er viktige når mange partnere rapporterer: aggregeringsregelen, datakvalitetskontrollene og en versjonslogg.

Feltene i et KPI-referanseark, med svarene fra det utfylte eksempelet
Felt Hva feltet avklarer I eksempelet
Definisjon Alle begreper en partner kan tolke på to måter En deltaker har fullført når vedkommende har deltatt på minst 80 % av øktene; arbeid betyr minst 10 timer i uken
Teller og nevner Hva som telles, og ut fra hva Avgangselever som ikke ble nådd etter seks måneder, blir stående i nevneren
Kilde og hyppighet Hvor tallet kommer fra, og når Kursregister og en oppfølgingssamtale; kvartalsvis
Aggregeringsregel Hvordan partnernes verdier summeres Samlet rate, pluss partnerne som ligger på 50 % eller mer
Kvalitetskontroller Hva som kontrolleres før tallene summeres En teller som er større enn nevneren, sendes tilbake til partneren
Versjonslogg Hva som ble endret, når og hvorfor Utdanning og opplæring ble lagt til i versjon 1.1

Mal for KPI-referanseark (gratis nedlasting)

Malen består av to A4-sider: hvordan den brukes, indikatoren, definisjonen og datainnsamlingen (side 1); aggregeringsregelen, kvalitetskontrollene, begrensningene, versjonsloggen og godkjenningen (side 2).

Side 1 av det tomme KPI-referansearket: hvordan det brukes, indikatoren, definisjonen med teller og nevner, og datainnsamlingen
Side 1 av malen: indikatoren, definisjonen og hvordan dataene samles inn.

Last ned malen for KPI-referansearket (PDF, 2 sider). Skriv ut ett eksemplar per KPI, eller kopier feltene inn i din egen plan for overvåking og evaluering.

Definerer du KPI-er for mer enn en håndfull partnere? I Advancer.World definerer du hver KPI én gang per program og registrerer den for hver partner, ved siden av hvor partneren står i programmets stadier. Daglige øyeblikksbilder tar vare på historikken, slik at utviklingen er tilgjengelig når du skal rapportere. Gratis å komme i gang.

Registrer deg nå

Eksempel: én KPI, fullstendig definert

Her er arket utfylt for en sentral virknings-KPI i Youth Pathways Program, der Horizon Child Fund samarbeider med 40 lokale partnere som holder sysselsettingskurs for unge. Begge er fiktive.

Utfylt eksempel, side 2: aggregeringsregelen med samlet rate og en avkrysset terskel på 50 %, datakvalitetskontroller, begrensninger og versjonsloggen for en fiktiv KPI for ungdomssysselsetting
Side 2 av eksempelet (fiktive organisasjoner): hvordan KPI-en summeres, kontrolleres og versjoneres.

Last ned det utfylte eksempelet (PDF, 2 sider). Tre valg er verdt å kopiere:

  • Avgangselever som ingen fikk tak i, blir stående i nevneren. Ellers rapporterer partneren som bare får kontakt med dem som har lykkes, den beste raten.
  • Arket sier hva det ikke må brukes til. Det skal ikke brukes til å rangere partnere eller avgjøre finansiering, fordi lokale arbeidsmarkeder varierer mer enn partnerne gjør.
  • Versjonsloggen forklarer alle brudd i tidsserien. Da versjon 1.1 la til utdanning og opplæring, ble det ført inn i loggen, slik at ingen forvekslet en ny definisjon med framgang.

Å summere tallene: samme data, tre historier

Når definisjonene er på plass, må du bestemme hvordan partnernes verdier skal summeres. Det høres ut som enkel matematikk, men det er her de fleste porteføljerapporter går galt, fordi de samme dataene kan gi helt motsatte overskrifter.

Eksempeldata for ti fiktive partnere: det samlede antallet i arbeid eller opplæring økte fra 528 til 763, gjennomsnittet av partnernes rater økte fra 53 % til 63 %, antallet partnere på 50 %-terskelen falt fra 8 til 4, og den samlede raten gikk fra 53 % til 50 %
Illustrasjon med eksempeldata: ti fiktive partnere, én KPI, tre måter å summere den på, tre forskjellige overskrifter.

I dette eksempelet økte antallet unge i arbeid eller opplæring med 45 prosent, hovedsakelig fordi én partner mer enn doblet inntaket sitt. Gjennomsnittet av ratene til de ti partnerne økte med ti prosentpoeng, fordi fire små partnere gjorde det svært bra. Antallet partnere som nådde 50-prosentterskelen, ble halvert. Alle tre framstillingene er sanne. Den ærlige oppsummeringen er at den samlede raten falt fra 53 til 50 prosent, og at de fire partnerne som falt under grensen, navngis.

Å ta gjennomsnittet av partnernes prosentandeler er dobbelt misvisende. Det gir en partner med 20 avgangselever samme vekt som en med 900. Og som det står i UNDPs håndbok, «har gjennomsnitt en tendens til å skjule forskjeller» [4]: To partnere på 90 prosent og to på 10 prosent gir et gjennomsnitt på 50, akkurat som fire på 50 prosent. Vis også antallet ved siden av hver rate: Med 20 avgangselever flytter én ung person raten med fem prosentpoeng. Nivåer og stadier skal ikke gjennomsnittsberegnes; tell partnerne på hvert nivå, slik vi gjør i vår veiledning for vurdering av partnerkapasitet.

Én felle til, fra mine år med operasjonsanalyse: En samlet rate kan falle uten at noen partner gjør det dårligere, dersom veksten skjer hos partnere med lavere rater. Før du spør hvem som gikk tilbake, bør du spørre hvem som vokste.

Hvilken aggregeringsregel passer til hvilken type KPI
Type KPI Eksempel Summer med Unngå
Antall unike personer eller ting Unge som er registrert Sum, etter at dobbelttelling er utelukket Å legge sammen antall som er definert forskjellig
Prosentandel eller rate Avgangselever i arbeid etter seks måneder Samlet rate: summen av alle tellere delt på summen av alle nevnere Å ta gjennomsnittet av partnernes prosentandeler
Nivå, vurdering eller stadium En partners stadium innen MEAL og data Antallet partnere på hvert nivå Å ta gjennomsnittet av nivåene til én poengsum
Ja eller nei Kontaktperson for trygghetstiltak på plass Andelen partnere som svarer ja, og hvilke partnere Å regne et manglende svar som nei
Mål eller terskel 50 prosent eller mer i arbeid Andelen partnere som når eller overstiger målet, med navn En andel uten navnene bak

Uansett hvilken regel du bruker, bør du rapportere programtallet, hvordan partnerne fordeler seg rundt det, og listen over dem: Hvert tall på et lysbilde til styret bør kunne spores tilbake til partnerne som står bak.

Kontroller dataene før du summerer dem

Summering gjør små feil om til overbevisende totalsummer. IFRC ber om rutiner for å kontrollere og rense data og håndtere manglende data, og nevner de vanligste årsakene til upålitelige data: skrivefeil, dupliserte oppføringer, inkonsistente data og data som er slettet eller gått tapt [3]. UNDPs håndbok beskriver hva som står på spill: pålitelighet (konsistente målinger) og gyldighet (at man måler det man hadde til hensikt å måle) [4]. Fem kontroller dekker det meste:

  1. Fullstendighet. Alle partnere som skal rapportere, har gjort det. Manglende data markeres som manglende, aldri som null.
  2. Konsistens. Ingen teller er større enn nevneren, og oppdeling etter kjønn eller alder summerer seg til totalen.
  3. Plausibilitet. En endring på mer enn 20 prosentpoeng siden forrige runde utløser et spørsmål, ikke en stille korrigering.
  4. Duplikater. Den samme personen er telt av to partnere, eller to ganger av én partner.
  5. Verifisering. Noen få oppføringer per partner per år kontrolleres mot registeret eller samtaleloggen.

Ta opp kontrollene som spørsmål med partneren, ikke som en revisjon. En verdi som flagges, skyldes ofte et definisjonsproblem, og løsningen bør føres inn i referansearket for alle.

Tilpass KPI-er til partnerens stadium

Hvis programmet følger en modenhetsvei, endres de riktige KPI-ene etter hvert som partneren går videre: En KPI som er viktig på stadium 2, sier kanskje ingenting på stadium 4. Eksempelprogrammet har fire stadier:

KPI-er som gir nyttig informasjon på hvert stadium i eksempelprogrammet
Stadium Hva partneren bygger opp KPI-er som gir nyttig informasjon
1 Oppstart Et kurs som fungerer godt Påmelding fordelt på kjønn og alder; fullføring av kurs
2 Gjennomføring En oppfølgingssamtale med hver avgangselev Andelen avgangselever man får kontakt med; KPI-en for arbeid eller opplæring starter som et utgangspunkt
3 Samarbeid Relasjoner til arbeidsgivere KPI-en for arbeid eller opplæring målt mot målet; tilbudte jobbplasseringer
4 Lederskap Varig arbeid av god kvalitet Avgangselever som fortsatt er i arbeid etter 12 måneder; partnerens egne indikatorer

Det følger to regler. Ikke hold en partner ansvarlig for en virkning den ennå ikke er rigget for å påvirke: En jobbplasseringsrate for en partner på stadium 1 sier mer om distriktet enn om partnerens arbeid. Og legg bort en KPI når nesten alle partnerne oppfyller den: Fullføring av kurs er viktig på stadium 1, men på stadium 4, når alle partnerne ligger over 90 prosent, skiller den ikke mellom noen og gir ingen grunnlag for beslutninger. Begge reglene forutsetter at du kjenner det nåværende stadiet til hver partner. Det finnes tre måter å holde det oppdatert på: Partnerne vurderer seg selv, fullført arbeid flytter dem videre, eller teamet ditt bestemmer. Hvis du vil beskrive selve stadiene, kan du lese veiledningen vår om å bygge en modenhetsmodell.

Hvor mange KPI-er er for mange?

Regn ut omfanget først. Seks sentrale KPI-er, hver fordelt på fire kategorier og rapportert kvartalsvis av 40 partnere, gir 3 840 tall i året. Tolv KPI-er fordelt på åtte kategorier gir 15 360. Hvert tall registreres av noen hos en partner og kontrolleres av noen i teamet ditt. IFRC anbefaler å overvåke bare det som er nødvendig og tilstrekkelig, fordi «ekstrainformasjon oftere er en byrde enn en luksus» [3]. UNDPs håndbok setter troverdighet, ikke datamengde, i sentrum for gode indikatorer [4].

Jeg vurderer hver KPI med tre spørsmål: Hvem ser på den, hvilken beslutning endrer den, og hva skal vi gjøre hvis tallet går ned? Hvis ingen kan svare på alle tre, hører den ikke hjemme i kjernen. Da står man som regel igjen med fem til åtte felles KPI-er, to eller tre per partner og noen få som slås av og på etter stadium.

Slik bruker du KPI-ene dine i Advancer.World

Advancer.World ble til gjennom digitaliseringen av programmer hos organisasjoner som UNICEF og Airbus. Et program er et rutenett av trinn og temaer, og arbeidet skjer i stegene mellom trinnene: initiativer, undersøkelser og opplasting av dokumenter som dokumentasjon bak et tall.

Programutforming i Advancer.World: Youth Pathways Program med fire trinn, Starting, Delivering, Connecting og Leading, innen kursgjennomføring, arbeidsgiverkontakter, oppfølging, MEAL og beskyttelse
Eksempel på et program i Advancer.World (eksempeldata): fire trinn, fra Starting til Leading, innen gjennomføring, arbeidslivskontakter og læring.

KPI-er defineres én gang per program og registreres for hver partner, slik at alle partnere rapporterer på de samme KPI-ene. Partnere ser sin egen status og hva neste trinn krever av dem, på ett av 22 språk, og aldri andre partneres data. Daglige øyeblikksbilder bevarer historikken for Excel-rapporter og KI-genererte Word-rapporter med diagrammer. Med Gold- og Enterprise-abonnementene kan REST API og MCP-serveren lese en partners målekort, plassering på hvert deltema og KPI-verdier, samt programmets utvikling over tid. De fem KPI-ene i Free-abonnementet er nok til å prøve ut en felles kjerne med noen få partnere.

Vanlige spørsmål

Hva er forskjellen mellom en KPI og en indikator?

Alle KPI-er er indikatorer, men ikke alle indikatorer er KPI-er. KPI-er er den delmengden som anses som viktigst for målene, og som overvåkes kontinuerlig [1]. I et program med flere partnere er den felles kjernen KPI-ene deres; andre indikatorer dekker behovene til partnere og team.

Bør implementeringspartnere velge sine egne indikatorer?

Noen av dem, ja. Felles KPI-er trenger felles definisjoner som er avtalt med partnerne; partnerne velger selv sine egne indikatorer. IFRC anbefaler at M&E-planen utvikles av dem som skal bruke den, noe som også bidrar til bedre datakvalitet [3].

Hvordan beregner man samlede prosentandeler på tvers av partnere?

Legg sammen alle tellerne, legg sammen alle nevnerne, og del deretter. Ta aldri gjennomsnittet av partnernes prosentandeler, og rapporter resultatet med navn på partnerne som ligger på eller over terskelen.

Begynn med KPI-en du har minst tillit til

Du trenger ikke et nytt rammeverk for å komme i gang. Ta KPI-en i kjernen du har minst tillit til, fyll ut et referanseark for den sammen med to eller tre partnere, og be hver av dem telle de samme fem tilfellene. Forskjellene viser deg hva du bør dokumentere. Gjør deretter det samme med den neste.

Én definisjon, hver partner, hver runde. Sett opp programmets sentrale KPI-er, inviter partnerne dine, og lag rapporter fra de samme dataene i Excel eller i en KI-generert Word-rapport, med historikken bevart. Partnere betaler aldri. Gratis å komme i gang.

Registrer deg nå

Referanser

  1. OECD, «Ordliste over sentrale begreper innen evaluering og resultatbasert styring for bærekraftig utvikling (andre utgave)», OECD Publishing, Paris, 2023, https://alnap.org/documents/20488/OECD_glossary_key_terms_eval_rbm_sd-fr-es.pdf (besøkt oktober 2026).
  2. Nigel Simister, INTRAC, «Oppsummering av endringer i porteføljen: resultatrammeverk på organisasjonsnivå», M&E Paper 10, januar 2016, https://www.intrac.org/resources/paper-10-summarising-portfolio-change-results-frameworks-organisational-level/ (besøkt oktober 2026).
  3. International Federation of Red Cross and Red Crescent Societies, «Veiledning for overvåking og evaluering av prosjekter/programmer (M&E)», Genève, 2011, https://www.ifrc.org/sites/default/files/2021-09/IFRC-ME-Guide-8-2011.pdf (besøkt oktober 2026).
  4. United Nations Development Programme, «Håndbok for planlegging, overvåking og evaluering av utviklingsresultater», New York, 2009, http://web.undp.org/evaluation/handbook/documents/english/pme-handbook.pdf (besøkt oktober 2026).

© 2026 Mourinho Solutions. Alle rettigheter forbeholdt.

← Tilbake til bloggen