Evaluering i efteråret: sådan vurderer du dine forsøg med klare kriterier

Hvorfor efteråret passer til en evaluering

Når oktober er halvvejs, har de fleste redaktioner og virksomheder et par forsøg bag sig fra sommeren og begyndelsen af efteråret. Det er et naturligt tidspunkt at stoppe op, fordi tempoet i kalenderen ofte falder lidt, og fordi planerne for det kommende år begynder at tage form. Hvis du venter til nytår, er detaljerne fra forsøgene allerede blevet utydelige.

I Modul 5 arbejder vi med netop dette skift fra at lave til at vurdere. Mange deltagere har dokumenteret deres forsøg godt, men har aldrig fået sat dem op mod noget fast. Resultatet er, at beslutningerne bliver taget ud fra stemning, og at den mest højrøstede mening i rummet vinder.

Brug de kommende uger til at samle materialet ét sted: planen, det, du faktisk gjorde, og de noter du skrev undervejs. Det lyder kedeligt, men det er grundlaget for en evaluering, du kan stå inde for over for kolleger og ledelse.

Skriv kriterierne, før du ser tallene

Den hyppigste fejl, jeg ser i workshops, er at kriterierne bliver formuleret bagefter. Så passer de pludselig bemærkelsesværdigt godt til det, der skete. Skriv derfor kriterierne ned, før du kigger på resultaterne, og gem dem sammen med forsøgsbeskrivelsen, så de ikke kan justeres i smug.

Gode kriterier er få og konkrete. Hvad ville du forvente at se, hvis formatet fungerede for den målgruppe, du havde i tankerne? Det kan være, at folk vender tilbage til næste afsnit, at de bruger formatet til noget, du ikke havde regnet med, eller at redaktionen kan producere det uden at brænde ud.

Tænk også over, hvad der ville få dig til at stoppe. Et kriterium for at give op er lige så vigtigt som et for at fortsætte, fordi det tvinger dig til at sige højt, hvad et nej vil kræve.

• Højst fem kriterier pr. forsøg
• Hvert kriterium kan observeres, ikke kun føles
• Ét kriterium handler om ressourcer og arbejdsbyrde
• Ét kriterium beskriver, hvad der får dig til at stoppe

Læs resultaterne uden at overtolke dem

Små forsøg giver små datasæt. Det er en styrke, fordi de er billige at gennemføre, men det betyder også, at du skal være forsigtig med konklusionerne. En høj reaktion fra tyve personer siger noget om de tyve, ikke om alle. Skriv derfor ved hvert resultat, hvem det kommer fra, og hvor mange det drejer sig om.

Skeln mellem det, du målte, og det, du fortolker. At færre læste anden halvdel af en tekst er en observation. At teksten var for lang er en forklaring, og den kræver et nyt forsøg at bekræfte. Når du holder de to ting adskilt på papiret, bliver diskussionen på redaktionsmødet langt mere nøgtern.

Vær også ærlig om tilfældigheder. Vejret, en nyhedsbegivenhed eller en ferieuge kan have påvirket forløbet. Notér dem som mulige forstyrrelser frem for at ignorere dem.

Tre mulige beslutninger efter evalueringen

Når kriterierne er gennemgået, ender de fleste forsøg i en af tre kategorier. Enten udvikler du videre, fordi flere kriterier talte for formatet, eller også justerer du og kører et nyt, afgrænset forsøg, fordi resultatet var uklart. Den tredje mulighed er at lægge formatet til side, og det er en fuldt ud respektabel beslutning, når kriterierne bakker den op.

Mange er tilbageholdende med at stoppe, fordi der er lagt arbejde i forsøget. Men tiden brugt er ikke et argument for at fortsætte. Spørg i stedet, hvad du har lært, og hvem der har gavn af at kende det.

Skriv beslutningen ned med en kort begrundelse og en dato for, hvornår I tager den op igen. Så bliver den et arbejdsredskab og ikke bare en konklusion, der forsvinder i et referat.

• Videreudvikl: kriterierne er opfyldt, og næste skridt er formuleret
• Juster: resultatet er uklart, og ét ændret forhold testes
• Læg til side: kriterierne for at stoppe er nået

Sådan holder du evalueringen i gang i en travl periode

Evalueringer går oftest i stå, fordi de ikke har en ejer. Udpeg én person, der samler materialet og kalder til mødet, og afsæt et fast tidsrum. En time til gennemgang af ét forsøg er som regel nok, hvis kriterierne er skrevet på forhånd og alle har læst noterne.

Hold mødet kort og fokuseret på de tre spørgsmål: Hvad skete der, hvad tror vi om det, og hvad gør vi nu? Lad forskellige deltagere starte, så ikke altid den samme person sætter retningen. Det giver ofte bedre indsigt, især når nogen har arbejdet tæt på publikum og andre tæt på produktionen.

Til virksomheder og redaktioner tilrettelægger jeg workshops, hvor vi gennemgår jeres egne forsøg på denne måde. Det er ikke nødvendigt for at få gavn af fremgangsmåden, men en udefrakommende kan gøre det lettere at sige de ubehagelige ting.

Det, du kan tage med dig ind i vinteren

En god evaluering efterlader dig med tre ting: en kort beskrivelse af, hvad der blev prøvet, en vurdering ud fra kriterier, du selv satte på forhånd, og en beslutning med en begrundelse. Det er ikke meget papir, men det er nok til, at du om et halvt år kan huske, hvorfor du valgte, som du gjorde.

Det er også nok til at undgå at gentage de samme forsøg uden at vide det. På mange redaktioner bliver gode ideer prøvet af to gange, fordi ingen skrev resultatet ned første gang.

Brug efteråret på at rydde op i det, du allerede har gang i, før du starter noget nyt. Det giver et mere roligt udgangspunkt for planlægningen af næste år og en tydeligere fornemmelse af, hvor din tid gør mest gavn.