Når du kører en Rapid Cycle Evaluation (RCE) , skal du undersøge dine mål for at beslutte, hvilken RCE-rapport der skal genereres. Hvad forsøger du at opnå med denne forskning? Du kan have flere mål. Definitionen af dine forskningsmål vil guide RCE-rapporten og påvirke dataindsamling, analyse og konklusioner. Ved at vælge disse mål indsnævrer du fokus og omfang af din forskning.
Uddannelsesadministratorer udvikler ofte forskningsmål inden for følgende områder:
Analyse på disse områder hjælper med at bestemme:
- hvordan et edtech-produkt bruges
- hvordan brugerne følger anbefalede brugsretningslinjer
- om større brug af et edtech-produkt er relateret til højere læringsresultater
- om studerende, der bruger et edtech-produkt, klarer sig bedre end andre studerende
- potentielle omkostningsbesparelser
Mål for brugsanalyse
Mål 1: Forstå, hvordan mit edtech-produkt bliver brugt
Er du interesseret i at få ny indsigt i brugen af edtech på din skole eller i dit distrikt? Implementeringen af produkter kan variere meget afhængigt af brug og adgang. At kunne få indsigt i, i hvilket omfang et produkt bruges, og af hvem, er et vigtigt første skridt i at forstå edtechs effektivitet i din sammenhæng. Afhængigt af hvornår data stilles til rådighed for dine edtech-produkter, kan du køre disse rapporter månedligt eller med et par måneders mellemrum for at forstå, hvordan et bestemt edtech-produkt bruges.
Mål 2: Forstå, hvordan brugerne følger anbefalede brugsretningslinjer
Forventes det, at brugerne skulle interagere med et edtech-produkt på en bestemt måde, og vil du vide, om de levede op til disse forventninger? En produktudbyder eller uddannelsesadministrator kan sætte forventninger til brugernes brug af et edtech-produkt (f.eks. fem timer om ugen). Hvis du vil vide, hvor mange brugere der nåede det anbefalede benchmark, er dette forskningsmål det rigtige for dig. I lighed med det første mål kan disse rapporter køres månedligt eller med et par måneders mellemrum, afhængigt af hvor ofte data stilles til rådighed.
Mål for resultatanalyse
Mål 3: Forstå om øget brug af mit produkt er relateret til højere læringsresultater
Vil du vide, om øget brug af et edtech-produkt er relateret til forbedrede læringsresultater? Vil du vide, om der er optimale brugsniveauer for dine brugere? I denne type RCE-rapport vil du kun inkludere brugere, der har modtaget edtech-produktet eller interventionen (f.eks. resultater uden en sammenligningsgruppe) for at undersøge sammenhængene mellem edtech-brug og et resultatmål (f.eks. testresultater midtvejs i året). Du vil være i stand til at undersøge, hvordan læring, om overhovedet, har ændret sig over en periode, og om brugen er relateret til denne ændring. Dette mål falder sammen med en af vores mest almindelige RCE-rapporter og kan køres så ofte, som du har resultater tilgængelige.
Mål 4: Forstå om elever, der bruger mit produkt, klarer sig bedre end andre elever
Vil du vide, om der er forskel i resultaterne mellem brugere, der interagerer med et edtech-produkt, og dem, der ikke gør (f.eks. resultater med en sammenligningsgruppe)? Hvad nu, hvis der er optimale brugsniveauer for dine brugere, der brugte edtech-produktet? I denne type RCE-rapport inkluderer du brugere, der modtager et edtech-produkt eller en intervention (f.eks. behandlings-/interventionsgruppe), og sammenligner deres resultater med brugere, der ikke modtager det samme produkt eller den samme intervention (f.eks. sammenligningsgruppe) for at afgøre, om der var forskelle mellem grupperne. Dette er den mest stringente tilgang til at forstå effektiviteten af edtech-produkter, så vi anbefaler at bygge op til denne type RCE-rapport ved først at undersøge tidligere mål. Du kan køre denne type RCE-rapport, så ofte du har tilgængelige resultater.
Resultatet refererer til det interessante uddannelsesresultat, hvilket bør være et mål, som interventionen kan påvirke (f.eks. undersøgelse af læsefærdigheder i forbindelse med en læsefærdighedsintervention). Typisk bør resultatet være et kvantitativt mål med høj pålidelighed og validitet, såsom standardiserede testresultater. For RCE-rapporter om resultatanalyse inkluderer analysen kovariater, der tager højde for irrelevante datapunkter, der kan forklare dit resultat (f.eks. præstation før testen).
Mål for omkostningsanalyse
Mål 5: Forstå potentielle omkostningsbesparelser for mit produkt
Er du interesseret i at forstå potentielle omkostningsbesparelser for dit produkt? Når du har analyseret brugen af dit edtech-produkt over tid, kan du identificere muligheder for omkostningsbesparelser, når produkter har lav eller begrænset brug.
RCE-rapporter kan udføres for at lære mere om den samlede population på din skole eller i dit distrikt eller for forskellige delpopulationer (f.eks. klassetrin, køn). Populationen er den gruppe af deltagere (f.eks. elever), der er inkluderet i dine analyser. Den pågældende population kan være meget bred, eller den kan være specifik for en bestemt undergruppe af deltagere, som kan omfatte elever inden for en given skole eller klassetrin, elever med forskellige præstationsniveauer eller elever, der identificerer sig som et givet køn, etnicitet eller med særlige behov. For RCE-rapporter kan du muligvis oprette elevgrupper baseret på din produktimplementering og konteksten til brug i din organisation. Din RCE-manager kan hjælpe dig med at bestemme, hvilke grupper der kan være.