Observerer vi det vi er ute etter å observere på en pålitelig måte?

Denne studien undersøker om observasjonsinstrumentet CLASS-S kan brukes i forbindelse med observasjoner i norske ungdomsskoler. Bakgrunnen er at det er behov for å teste om vi observerer samme begrep og fenomen i en norsk kontekst som man har gjort internasjonalt. Enkelt sagt må vi vite at vi observerer det vi er ute etter å observere på en pålitelig måte.

Publisert Sist oppdatert
CLASS-S er validert for bruk i Noreg. Foto: Læringsmiljøsenteret.

Publisert første gang 01.03.2018

Artikkelen «A preliminary validity of the Classroom Assessment Scoring System-Secondary» (CLASS-S) presenterer en studie som validerer observasjonsinstrumentet CLASS-S for bruk i Norge.

Fortsatt behov for målrettet opplæring innen klasseledelse

Det er stor enighet om at læreres kompetanse innen klasseledelse har stor betydning for elevenes faglige og sosiale læringsutbytte (Emmer & Sabornie, 2014; Evertson og Weinstein, 2006; Hattie, 2009). I Norge har en hatt en langsiktig nasjonal satsing over flere år på å utvikle læreres kompetanse innen klasseledelse. Forskning i CIESL-prosjektet (Ertesvåg & Westergård, 2017) viser til at lærere som gruppe i hovedsak er gode klasseledere. En finner likevel stor variasjon i praksis som utøves mellom klasserom, noe som indikerer at det fremdeles er behov for en målrettet opplæring innen klasseledelse. Det er også noen områder som det tyder på kan være nyttig å vektlegge sterkere for alle, for eksempel i hvilken grad lærere tar hensyn til elevenes livsverden, og flere av områdene som retter seg mot å støtte elevene faglig. 

Standardiserte observasjonsverktøy kan være nyttige

Et sentralt redskap i dette arbeidet har vist seg å være bruk av standardiserte observasjonsverktøy (f.eks. CLASS, PLATO og ISTOF) for å vurdere læreres klasseromspraksis/-ledelse for deretter sette inn tiltak der kompetansebehovet synes å være til stede.

Med bakgrunn i det teoretiske rammeverket Teaching through Interactions (TTI) har Hamre og Pianta (Hamre og Pianta, 2007) utviklet det standardisert observasjonsverktøyet «Classroom Assessment Scoring System» (CLASS) på flere alderstrinn med det formål å evaluere kvaliteten på klasseromsinteraksjonene mellom lærer og elever. CLASS er blant annet velegnet som utgangspunkt for veiledning av lærere i videreutvikling av relasjoner til elevene, faglig og sosialt.

CLASS

CLASS består av de tre domenene Emosjonell støtte, Klasseromsorganisering og Læringsstøtte. Under hvert domene er det beskrevet tre til fem spesifikke dimensjoner som beskriver hvilken læreratferd som er relatert til elevenes læring. Dimensjonene skåres fra 1-7 som indikerer lav (1-2), middels (3-5) og høy (6-7) undervisningskvalitet. Eksempler på slike dimensjoner og indikatorer på læreratferd kan en lese i en tidligere fagartikkel i CIESL. Studien har validert CLASS for ungdomstrinnet (CLASS-S) i sin vurdering av læreres klasseromspraksis. Det er denne versjonen av CLASS som er benyttet i CIESL.

Standardiserte klasseromsobservasjons systemer gjør det mulig for forskere å observere store utvalg av lærere og klasserom. Observasjoner kan imidlertid være følsomme for subjektive vurderinger som kan påvirke observasjonenes reliabilitet (pålitelighet). Det er derfor viktig å sikre at ulike observatører skårer de ulike dimensjonene tilstrekkelig likt. Dette kalles inter-rater reliabilitet.  I studien til Westergård et al. (2018) har et av forskningsspørsmålene derfor vært 

  • å undersøke i hvilken grad det er mulig å trene observatører til å skåre interaksjonene mellom lærere og elever reliabelt.

Fra utviklernes side er det forventet at CLASS skal identifisere visse kvalitetsindikatorer ved klasseromsinteraksjoner uavhengig av hvilken kontekst de gjennomføres i. Dette kan vi ikke uten videre gå ut ifra stemmer. Majoriteten av forskningen på CLASS er utført innen ulike kontekster i USA (Hamre et al. 2014), men vi finner også studier som har validert og brukt CLASS i andre Europeiske land (Malmberg et al. 2010; Virtanen et al. 2017;). Derimot var det ingen tidligere studier som har brukt CLASS-S i Norge. Det neste forskningsspørsmålet var derfor

  • å undersøke om faktorstrukturen til CLASS-S passer inn i en norsk kontekst

Her vil vi altså undersøke om det er begrepsmessig og statistisk støtte for å bruke CLASS-S i Norge på samme måte som i USA. Dette er en forutsetning for at observasjonene skal bli pålitelige og vi skal kunne sammenligne resultat fra Norge med resultat fra andre land.  Det er også en forutsetning for å kunne benytte CLASS-S på en pålitelig måte som del av lærerutdanning eller kompetanseutvikling for lærere.

Forskningsdesign

Utvalget bestod av videoobservasjoner av 54 lærere som ble videoobservert/filmet fire ganger i løpet av et skoleår. Åtte observatører skåret videoobservasjonene i henhold til CLASS-S manualen. Observatørene var på forhånd sertifisert i bruk av CLASS-S. Det ble også foretatt kalibreringsøvelser blant observatørene underveis for å sikre reliable skåringer. 20 prosent av observasjonene ble skåret av to uavhengige observatører og grad av enighet (inter-rater reliabilitet) mellom disse ble så beregnet. Det ble brukt samme prosedyre som utviklerne av CLASS til å analysere reliabiliteten (PWO).

Ved valideringen av CLASS-S ble faktorstrukturen undersøkt i tråd med tidligere tilnærminger til ulike CLASS versjoner (Bell, et al. 2012). På bakgrunn av disse analysene, kan en oppsummert si at det er mulig å trene observatører til å skåre interaksjoner mellom lærere og elever reliabelt. Vi ser også at denne faktoranalysene av CLASS-S denne studien i det store og hele støtter den tre-faktor strukturen som foreslåes av Pianta, Hamre og Mintz (2012) også i Norge, selv om vi anbefaler å foreta ytterligere validering av CLASS-S i et større utvalg før en endelig kan konkludere at CLASS- kan brukes på tvers av kulturer. Med dette forbeholdet er det støtte for at CLASS-S er et universelt observasjonsinstrument som kan brukes til å vurdere klasseromsinteraksjonene mellom lærere og elver i Norge. Dette innebærer også støtte for at CLASS-S kan brukes som et redskap i faglige kompetanseutviklingen av lærere i Norge.

Resultatene er utdypet  i  Westergård, E., Ertesvåg, S.E. & Rafaelsen, F. (2018) A Preliminary Validity of the Classroom Assessment Scoring System in Norwegian Lower-Secondary Schools. Scandinavian Journal of Educational Research, https://doi.org/10.1080/00313831.2017.1415964

Tekst: Førsteamanuensis Elsa Westergård

Referanser

Bell, C. A., Gitomer, D. H., McCaffrey, D. F., Hamre, B. K., Pianta, R. C., & Qi, Y. (2012). An argument approach to observation protocol validity. Educational Assessment, 17(2-3), 62–87.

Emmer, E.T. & Sabornie, E.J. (2014). Handbook of classroom management. Taylor & Francis, LTD.

Ertesvåg, S. & Westergård, E. (2017). Observert klasseromsinteraksjon som grunnlag for profesjonell utvikling. Psykologi i kommunen, (6), s. 49-69. http://www.fpkf.no/wp-content/uploads/2017/12/Ertesvag-Westergard-6-2017.pdf

Evertson, C.M. & C.S. Weinstein (2006): Handbook of Classroom Management: Research, Practice and Contemporary Issues. Mahwah, N.J.: Lawrence Erlbaum.

Hattie, J. (2009). Visible learning: A synthesis of over 800 Meta-Analysis relating to achievement. New York, Routledge.

Hamre, B. K., Hatfield, B., Pianta, R., & Jamil, F. (2014). Evidence for general and domain-specific elements of teacher child interactions: Associations with preschool children’s development. Child Development, 85(3), 1257–1274.

Hamre, B. & Pianta, R. (2007). Learning opportunities in preschool and early elementary classrooms. In R.C. Pianta, M.J. Cox, & K.L. Snow (Eds.), School readiness and the transition to school (pp.49-84). Baltimore, MD: Brookes.

Malmberg, L.-E., Hagger, H., & Burn, K. (2010). Observed classroom quality during teacher education and Two years of professional practice. Journal of Educational Psychology, 102(4), 916–932.

Pianta, R. C., Hamre, B. K., & Mintz, S. (2012). Secondary CLASS: Classroom assessment scoring system. Charlottesville, Virginia: University of Virginia.

Virtanen, T., Pakarinen, E., Lerkkanen, M.-K., Poikkous, A.M., Siekkienen, M., & Nurmi, J.E. (2017). A validation study of classroom assessment scoring system-secondary in the Finnish school context. Journal of Early Adolescence. doi: 10.1177/0272431617699944

Westergård, E., Ertesvåg, S.E. & Rafaelsen, F. (2018) A Preliminary Validity of the Classroom Assessment Scoring System in Norwegian Lower-Secondary Schools. Scandinavian Journal of Educational Research, https://doi.org/10.1080/00313831.2017.1415964

Les mer om klasseledelse

Lærarane manglar autoritet. Kan coaching være løysinga?

Trass i initiativ frå politikarar gjennom fire ti-år i form av tallause nasjonale, regionale og lokale satsingar for å s...

Dette kan styrke relasjonane mellom elevane

I klasserommet er det ingen motsetnad mellom fagleg og sosial læring, syner ny forsking.

Elever med konsentrasjonsvansker opplever mindre læringsstøtte

Ny forskning viser at elever som rapporterte om manglende konsentrasjon også opplevde liten grad av læringsstøtte fra læ...

Publikasjonar frå INTERACT-prosjektet

Artiklar frå projektet. Bruk DOI-lenka for å lese abstraktet.

– Får være med læreren «inn» i klasserommet

I forskningsprosjektet INTERACT får lærere veiledning av egne spesialtrente «coacher». – Jeg er heldig som får veilede...

CLASS-S dimensjonsguide

Norsk oversettelse av Dimensjonsguiden som er tilpasset Classroom Assessment Scoring System (CLASS)-secondary. Bestillin...

– Godt å vere i gong med INTERACT-prosjektet

INTERACT-prosjektet er i gong for alvor, og no er rekrutteringsprosessen av lærarar over. Til saman skal lærarar frå 12 ...

Avhandling: Instructional support in Norwegian classrooms

Maren Stahl Lerang har i sin avhandling funnet ut at kvaliteten på undervisningsstøtte varierer mellom klasserom. Bestil...

INTERACT – kvalitet i klasseromsinteraksjoner

Målet med INTERACT-prosjektet er å undersøke hvordan digital videobasert dialog kan støtte lærere i arbeidet med å styrk...

Bok: Problemløsningsmodeller

Boka "Problemløsningsmodeller" handler om kollektive atferdsvansker, dvs. der grupper eller klasser har utviklet en nega...

– Vil bruke observasjonsverktøyet CLASS for å heve kvaliteten i skolen

– Dette er et veldig godt verktøy som fokuserer på de sentrale områdene for hva som bør være på plass i et klasserom, si...

Gode erfaringer med å fjerne karakterer i orden og atferd

Skoler som har vært med i forsøket med å fjerne karakterer i orden og atferd opplever at relasjonene mellom lærere og el...

Med teksten i fokus

Førsteamanuensis Hanne Egenæs Staurseth arbeider i desentralisert ordning i Utdanningsregion Midt-Rogaland med å legge t...

Slik kan lærere bli gode ledere for klassen

Lærerens lederskap er den viktigste faktoren for hvordan klassemiljøet blir.

Elever blir mer engasjerte av lærere som bryr seg

Gløden for skolen synker med alderen om ikke læreren gir følelsesmessig støtte til den enkelte elev, viser en ny studie ...

Læreren er viktig for hvilke mål elevene setter seg på skolen

Hvordan læreren ser på læring er viktig for elevenes målorientering på skolen. Det viser forskning gjort ved Læringsmilj...

Lærers klasseledelse er avgjørende for å forebygge skolefravær

Lærerens klasseledelse kan ha en indirekte betydning for å forebygge mobbing og sosial ekskludering blant jevnaldrende. ...

Lærarstøtta elevstyrt læring - autonomistøtte i klasserommet

Autonomi er eit av områda som er avgjerande for å forstå elevane sin motivasjon og engasjement i læringsaktivitetar. Aut...

Verdsetting av elevane si livsverd

Resultata frå CIESL-studien tyder på at lærarar generelt er dyktige til å skape positivt læringsklima og er sensitive fo...

En stresset (kunnskaps)nasjon

Gagner det alle elever at vi har en prestasjons- og konkurranseorientert skole? Hvordan går det for de elevene som opple...