bitjungle

Tipsserie om digitale tester — en oversikt

bitjungle — Wed, 16 Nov 2011 08:45:16 +0000

Svend Andreas Horgen har laget en fantastisk fin tipsserie om digitale tester, men det har manglet en god indeks over artiklene. Derfor har jeg tatt på meg jobben å lage en oversikt.

#	Tittel	Ingress
1	Digitale tester og LMS	Det er mange måter å bruke digitale tester på pedagogisk. I dag starter jeg opp en serie av pedagogiske tips knyttet til digitale tester.
2	Distraktørtipset	Det er vanskelig å lage spørsmål av høy nok kvalitet, særlig i forbindelse med summativ bruk. Et veldig nyttig tips som er fullt mulig å gjennomføre i praksis i for eksempel it´s learning, Moodle eller Fronter, er det såkalte “distraktørtipset”. Det gjennomgås og eksemplifiseres her.
3	Bruk av stimuli	Digitale testverktøy åpner for ulike spørsmålstyper, men det er fortsatt opp til deg som lærer å stille spørsmålene slik at de blir gode. En teknikk for å stille vanskelige spørsmål som tester utover pugg/faktakunnskap, baserer seg på bruk av eksterne stimuli. Stimuli kan være tekst, et bilde, en lydsnutt, en videosnutt eller kanskje en webside.
4	Pre-test	En pre-test er en test som skjer i forkant av en læringsøkt. Spørsmålene kan oppsummere noe fra forrige gang eller være vanskelige slik at elevene/studentene sitter igjen med noen ubesvarte spørsmål før en læringsøkt. Slik kan en pre-test brukes for å skape læringsmodus og forsterke læringen under hovedaktiviteten.
5	Post-test	Det er en velkjent teknikk fra mange lærebøker å ha kontrollspørsmål etter hvert kapittel. Hvorfor det? Først og fremst fordi oppsummerende spørsmål er med på å sette fokus på hva som er viktig i stoffet, og samtidig stimulere til aktiv lesing. I tillegg må en kanskje slå opp bakover i stoffet, og en ser da nye sammenhenger og får delvis repetert stoffet i søken etter svar.
6.1	Fordeler (ved formativt bruk)	Det at et testverktøy er digitalt og webbasert av natur, innebærer en rekke muligheter for å støtte opp under læringsprosessen. Her er noen fordeler med formativt bruk av digitale tester:
6.2	Fordeler (ved summativt bruk)	Summativ vurdering er vurdering av læring. Summativ bruk av digitale tester innebærer å vurdere kunnskap på et visst tidspunkt, og sette en karakter. En slik vurderingsform er effektiv, og kan frigjøre mer tid til for eksempel veiledning. For læreren gir summativ bruk av digitale tester flere mulige fordeler. Her listes noen opp:
7	Utfordringer	Tradisjonelt sett har flervalgstester (tester med spørsmål av type multiple choice/flervalg) blitt brukt summativt – typisk til eksamen. Ved å sammenlikne kryss fra svararkene med kryss i en fasit, vil rettingsarbeidet kunne effektiviseres noe, og vurderingen bli mer objektiv. Det fins også eksempler på systemer som kan tolke svarark optisk og slik automatisere retteprosessen.
8	Hvem lærer?	Enhver som har prøvd å lage en digital test vet at det er vanskelig. Det er krevende å lage gode spørsmål. Det fordrer en viss oversikt over fagfeltet, og en må vri hjernen litt for å klare å formulere gode spørsmål og ikke minst klare å lage gode distraktører (gale alternativer).
9	Spørsmålstyper del 1	Med spørsmålstypene i digitale testverktøy har en som lærer litt større rom for å lage varierte tester. Det er spennende og engasjerende å prøve ut nye spørsmålstyper, og det vil skape nye spørsmålsformuleringer og kanskje nye måter å vri lærestoffet på. Dette er nr 1 av 3 deler om spørsmålstyper.
10	Spørsmålstyper del 2	Det er på tide å se på mer avanserte spørsmålstyper og hvordan disse gir grunnlag for bedre og mer varierte tester. Vi starter med å se på to former for åpne spørsmål.
11	Spørsmålstyper del 3	Alle testverktøy har ulike spørsmålstyper. Det er totalt 10 spørsmålstyper i it´s learning (som tilfeldigvis brukes som eksempel i denne tipsserien) men andre testverktøy har også ulike spørsmålstyper som er mer eller mindre like.
12	Lærestoff som test	Denne gangen er det klart for et pedagogisk tips som går ut på hvordan en kan presentere lærestoff i form av en test. Utgangspunktet for de følgende eksemplene er en mengde tekst, for eksempel en halv A4-side med faktaopplysninger om temaet ”norske konger” (temaet kunne vært hva som helst). La oss anta at mange vil synes dette er et kjedelig tema. Er det mulig å tenke anderledes, og presentere deler av lærestoffet i form av en test? Kan lærestoffet bli morsommere, og kan det skape variasjon og engasjement?
13	Skreddersøm, kompetansekartlegging og differensiering	Tester kan brukes formativt for å støtte opp under læring. De kan også brukes summativt for å bekrefte et nivå. Når et visst antall elever/studenter har tatt en test, så kan det være verdifullt å analysere resultatene for å se etter trender. Er det noen spørsmål som ingen fikk til? Er det noen tema som synes å være vanskelige? I bunn og grunn vil resultatet si noe om sterke og svake faglige sider. En analyse av resultater åpner for en del spennende muligheter av diagnostisk art.
14	Test før og etter	Denne gangen kommer et veldig håndfast tips som du garantert kan prøve ut i egen undervisning, og det er ikke tidkrevende å lage. Eksempelet stammer fra programmeringsfaget ”Webprogrammering i PHP” for fjernstudenter ved HiST, men kan også brukes i klasserom (noe som forklares i siste avsnitt).
15	Viktig testoppsett	Dette innlegget tar opp noe særdeles viktig som ofte gis for liten omtanke: Testoppsettet i testverktøyet. Det er en direkte sammenheng mellom opplevd kvalitet og testens egenskaper, så det er veldig viktig å ta stilling til avanserte innstillinger.
16	Ressurs: Mange spørsmål	Dette innlegget handler om hvordan du kan lage mer varierte tester, forvalte mange spørsmål innenfor en test og på tvers av mange tester, og gjenbruke på avanserte måter. Etter å ha lest innlegget vil du trolig være enig i at det å legge flid i å lage gode spørsmål og jobbe strukturert, kan være en god og langsiktig investering.
17	it´s a test	Denne gang må du i kreativmodus og gjerne bidra til å tenke høyt :-)
18	Metatester	En metatest er vel strengt tatt en test om en test, men hvis vi trekker begrepet litt videre, kan vi si at en metatest er en test om noe som i utgangspunktet ikke er assosiert med læring/utdanning.
19	Grupper…	Samarbeid er bra. Går det an å tenke samarbeid i forbindelse med digitale tester? Tenk over det. Her er noen idéer:
20	Kreative varianter	I dette siste innlegget skal vi tenke ut noen kreative varianter. Disse har kommet som ideer gjennom samtaler med folk opp gjennom årene og egne tanker.

Oversikten ble første gang publisert den 21. oktober 2010.

Introduksjon til Avogadro

bitjungle — Mon, 07 Nov 2011 20:15:33 +0000

I kjemiundervisninga er det veldig nyttig å bruke kule-pinnemodeller for å illustrere konseptet “molekyl”. Ofte brukes fysiske kule-pinnemodeller, gjerne laget i plast, men jeg synes de er litt begrensende. De er veldig rigide i utforminga, sånn at det for eksempel er lite rom for refleksjon rundt molekylgeometri. Dessuten er det veldig begrenset hva man kan bygge av molekyler med de byggesettene som er tilgjengelig. Derfor liker jeg heller å bruke datamaskiner og et molekyltegneprogram i undervisninga.

Jeg har laget to veldig korte “komme i gang”-introduksjon til 3D-molekyltegneprogrammet Avogadro, et åpent kildekode-program som er tilgjengelig for både Windows, OSX og Linux. Den første videoen er ment for lærere, den andre er for elever.

Disse videoene ble først publisert på Google+:
https://plus.google.com/u/0/106541100768430625769/posts/325nWScrcBX
https://plus.google.com/u/0/106541100768430625769/posts/hEzJeEiaNKx

Bruk av maler i Evernote for Mac

bitjungle — Sat, 05 Nov 2011 14:29:36 +0000

En ting jeg har savna i Evernote er en mulighet for å bruke maler. Men det er så klart noen flinke folk på nettet som har løst dette. Jeg har laget en videoguide til hvordan man får maler i Evernote for Mac, og har et praktisk eksempel på bruk.

Løsninga bruker Automator, skriptet kan lastes ned her: http://goo.gl/TV7YX. Hvordan du kommer i gang, vises i videoen nedenfor.

Jeg bruker Evernote til mange ting, blant annet til undervisningsplanlegging. Jeg har en plan for hver uke gjennom hele skoleåret. Ett av faga jeg underviser i, er kjemiprosessfag på Vg1 TIP. Her underviser jeg fire klasser, og kjører to og to parallelt. Slik ser malen min for undervisningsplanlegginga i dette faget ut: Undervisningsplan og logg — Uke ##

Denne artikkelen ble opprinnelig publisert i to innlegg på Google+:

Oppgavesett til praktisk-muntlig eksamen i naturfag

bitjungle — Wed, 17 Aug 2011 11:28:02 +0000

Jeg har undervist i naturfag vg1 yrkesfag (NAT1001) på sommerskolen ved Hjalmar Johansen vgs i år også, og sommerskolen ble avsluttet med en praktisk-muntlig eksamen. Her er eksamensoppgavene jeg brukte.

Det ble litt resirkulering av oppgavene jeg laget i fjor, men også noen nye oppgaver. Årets oppgaver kan du laste ned her.

Google+

bitjungle — Wed, 06 Jul 2011 12:12:06 +0000

Jeg har fått tidlig tilgang til Google+, og slik det ser ut nå er dette en plattform jeg kommer til å bruke en del. En spennende tjeneste som antakelig kan erstatte både Facebook og Twitter for min del. Kan hende den erstatter denne bloggen også… Jeg poster det meste offentlig, så du kan følge meg her (http://gplus.to/bitjungle) selv om du ennå ikke har din egen Google+-konto.

Elevene evaluerer 2010–2011

bitjungle — Wed, 01 Jun 2011 10:37:12 +0000

På samme måte som i fjor, har jeg også i år latt elevene evaluere meg og undervisningsopplegget mitt. Resultatene har nok ikke så mye verdi utenfor klasserommet mitt, men jeg publiserer dem allikevel. Kan jo være at andre finner det inspirerende og nyttig?

Bakgrunn

Jeg har et undervisningsopplegg i programfag på Vg1 teknikk og industriell produksjon (TIP) hvor jeg gjør svært mye bruk av digitale læremidler, blant annet gjennom bok på nett, interaktiv tavle og mye bruk av simulatorer. Nytt av året var bruk av uketester i form av digitale flervalgsprøver.

Elevenes vurdering samlet jeg inn gjennom en spørreundersøkelse laget med Google Docs. Undersøkelsen kan på ingen måte betraktes som noe grundig vitenskapelig arbeid. Jeg har selv laget spørsmålene, og kan sikkert ha kommet til skade for å stille spørsmålene på en sånn måte at jeg har fått de svarene jeg ønsket. Dog må det tilføyes at dette i så fall ikke er bevisst fra min side, men jeg erkjenner at faren er der. Jeg har heller ikke noe sammenlikningsgrunnlag for datasettet, og kan ikke si noe om signifikansen. Du er herved advart!

Undersøkelsen ble besvart anonymt. Jeg tror at elevene har gitt meg ærlige svar, jeg har i alle fall ikke noen grunn til å tro noe annet. Det var 79 % av Vg1 TIP-elevene ved Hjalmar Johansen vgs som svarte, og jeg har ikke gjort noen form for bearbeiding av datasettet.

Hvordan opplever elevene faget?

I spørreskjemaet startet jeg med å be elevene om å krysse av for ord de synes passet i forhold til sine tanker om faget i starten og i slutten av skoleåret. Her ble ordet “morsomt” og “lett” mye brukt av elevene om faget i slutten av skoleåret, mens ord som “uinteressant”, “vanskelig” og “vet ikke” ble brukt i starten. Dette samsvarer godt med fjorårets resultater.

På tross av dette har allikevel søkertallet til Vg2 kjemiprosessfaget gått betydelig ned sammenliknet med i fjor (da hadde mer enn 30% av elevene kjemiprosessfag som førstevalg).

Om interaktiv tavle

Jeg er inne i mitt andre år med bruk av interaktiv tavle, og er veldig begeistret for dette verktøyet. Men hva synes elevene? Jeg la frem en rekke påstander, og elevene skulle gradere hvor enige eller uenige de var på en skala fra 1 til 5. Skal vi tro elevene så blir de både mer motivert og lærer bedre når det brukes en interaktiv tavle i undervisninga.

Siden jeg selv er så begeistret for den interaktive tavla, er jeg oppmerksom på at jeg kan risikere å bruke den for mye. Ut fra elevenes svar kan det se ut til at de ikke synes jeg bruker tavla for mye, men jeg er fortsatt ikke flink nok til å la elevene slippe til på tavla.

Å bruke datamaskiner i undervisninga

Elevene bruker mye datamaskin i undervisninga, både til å lese i læreboka, kjøre simulatorer, til tester og prøver, og til å gjøre andre elevarbeider (loggbøker m.m.). Én av årsakene til at datamaskiner brukes så mye, er at jeg rett og slett ikke har tilgang til noe fysisk utstyr. Jeg ville derfor gjerne vite litt om hvordan elevene opplevde den utstrakte datamaskinbruken, og det ser ut til at de synes dette er positivt. Men det er en del elever som kunne ønske seg noe tilgang til fysisk utstyr, og det er jeg enig med dem i.

Hyppig testing

Nytt av året var bruk av uketester i form av digitale flervalgsprøver. Testene ble automatisk rettet, slik at de fikk umiddelbar tilbakemelding i faget hver eneste uke. Tilbakemeldinga ble gitt uten karakter, og resultatene ble ikke brukt til vurdering i faget.

For å evaluere denne ordninga ga jeg elevene en rekke påstander som de måtte ta stilling til. Det blir litt for mange grafer å vise her, derfor viser jeg heller svarene i stikkordsform. Tilbakemeldingene var veldig entydige:

Opplegget har gjort at jeg har lært fagstoffet bedre
Testene gjorde at jeg fulgte mer med i timene
Testene hjalp meg til å lære mer
Jeg liker digitale tester bedre enn papirprøver

Facebook i undervisninga

Jeg er, av flere årsaker, skeptisk til å bruke Facebook faglig. Allikevel valgte jeg å gjøre et lite eksperiment over et par uker dette skoleåret. Jeg er usikker på hvordan jeg skal tolke svarene her, men det ser i alle fall ut til at mange av elevene er positive til å bruke Facebook i undervisninga. På tross av dette kommer jeg nok til å være forholdsvis måteholden med hensyn på å bruke Facebook faglig i neste skoleår. Mulig at jeg etter hvert skriver litt om hvorfor, men stikkord er blant annet reklame og andre forstyrrelser.

Elevenes innsats

Jeg spurte også om hvordan elevene vurderte sin egen innsats, både i timene og mellom timene. Svarene her var omtrent hva jeg hadde forventet: fra nøytralt til positivt om arbeidet i timene og fra nøytralt til negativt om arbeidet mellom timene.

Elevene og meg

Til slutt i undersøkelsen spurte jeg noen spørsmål som gikk på hvordan elevene synes jeg fungerte som lærer. Resultatene her er nok mest interessante for meg, og bare i mindre grad for tredjeparter. Allikevel tar jeg det med, da det muligens kan være interessant for andre lærere å se hvordan jeg stilte spørsmålene.

Til slutt fikk elevene anledning til å skrive tilbakemeldinger til meg. Jeg lar disse forbli mellom meg og elevene, men de var veldig positive og gjenspeilet i stor grad svarene fra resten av undersøkelsen.

Notater fra NKUL 2011

bitjungle — Mon, 16 May 2011 09:08:20 +0000

Jeg deltok (for første gang) på konferansen NKUL i år, og her er mine notater fra konferansen.

Tankekart fra “Dei gode døma” 2011

bitjungle — Thu, 24 Mar 2011 09:03:25 +0000

Denne uka er jeg på konferansen “Dei gode døma” i Bergen, og jeg bruker tankekart for å lage notater fra foredragene. Her kan du laste dem ned.

Kom i gang med HTML5

bitjungle — Mon, 13 Dec 2010 11:00:54 +0000

Jeg har begynt å pusle litt med utvikling av webapps i HTML5, og har laget meg et enkelt rammeverk. Her kan du teste og laste ned.

Om alt går som planlagt kommer jeg til å oppdatere denne malen etter hvert som jeg lærer meg mer HTML5.

Test min HTML5-mal
Last ned min HTML5-mal (oppdatert 2010-12-13)

Gode flervalgsoppgaver — et eksempel

bitjungle — Fri, 03 Dec 2010 10:55:24 +0000

Jeg gjør mye bruk av digitale tester i undervisninga mi, men å lage gode flervalgsoppgaver som tester forståelse er ikke enkelt. Det er også ganske tidkrevende å lage gode flervalgsoppgaver, men til gjengjeld er det ikke noe rettearbeid i ettertid. Jeg har altså flytta arbeidsinnsatsen min fra rettearbeidet til å designe bedre oppgaver. Her er et eksempel på en oppgave hvor jeg føler at jeg har fått det til.

Eksemplet er hentet fra kjemiprosessfaget på vg1-nivå, og temaet for oppgava er en del sentrale begreper fra reguleringsteknikken (skal-verdi, er-verdi, avvik og dødtid). Oppgava tester om elevene har forstått disse begrepene ved å bruke en praktisk og hverdagslig hendelse (moped og elg). Vanligvis brukes disse fagbegrepene kun i prosessindustrien, men det er en verden elevene kjenner lite til. For å teste forståelsen av begrepene bruker jeg derfor heller en ramme som er kjent.

Jeg forsøker alltid å bruke bilder i oppgavene, det hjelper elevene i å forstå teksten. I dette tilfellet bruker jeg et bilde av en moped, sånn at eleven raskt gjenkjenner seg i rammen jeg bruker rundt oppgaven. I tillegg har jeg lagt inn en fullt fungerende kalkulator (laget i Flash). Her kan elevene gjøre eventuelle beregninger, men i denne oppgava er kalkulatoren en ren distraktor. Det er ikke nødvendig å regne seg fram til et svar, de som prøver seg på det har ikke forstått begrepene.

Som en bonus tester jeg også at elevene forstår ulike enheter i denne oppgaven, om de mikser sammen sekunder og kilometer i timen har de definitivt ikke forstått de ulike begrepene.

Klikk på bildet nedenfor for å se oppgava i full størrelse. Dessverre kan jeg ikke dele oppgavedatabasen min på en enkel måte, fordi prøveverktøyet i Fronter ikke støtter eksport av bilder og andre elementer som er lagt inn i oppgava. Og med bare tekst er ikke oppgavene fullverdige!