Fire problemer Operasjonaliseringsproblemet (måling/begrepsvaliditet) Tilfeldighetsproblemet (statistisk validitet) Årsaksproblemet (indre validitet) Generaliseringsproblemet (ytre validitet)

Et viktig skille Validitet av operasjonaliseringer (ofte målinger) Validitet av slutninger fra resultater

Tilfeldighetsproblemet Kan resultatene våre ha framkommet ved tilfeldigheter uavhengig av hva vi har foretatt oss Statistisk signifikans NB! Skill mellom målefeil og samplingfeil

To mulige problemer Retningsproblemet (Menn som bor alene drikker mer enn samboende/gifte menn) Tredjevariabelproblemet (Unge er mer utsatt for trafikkulykker enn eldre) Dvs korrelasjon mellom alder og antall trafikkulykker Begge kan være tilstede samtidig

Eksempel Du ønsker å påvise at en bestemt medisin har en spesifikk effekt på angst Du har sett (gjerne “tilfeldig”) at noen personer som har fått et bestemt stoff har blitt mindre engstelig. Spørsmål 1: Er angst operasjonalisert på en rimelig måte?.

Mer om angsteksempelet Spørsmål 2: Er forandringen slik at den ikke kan betraktes som tilfeldig? (Statistisk validitet). Spørsmål 3: Kan jeg slutte at stoffet er årsak til forandringen? (indre validitet). Spørsmål 4: vil jeg også finne effekten på andre engstelige (ytre validitet eller generalisering)

X er årsak til y X foran y i tid Korrelasjon mellom x og y ”Tredjevariabler” utelukket

Årsak og effekt Nødvendige betingelser og tilstrekkelige betingelser Nødvendige: Må være tilstede for at “noe” skal skje Tilstrekkelige: Produserer en effekt, men er ikke nødvendige. Nødvendige og tilstrekkelige: “hvis og bare hvis”

Eksperiment og demonstrasjon Demonstrasjon inneholder ofte en manipulasjon Mangler kontroll

Alternative forklaringer Modning Historie Regresjon Instrumentering Forventningseffekter (placebo)

Teminologi Uavhengig variabel (den som forskeren manipulerer og dermed har kontroll over) Avhengig variabel (den som forhåpentligvis forandrer seg som funksjon av den uavhengige variabel)

To hovedpunkter Kontroll av tredjevariabler (utelukke alternative forklaringer) Variasjon (manipulasjon av uavhengig variabel)

Laboratorium og felt- eksperimenter Eksperimenter er ikke begrenset til laboratoriet De som foretas utenfor laboratorier heter felteksperimenter Forskeren benytter seg vanligvis av reformer eller forsøk initiert av andre (for eksempel politikere)

To hovedformer for kontroll Isolasjon Kontrollgruppe

Isolasjon Utelukke alle mulige relevante påvirkninger du ikke er interessert i (for øyeblikket) Gjerne i laboratoriet Forutsetter kunnskap

Mer terminolologi Kontrollgruppe Eksperimentgruppe Eksperimentgruppa ”utsettes” for en manipulasjon, kontrollgruppa ikke Krav: Kontrollgruppa og eksperimentgruppa mest mulig like før intervensjonen

To måter å skape likhet Randomisering Matching

Randomisering Tilfeldig hvem som havner i forskjellige grupper NB! Skill mellom tilfeldig plassering og random sampling. Kombinasjon av isolasjon og tilfeldig plassering

Matching Forsøker aktivt å gjøre gruppene like på variabler man tror virker inn, men ikke er interessert i Kombinasjon av matching og randomisering

To grunnformer av eksperimentet Pretest-posttest oppsett (within person designs) Bare posttest (Between persons designs)

Mulige feilkilder Mellom person-sammenlikninger Seleksjonsbias Selektivt frafall Diffusjon Kompensatoriske mekanismer Demoralisering

Mulige feilkilder Innen person-sammenlikninger Modning Gjentatte testinger Historie statistisk regresjon

Flerfaktorielle oppsett I slike oppsett er det flere uavhengige variabler, men som regel bare én avhengig variabel Gir mulighet til å finne ut om virkningen av den ene uavhengige variabelen avhenger av den andre uavhengige variabelen