Kommenttipuheenvuoro: Miten prosessievaluaatio-

ohjeistusta voidaan hyödyntää Suomessa?

Nelli Hankonen

Akatemiatutkija

Tampereen yliopisto

SLY/Käyttäytymislääketieteen jaoksen kevätseminaari

Vaikuttavuutta hyvinvoinnin edistämisen interventioihin: Käyttäytymis- ja yhteiskuntatieteiden anti

2.5.2017

Huomioita

• Mitä terveyden edistämisen interventioissa todella tapahtuu?

• Suomessa tehdään hyvää ja tarkoituksenmukaista prosessiarviointia monista interventioista• Esim. KiVa-koulu: implementoinnin aste -> vaikuttavuus

• Kokeilukulttuuri: Arvioivasta otteesta hyötyä eri vaiheiden kokeiluihin laadukkaiden & käyttökelpoisten ratkaisujen kehittäminen• Kaikkea ei tarvitse tutkimuksellisesti raportoida, mutta jo prosessien mallintaminen & PE:n

käsitteiden hyödyntäminen ajattelun sparraajana voi olla tuottaa oivalluksia ja laadunparannusta

• Vaikuttavuuden arviointia ei tule unohtaa

N. Hankonen

Prosessiarviointi

ToimeenpanoMiten toimitetaan (koulutus, resurssit, jne.)Mitä toimitetaan: Uskollisuus, annos, muokkaukset, saavuttavuus

Vaikutusmekanismit* Osallistujien reaktiot interventioon ja vuorovaikutus sen kanssa (käyttö)* Mediaattorit* Ei-odotetut polut ja seuraukset

Tulokset

(outcomes)

Intervention ja sen

kausaali-oletusten

kuvaus

Konteksti* Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii* Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin* Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä

UK MRC GuidanceMoore et al 2015

N. Hankonen

INTERVENTIOTUTKIMUKSEN KULKU (UK Medical Research Council, 2000)

Lisääntyvän näytön jatkumo

Esitutkimus Vaihe I Vaihe II Vaihe III Vaihe IV

Campbell, M et al. (2000). MRC framework for designing and evaluating complex interventions. BMJ 321: 694-6.Suomeksi: Hankonen (2012). Sosiaalipsykologia vaikuttamisen tieteenä, vaikuttajana yhteiskunnassa. Sosiaalipsykologiansukupolvet, Vastapaino; ja Rautava et al. Vaikuttavuuden mittaaminen ja palvelujärjestelmätutkimus (TuY)

N. Hankonen

Craig et al 2008

INTERVENTIOTUTKIMUKSEN KULKU (UK Medical Research Council, 2008)

N. Hankonen

PE:n funktiot eri arvioinnin vaiheissa (Moore et al., UK MRC Guidance, 2015)

Toteutuskelpoisuus ja pilotointi

Vaikuttavuuden arviointi .

Vaikuttavuusevaluaation jälkeinen

implementointi (toimeenpano)

• Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys

• Välittävien prosessien testaaminen

1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin.

• Intervention rutiininomaiseksi tekeminen / normalisointi uusiin konteksteihin

• Pitkäaikainen implementaatio / ylläpitoN. Hankonen

N. Hankonen

Mitä tiedetään kouluperustaisista liikuntainterventioista nuorilla?• Vain 10 aiempaa testattua interventiota

• Pitkäaikainen vaikuttavuus vähäistä

• Kenttäkokeiden metodologian laadussa parantamisen varaa

Hynynen, S-T.; van Stralen, M., Sniehotta, F., Araujo-Soares, V., Hardeman, W., Chinapaw, M., Vasankari, T. & Hankonen, N. (2016). A systematic review of school-based interventions targeting physical activity and sedentary behavior among olderadolescents. International Review of Sport and Exercise Psychology.

N. Hankonen

Hyväksyttävä,toteutuskelpoinen & käytännöllinen,

levitettävissä olevaohjelma

Hyvätkäytännötja uudet

ideat

Kohde-ryhmän

tutkiminen

Kirjallisuuskatsaukset, teoriaym-

märrys

-intervention tausta

N. Hankonen

1. RYHMÄOHJELMA OPISKELIJOILLE6 viikoittaista tapaamista

3. LIIKUNTA-TARJONTAMOTIVATION CAPABILITY

ISTUMISENVÄHENTÄMIS-OHJELMA OPETTAJILLE

2. AKTIIVISEMMAT OPPITUNNIT

Kotitreenivideot

OPPORTUNITY

Julistekampanja

Internet-resurssit

BEHAVIOUR

Koulun tilojen hyödyntäminen

Lähiympäristön mahdollisuudet

OHJELMAKOKONAISUUS

Motivaatio Kyvyt

Mahdollisuudet

Käyttäytyminen Hankonen, N., Hynynen, S. & Laine, H. (2014). Lisää liikuntaa opiskelevan nuoren arkeen – Miten rakentaa teoriaan ja tutkimusnäyttöön perustuva interventio? Liikunta & Tiede 51 (4), 51–57.

N. Hankonen

MATERIAALEJA, ESIM.

• Julisteita

• Open opas

• Opiskelijantyökirja

• Treenivideot:– SYKE-, VOIMA- ja VENY-treenit

Millaista prosessiarviointia Let’s Move It -hankkeessa tehdään?

N. Hankonen

Prosessiarvioinnin menetelmiä Let’s Move It

N. Hankonen Moore et al., 2014

Mihin Let’s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa?

Toteutuskelpoisuus ja pilotointi

Vaikuttavuuden arviointi

Vaikuttavuusevaluaation jälkeinen

implementointi (toimeenpano)

• Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys

• Välittävien prosessien testaaminen

1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin.

• Intervention rutiininomaiseksi tekeminen / normalisointi uusiin konteksteihin

• Pitkäaikainen implementaatio / ylläpito

2014

2015-17

2017-18

N. HankonenMoore et al., 2014

Mihin Let’s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa?

Toteutuskelpoisuus ja pilotointi

Vaikuttavuuden arviointi

Vaikuttavuusevaluaation jälkeinen

implementointi (toimeenpano)

• Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys

• Välittävien prosessien testaaminen

N. Hankonen Moore et al., 2014

N. Hankonen

OPISKELIJOIDEN KOKEMUKSIA

PILOTTITUTKIMUKSESTA

”Tää ohjelma oli virkistävä, koska useimmat kurssit on aika semmosii luennollisii, niin sit on kiva

päästä tekee jotain ja oppiikki asiasta. Ei tarttenu kokoajan vaan istuu ja kuunnella.” Osallistuja,

17v

”Tosi mukavaa, sai tehä ja kokeilla ja just tota suunnitelman tekoo, koska mulla toi urheilu on

jäänyt niin on kiva yrittää päästä siihen mukaan taas ja suunnitella vähän pienemmis määrin

sellasii realistisii suunnitelmii, että siihen voi vaikuttaa.”

Osallistuja, 17v.

’

N. Hankonen

Results: AcceptabilityStudent feedback*

*Anonyymit lomakkeet N. Hankonen

Mitä muutoskeinoja nuoret ottivat käyttöön?

N. Hankonen Hankonen et al., 2017

Toteutuskelpoisuus ja pilotointi

Vaikuttavuuden arviointi

Vaikuttavuusevaluaation jälkeinen

implementointi (toimeenpano)

1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin.

Mihin Let’s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa?

N. Hankonen

N. Hankonen

Prosessiarviointikysymyksiä LMI:ssa

ToimeenpanoMiten jakelu aikaansaadaan (koulutus, resurssit, jne.)Mitä jaellaan: Uskollisuus, annos, muokkaukset, saavuttavuus

Vaikutusmekanismit* Osallistujien reaktiot interventioon ja vuorovaikutus sen kanssa (käyttö)* Mediaattorit* Ei-odotetut polut ja seuraukset

Tulokset

(outcomes)

Intervention ja sen

kausaali-oletusten

kuvaus

Konteksti* Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii* Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin* Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä

Mitä muuta tutkimuskouluissa tapahtuisamaan aikaan – kampanjat,

aamupalatarjoilut, uudistukset, jne?

Erilaiset organisaatiotekijät: koulun johdon suhtautuminen

interventioon?

Mitä nuoret tulkitsivat intervention keskeiseksi

sanomaksi? Miten puhuivat liikunnasta sen jälkeen?

Muuttuiko suhtautuminen ja motivaatio pysyvästi?

Montako osallistujaa oli interventio-tapaamisissa? Mitkä osat vedettiin /jäi

vetämättä?Pysyivätkö julisteet seinillä?

Käytettiinkö videoita ja nettisivuja?

Mikä esti / helpotti opettajien istumisen

vähentämistä?

Mitä muutoskeinoja osallistujat hyödynsivät –esim. sosiaalinen tuki vai

suunnittelu, jne?

Minkä psykososiaalistenmekanismien kautta interventio

lisää liikuntaa – ja missä osaryhmissä (esim. vähän

liikkuvat, pojat/tytöt)?

Vaikuttaako tottumusteorianmukainen toiminta opejen

tottumusten muodostumiseen?

N. Hankonen

Nuorten…

Lisääntynyt liikunta

Vähentynyt istuminen

-ohjelma

Opettajien toiminta

Koulu-ympäristö

Omaehtoinen motivaatio

Liikunta-käyttäytymisen

säätelytaidot

Liikuntakokeilut

? ?

€?

N. Hankonen

Let’s Move It -teesit

1. KAIKKI LIIKE ON PLUSSAAPienikin lisäys liikuntaan on aina parempi kuin täysi liikkumattomuus.

2. OMA VALINTAPäätä itse, liikutko ja miten.

3. LIIKUNTA KUULUU KAIKILLEKenenkään ei tarvitse olla huippu-urheilija tai pitkäaikainen harrastaja voidakseen hyötyä tai oppia nauttimaan liikunnasta.

4. TIEDÄ, MIKÄ SUA LIIKUTTAAKaikki liikuntamuodot eivät voi sopia kaikille. Tärkeintä on löytää itselle mieluisia ja omaan arkeen sopivia tapoja liikkua.

5. TAVOITTEENA HYVÄ OLO, EI RASVATON RUNKOLiikunta yhdistettynä terveelliseen ruokavalioon auttaa painonhallinnassa, mutta ulkonäköä tärkeämpi liikunnan seuraus on hyvinvoiva mieli ja keho!

6. ISTUMINEN ON PYLLYSTÄLepo on tärkeää, mutta rajansa kaikella: Nykymaailmassa istuminen on tehty ”luonnottoman” helpoksi. Istumisen vähentäminen ja pienetkin tauot istumisesta tekee kropalle ja mielelle gutaa!

N. Hankonen

Yhteenveto: Prosessievaluaatio helpottaa laadukkaiden interventioiden muotoilua• Harva asia menee heti kuin Strömsössä!

• Prosessien arviointi – eri vaiheissa! – on mahdollistanut ohjelman parantamisen• ymmärrettävämmäksi• hyväksyttävämmäksi• käyttökelpoisemmaksi

• vaikuttavammaksi?

• Laadukas terveydenedistäminen pohjautuu iteratiiviseen, osallistavaan, kokeilujen ja tutkimusnäytön informoimaan pitkäjänteiseenkehitystyöhön

N. Hankonen

The team• Matti Heino• Katariina Köykkä• Elisa Kaaja• Noora Hagman• Sini Hynynen• Hanna Laine• Anni Nelimarkka• Mikko Annala• Niko Nummela• Johanna Nurmi• Pauliina Muinonen• Annika Skogster• Verena Kortelainen• Petja Sjö• Nella Heiskanen• Tapio Kumpula• Tanja Partanen• Jere Partanen

Thank youto our collaboratingteachers & students!

Punk Helsinki

Funding: Sports Sciences Funding /Ministry of Education and Culture; Appropriations for Health Promotion / Ministry for Social and Health Affairs, Finland

Kunnossa Kaiken Ikää-program

Co-investigators

• Vera Araujo-Soares

• Falko Sniehotta

• Pilvikki Absetz

• WendyHardeman

• Ari Haukkala

• Antti Uutela

• Taru Lintunen

• Tommi Vasankari

• Katja Borodulin

• Reijo Sund

and many othersSuomen TULE ry

Acknowledgments

N. Hankonen

EXTRA SLIDES

N. Hankonen

Let’s Move It -ohjaajan vuorovaikutusperiaatteet

• 1. Osoita empatiaa• 2. Kysy avoimia kysymyksiä• 3. Myötäile vastarintaa• 4. Herättele muutospuhetta• 5. Osoita kiinnostusta nuorten kokemuksiin ja näkökulmaan• 6. Anna nuorille vaihtoehtoja ja valinnanvaraa• 7. Anna rakenne ja agenda• 8. Käytä heijastavaa kuuntelua• 9. Validoi nuorten huolia• 10. Anna myönteistä palautetta

N. Hankonen Hankonen et al., 2016

OPETTAJIEN KOKEMUKSIA PILOTTITUTKIMUKSESTA

”Helpottaa omaa työtä ja tuo vaihtelua työhön” (ammattiaineen opettaja, mies)

”Monipuolisuus on ollut hauskaa” (ATTO-aineen opettaja, nainen)

”Toi sisältöä opetukseen” (ATTO-aineen opettaja, mies)

’

Vaikuttaako Let’s Move It tarkoitetusti?

• Ryväs-satunnaistettu kontrolloitu trial (CRCT)

– Satunnaistus ja interventio kouluittain, analyysi oppilasryhmän tasolla (noin 70 opiskelijaryhmää)

– Seuranta 14 kk asti

Hankonen et al., 2016

0 ~1 mo 2 mo 14 mo

A1 A4

H1 H2 H4

sQ1 sQ2 sQ3 T

C1 C2 C3 C4 C5 C6 B1 B2

Study timeline & data collection

Q1-sQ5 = Questionnaires / studentsH1-H4 = Physical activity measurements (Hookie)C1-C6 = Classroom intervention sessionsA1-A4 = Anthropometric measurementsF = Focus group interviewsT = Thematic interviews

T1 T2 T3 T4

N. Hankonen Hankonen et al., 2016

N. Hankonen Moore et al., 2014