Projektbeskrivelse for hele evalueringen

Danmarks Evalueringsinstitut (EVA) har med sin handlingsplan for 2010 besluttet at evaluere de nyoprettede centre for voksen- og efteruddannelse (VEU-centre), der indleder deres arbejde 1. januar 2010. Denne projektbeskrivelse gør rede for evalueringens formål, organisering og metodiske design.

Formålet med evalueringen

Formålet med evalueringen er dels at bidrage til den løbende udvikling og kvalificering af VEU-centrenes arbejde, dels at vurdere hvilken effekt centrene har på udbuddet og aktiviteten på AMU og FVU. Endelig skal evalueringen vurdere om de politiske intentioner i lovgivningen om VEU-centrenes oprettelse (LOV nr. 1100 af 30.11.2009) er opfyldt.

Evalueringen løber fra foråret 2010 til foråret 2012. Evalueringen følger dermed VEU-centrenes arbejde med at definere og begynde på deres arbejdsopgaver helt fra start. Eva-lueringen er designet så data fra det første år indgår i den samlede evaluering af VEU-centrenes arbejde med at styrke VEU-indsatsens kvalitet og effekt. I denne pro-jektbeskrivelse skitseres aktiviteterne for den samlede evalueringsperiode, men kun det første år udfoldes i detaljer.

Evalueringen vil sætte fokus på følgende temaer:

1. Samarbejdet mellem de deltagende institutioner i et VEU-center
2. VEU-centrenes vejledning og rådgivning til virksomheder og ansatte
3. Samspillet mellem de grundlæggende almene og erhvervsrettede uddannelser
4. Tilpasningen af uddannelsesindsatsen til brugernes og arbejdsmarkedets behov
5. Samspillet mellem voksen- og efteruddannelsesindsatsen og den regionale erhvervs- og beskæftigelsesudvikling
6. VEU-centrenes ageren i forhold til de nye rammer for udbud af AMU, herunder vurdering af om VEU-centrene bidrager til at der opnås en bedre dækning af konstaterede uddannelsesbehov og en bedre arbejdsdeling mellem udbyderne som følge af samarbejdet i et VEU-center.

Baggrunden for evalueringen

Oprettelsen af VEU-centre er et resultat af regeringens aftale fra april 2009 med Socialdemokraterne, Radikale Venstre og Dansk Folkeparti om en samlet styrkelse af det erhvervsrettede voksen- og efteruddannelsesområde. Aftalen (Aftale om AMU-udbud og VEU-centre) indeholder bl.a. en beslutning om at etablere 8-14 regionale VEU-centre med henblik på at skabe en forenklet indgang til det samlede voksen- og efteruddannelsesudbud. Efter aftalens indgåelse er det besluttet at oprette 13 VEU-centre.

Omdrejningspunktet for VEU-centrenes arbejde vil være arbejdsmarkedsuddannelserne (AMU). VEU-centrene overtager en række af de opgaver der indtil udgangen af 2009 har været forankret i de 22 voksenvejledernetværk eller hos de ca. 100 AMU-udbydere rundt om i landet.

VEU-centrenes formål

VEU-centrene har til formål at medvirke til at skabe større fokus på kvalitet og effekt af såvel den grundlæggende erhvervsrettede som den almene voksen- og efteruddannelsesind-sats.

Det enkelte VEU-center skal kunne fungere som én fælles indgang for de virksomheder, medarbejdere og borgere der bruger voksen- og efteruddannelsessystemet. Ved at etablere et tilbud om en fælles indgang er der en forventning om at skabe større overskuelighed på tværs af uddannelsesudbuddet i det geografiske område som det enkelte VEU-center dækker. VEU-centrene får også en koordinerende rolle i forhold til virksomhedsopsøgende ar-bejde, markedsføring og kortlægning af behovet for analyser.

Evalueringens indhold

Evalueringsdesignet trækker på metoder fra virkningsevaluering og indeholder både en effektevaluering og løbende procesevaluering hvor der er fokus på at kvalificere Undervis-ningsministeriets arbejde med at bistå VEU-centrene i deres opbygningsfase. I den uddybende beskrivelse af de tre faser er der henvist til hvornår hvilket perspektiv er i centrum.

Fase 1 (2010)

Perspektiv: effektevaluering

Resultatindikatorer
VEU-centrenes resultater vurderes ud fra resultatmål som er beskrevet i den udviklingskontrakt hvert VEU-center indgår med Undervisningsministeriet. I kontrakterne har ministeriet defineret fem landsdækkende strategiske indsatsområder. Til disse knytter sig både fælles resultatmål, meldt ud af Undervisningsministeriet, og lokale resultatmål, som det enkelte VEU-center har besluttet. De enkelte VEU-centre udarbejder en årlig afrapportering til Undervisningsministeriet. Information om retningslinjerne for afrapporteringen udmeldes af ministeriet medio 2010. Undervisningsministeriet vurderer og følger op på målopfyldelsen med de enkelte VEU-centre, mens EVA gennemfører en tværgående analyse af afrapporteringerne.

I fase 1 indsamles registerdata som dokumenterer status før VEU-centrenes start, så der er data at sammenligne med ved evalueringens slutning. Der anvendes tal fra ministeriets da-tabase over voksen- og efteruddannelse (AMU og VEU-statistik) som i den afsluttende eva-luering kan bidrage til at belyse VEU-centrenes effekt på aktivitet og udbud inden for AMU og FVU.

Perspektiv: løbende kvalificering og udvikling

Muligheder og barrierer

I fase 1 afdækker vi også de muligheder og barrierer der kan iagttages før VEU-centrenes  arbejde for alvor går i gang. De politiske forventninger til VEU-centrene afdækkes ved at gennemgå de politiske aftaler bag VEU-centrenes oprettelse, VEU-centerloven (LOV nr. 1100 af 30.11.2009) og de bemærkninger og rapporter mv. der ligger til grund for denne lov. Endvidere ser vi på processen med at afgrænse VEU-centrene og vælge værtsinstitutio-ner.

For at belyse VEU-centrenes forventninger og erfaringer fra den allerførste fase af opbygningen gennemføres en række telefoninterviews med repræsentanter fra samtlige værtsinstitutioner og udvalgte partsinstitutioner om deres forventninger til det kommende samarbejde. Der tilstræbes en variation i typer af informanter så både institutionsledelser fra parts- og værtsinstitutioner, repræsentanter fra værtsinstitutioners bestyrelser samt repræsentanter fra centerrådene interviewes. Endelig vil vi interviewe parterne i VEU-rådets forretningsudvalg om deres forventninger til VEU-centrene.

Ud over at kvalificere arbejdet med at identificere barrierer og muligheder vil interviewene også give input til hvordan informanterne ser på sammenhængen mellem VEU-centrenes planlagte aktiviteter og indsatsens forventede resultat og effekt.

Sammenhængen mellem kontrakt og handleplan

Med afsæt i VEU-centrenes handleplaner og resultatkontrakter udarbejder EVA en analytisk tematisering af VEU-centrenes forskellige tilgange til opgaveløsningen.

Ud fra denne tematisering og med input fra interviewundersøgelsen vil vi lave en analyse af hvordan VEU-centrene ser sammenhængen mellem de konkrete, planlagte aktiviteter og de opstillede mål for VEU-centrene, dvs. sammenhængen mellem kontrakt og handleplan.

Dette arbejde kan danne afsæt for at hvert enkelt center udarbejder mere detaljerede handleplaner for det forestående arbejde.

Fase 2 (2011)

Perspektiv: effektevaluering
I 2011 ser vi særligt på VEU-centrenes ageren i forhold til de nye rammer for styring og vil-kår for udbud af AMU, og på om VEU-centrene bidrager til at der opnås en bedre dækning af konstaterede uddannelsesbehov og en bedre arbejdsdeling mellem udbyderne. VEU-centrenes samarbejde om udbudspolitik og strategi vil være i fokus. Der udarbejdes en sær-skilt projektbeskrivelse for denne del af undersøgelsen.

Perspektiv: løbende kvalificering og udvikling
I fase 2 udvælges tre til fem VEU-centre til nærmere studier med henblik på at udfolde og nuancere de forskelligartede erfaringer som VEU-centrene på dette tidspunkt har gjort sig.

Udvælgelsen af VEU-centrene vil tilstræbe variation i forhold til en række centrale kriterier, fx geografisk placering (by/land), uddannelsesudbud, antallet af institutioner i VEU-centeret, organisering af centerrådet og særligt fokus i udviklingskontrakten.

 
Fase 3 (2012)

Perspektiv: effekt- og procesevaluering
I fase 3 udarbejder EVA en samlet afrapportering af VEU-centrenes aktiviteter og effekt i evalueringsperioden. Evalueringen baserer sig på resultaterne fra hele evalueringsperioden, herunder de registerdata der blev valgt i fase 1 til at belyse udviklingen i forhold til de op-stillede resultatindikatorer.

I evalueringens afsluttende fase gennemføres igen interviews med repræsentanter fra værts- og partsinstitutionerne. Formålet er at få en kvalitativ belysning af de resultater der er skabt gennem VEU-centrenes arbejde. De afsluttende interviews giver derved også mu-lighed for at repræsentanterne kan formulere fremadrettede anbefalinger og beskrive de muligheder og udfordringer der er knyttet til VEU-centrenes virke.

Evalueringens metoder
I evalueringens første fase anvendes følgende metoder til dataindsamling:

1. Deskresearch af centrale politiske aftaler, VEU-center-loven (LOV nr. 1100 af 30.11.2009) og bemærkninger, forarbejder og rapporter knyttet hertil
2. Indsamling af registerdata
3. Telefoninterviews 
4. Tværgående analyse af udviklingskontrakter. 
   

Om de enkelte delundersøgelser i 2010

Indsamling af registerdata
Der indsamles registerdata to gange i løbet af evalueringsperioden – i fase 1 og i fase 3. Indsamlingen af registerdata bidrager til at illustrere om VEU-centrene har opfyldt de politisk bestemte mål og de lokale resultatmål som VEU-centrene selv opstiller.

En nærmere definition af hvilke typer af data der indsamles, afventer de nationale og lokale resultatmål.

Registerdata vil bl.a. blive indsamlet gennem AMU-statistikken i Undervisningsministeriets databank som UNI-C administrerer.

Interviewundersøgelsen

I starten af fase 1 gennemføres interviews med institutionsrepræsentanter. Formålet med interviewene er at eksplicitere de forventninger og mulige barrierer institutionerne iagttager i opstartsfasen. Desuden har interviewene et vigtigt formål i forhold til at give input til arbejdet med analysen af sammenhængen mellem kontrakter og handleplaner.

Analyse af sammenhæng mellem kontraktmål og handleplaner
EVA vil analysere VEU-centrenes udviklingskontrakter og handleplaner for at beskrive de forventede sammenhænge mellem igangsætningen af konkrete aktiviteter og de lokale mål, og afdække forskelle og ligheder i de enkelte centres måder at gribe opgaven an på. De nævnte interviews bruges til at supplere denne analyse.