TIC in scoli, Studii de Evaluare a Inspectoratului, Irlanda, 2005-2006

TIC in scoli, Studii de Evaluare a Inspectoratului, Irlanda, 2005-2006

(Adaptat dupa raportul de evaluare "TIC in scoli" si materialele aditionale furnizate de Departamentul pentru Educatie si Stiinta, Irlanda).

De ce acest exemplu?

Acest exemplu a fost selectat pentru a descrie procesul de evaluare sumativa si principalele activitati efectuate in cadrul acestuia. Aici se regasesc majoritatea etapelor de evaluare si, astfel, este prezentata o privire de ansamblu asupra  activitatilor cheie din fiecare etapa, precum si o descriere detaliata a procesului.

Informatii generale

Prima politica guvernamentala referitoare la tehnologia informatica si de comunicare (TIC) in educatie (Schools IT 2000) a fost aprobata in 1997. Acest document de politica a avut drept rezultat introducerea initiativei ICT in Schools (TIC in scoli) in 1998, care a pus bazele pentru dezvoltarea TIC in sistemul educational. Initiativa Schools IT 2000 a avut trei directii majore: cea pentru integrarea tehnologiei, pentru abilitati de predare si pentru sprijinirea scolilor.

Initiativa pentru integrarea tehnologiei a fost destinata sprijinirii scolilor in procesul de dezvoltare a infrastructurii TIC. Scolile au primit granturi pentru achizitionarea de computere si stabilirea unei conexiuni la internet.

Initiativa pentru abilitati de predare a furnizat cursuri de formare pentru dobandirea abilitatilor TIC, dezvoltarea abilitatilor profesionale in TIC si a celor pedagogice.

Initiativa pentru sprijinirea scolilor a acoperit teme de predare si invatare privitoare la integrarea TIC, utilizarea internetului in educatie.

Consiliul National al Competitivitatii a fost infiintat in 1997 ca organism de parteneriat social subordonat Taoiseach (primului ministru) pe problemele de competitivitate cu care se confrunta economia. Acesta a notat ca, in comparatie cu concurentii majori, Irlanda ramasese putin in urma in ceea ce privea aplicarea TIC in educatie. Raportul recomanda ca abilitatile TIC de baza sa devina o componenta principala a educatiei de masa.

In 2001, Guvernul a lansat al doilea document de politica pe tema utilizarii TIC in educatie - "A Blueprint for the Future of ICT in Irish Education'' (O schita pentru viitorul TIC in invatamantul irlandez). Acesta era un plan strategic pe o durata de trei ani menit a sprijini continuarea principalelor initiative incepute in cadrul IT 2000. Principalele obiective ale politicii Blueprint erau:

• extinderea ofertei de capital TIC pentru scoli;
• cresterea accesului la si a utilizarii tehnologiilor internet;
• continuarea integrarii TIC in procesele de predare si invatare;
• imbunatatirea oportunitatilor de dezvoltare profesionala pentru profesori.

De atunci, s-au realizat multe in dezvoltarea infrastructurii TIC in scoli. Aceasta a necesitat niveluri semnificative de investitie, in special din partea Statului, dar si a scolilor si institutiilor individuale. Avand in vedere nivelul investitiilor de bani si timp, nevoia unei evaluari amanuntite a impactului TIC in scoli s-a facut simtita in mod clar. In anul scolar 2005/06 Divizia pentru Inspectorate a Departamentului pentru Educatie si Stiinte a efectuat o evaluare a infrastructurii, planificarii si utilizarii TIC in procesele de predare si invatare in scolile primare si post-primare.

Intrebari de evaluare

Aceasta evaluare a avut drept scop evaluarea impactului TIC asupra procesului educational din scolile primare si post-primare. Evaluarea a dorit, de asemenea, sa aprecieze cunostintele, abilitatile, atitudinile si convingerile profesorilor si elevilor in ceea ce priveste utilizarea TIC in procesul de predare si invatare si in scoli in general. Intrebarile de evaluare pot fi astfel, rezumate dupa cum urmeaza

In ce masura TIC este utilizat in scolile primare si post-primare?

Care este impactul TIC asupra proceselor de predare si invatare?

Care sunt abilitatile TIC ale elevilor in punctele selectate din educatie?

Care sunt opiniile directorilor si profesorilor asupra propriilor abilitati TIC si asupra impactului si rolului viitor al TIC in educatie?

In ce masura TIC este folosit pentru a sprijini elevii cu nevoi educationale speciale?

Planul de evaluare

Evaluarea a avut in vedere colectarea de date calitative si cantitative si de metode de analiza pentru a raspunde la intrebarile de evaluare de mai sus. Planul colectarii de date a fost urmatorul:

Octombrie - Decembrie 2005

Un sondaj national desfasurat prin posta asupra directorilor si profesorilor din scolile primare (260) si post-primare (155) selectate in mod aleatoriu, luand in calcul anumite variabile de stratificare.

Octombrie 2005 - Februarie 2006

Studiu de caz asupra a 52 scoli (32 primare si 20 post-primare) selectate la intamplare din principalul esantion care a participat la sondajul prin posta. In timpul evaluarii studiului de caz, elevilor le-a fost administrat un chestionar.

Asistenta la ora (77 scoli primare) si inspectii pentru anumite materii (111 scoli post-primare). Aceasta activitate de observare a fost efectuata ca parte din activitatea de rutina a inspectorilor in beneficiul evaluarii.

Evaluarea on-line a profesorilor (79) in scoli post-primare ce formeaza esantionul pentru studiul de caz.

Echipa de evaluatori

Evaluarea a fost efectuata de catre Inspectori de la Divizia pentru Inspectorate a Departamentului pentru Educatie si Stiinta in cooperare cu Centrul National pentru Tehnologie in Educatie (NCTE).

Unitatea de Sprijin pentru Evaluare si Cercetare a Diviziei pentru Inspectorate a angajat o companie autorizata Insight Statistical Consulting (Insight) pentru a efectua anumite parti ale evaluarii, si anume:

• administrarea, colationarea, analiza si raportarea rezultatelor sondajului national prin posta (chestionare pentru directori si profesori din scolile primare si post-primare);
• colationarea, analiza si raportarea rezultatelor sondajului (chestionare pentru elevi la nivelul primar si gimnazial, recensamantul infrastructurii TIC si asistenta la ore efectuata de catre inspectori).

Departamentul pentru Educatie si Stiinta a fost responsabil de colectarea datelor pentru chestionarele pentru elevi/studenti si revizuirea acestora de catre inspectori.

Colectarea de date

De la directori, profesori, elevi si inspectori la nivel primar si gimnazial s-au colectat date cantitative si calitative. In total, aceasta gama larga de surse a furnizat un set de date mult mai bogat decat ar fi fost posibil de obtinut din orice alta sursa unica. A permis, de asemenea, compararea si triangularea dovezilor. Datele primare au fost colectate utilizand metode calitative si cantitative. Metodele de esantionare, marimea si procesele de colectare a datelor sunt descrise mai jos.

Sondaj national asupra directorilor si profesorilor din scolile primare si gimnaziale

Metode de esantionare a sondajului

In total, a fost identificat o populatie eligibila din 3.024 scoli primare si 711 scoli post-primare in vederea participarii la sondajul efectuat in randul directorilor si profesorilor. Presupunand un procent minim de raspuns de 40% din fiecare sector, din cadrul scolilor primare, au fost selectate 260 scoli pentru obtinerea unui esantion valid din punct de vedere statistic, de cel putin 100 de scoli. Un esantion de 155 scoli a fost selectat dintre scolile post-primare in vedere obtinerii unui esantion valabil din punct de vedere statistic, de cel putin 50 de scoli. Ambele esantioane de scoli au fost selectate utilizand urmatoarele variabile de stratificare:

regiuni

marimea scolii (mica, medie, mare)

tipul scolii (mixta, pentru baieti, pentru fete)

raportul elevi/nr. computere (scazut, mediu, crescut, necunoscut)

Populatia scolilor primare si post-primare a fost selectata pe baza acestor variabile. Pentru scolile primare, un esantion sistematic aleatoriu de 260 scoli a fost selectat prin inceperea din punctul de plecare si selectarea fiecarei a n-a scoli. Punctul de plecare a fost stabilit alegand aleatoriu un numar intre 1 si 3.024. N a fost obtinut prin impartirea numarului total de scoli la dimensiunea totala a esantionului, i.e. 3.024 impartit la 260. (Pentru a creste probabilitatea obtinerii unei rate minime de raspuns de 40%, a fost luat in considerare un esantion suplimentar deoarece exista posibilitatea ca anumite scoli de baieti sa nu poata participa). Lista a fost mai apoi transmisa sub forma unei circulare, i.e. scoala 1 a urmat scolii 3.024. Acesta a fost un proces aproximativ, echivalent cu selectarea unui esantion stratificat proportionat conform variabilelor descrise mai sus. Acelasi principiu de selectie a fost aplicat si populatiei din scolile post-primare.

Metode de colectare a datelor pentru sondaje

In fiecare dintre scolile care au luat parte la sondaj, directorul a primit o scrisoare de notificare din partea Inspectoratului mentionand ca scoala acestuia a fost aleasa pentru participare la sondajul prin posta. Notificarea a furnizat scolilor informatiile generale asupra sondajului, mentionand ca se vor aplica si chestionare in cadrul acestuia.

Apoi, fiecare scoala a primit un chestionar pentru director si mai multe chestionare pentru profesori. Toti profesorii din scolile primare cu opt sau mai putini profesori au fost rugati sa completeze un chestionar; scolile primare cu peste opt profesori au fost rugate sa se asigure ca un profesor pe grup de clase completeaza un chestionar.

Toti profesorii din scolile post-primare, cu noua sau mai putine cadre didactice, au fost rugati sa completeze un chestionar; acele scoli cu peste noua profesori au fost rugate sa se asigure ca un profesor de la fiecare catedra (Engleza, Matematica, Irlandeza, limbi straine, Stiinta, Afaceri, Stiinta aplicata, Studii Sociale) completeaza un chestionar.

Aceste chestionare pentru directori si profesori au fost elaborate utilizand analiza de continut a chestionarelor anterioare si revizuirea literaturii. Cu ajutorul unui numar restrans de directori in functie si profesori, toate chestionarele au fost pilotate in randul unui esantion mai mare de participanti si profesori. Acest proces de pilotare a ajutat la rafinarea chestionarelor si a asigurat specificitatea si exactitatea intrebarilor.

La doua saptamani dupa trimiterea chestionarelor catre scoli, a mai fost trimisa o scrisoare scolilor care pana in acel moment nu returnasera chestionarele. Aceasta a fost urmata de o serie de apeluri telefonice catre scolile in care rata de raspuns dintre variabilele selectate era mai scazuta decat media.

Studiu de caz: evaluarea scolilor

Metode de esantionare in procesul de evaluare a scolilor supuse studiului de caz

Metodele de evaluare au fost aplicate unui esantion de 32 scoli primare si 20 scoli post-primare. Aceste 52 scoli au fost selectate in mod aleatoriu ca un sub-set al principalului esantion selectat pentru participarea la sondajul national in randul directorilor si profesorilor de scoli primare si post-primare. Datorita selectiei aleatorii, studiul de caz asupra scolilor a reflectat, de asemenea, profilul populatiei cunoscute conform principalelor variabile de stratificare. Totusi, dimensiunea esantionului a fost prea mica pentru a fi considerat reprezentativ.

Metode de colectare a datelor pentru evaluarea scolilor supuse studiului de caz

Scolile supuse studiului de caz au fost anuntate telefonic si in scris de participarea la evaluare, cu doua saptamani inainte de vizita inspectorilor. Inspectorii au petrecut, de obicei, o zi in fiecare scoala si au efectuat urmatoarele activitati:

• inspectia facilitatilor TIC ale scolii, in compania directorului sau a coordonatorului de TIC;
• interviuri separate cu directorul, coordonatorul TIC si un mic grup de profesori (de obicei patru);
• interviuri cu un mic grup de elevi, de obicei patru;
• examinarea de exemple din activitatile elevilor prin utilizarea TIC; elevii, de obicei, au venit la interviul cu inspectorii cu exemple din activitatile lor;
• revizuirea documentelor relevante ale scolii (planul scolii pentru TIC si politica uzului acceptabil; un inventar al tuturor echipamentelor TIC din scoala,  indicand locatia acestora in diferite sali de clasa sau zone din scoala; un exemplar din fisa de post a coordonatorului TIC; un exemplar al orarului pentru orice laborator de informatica (sau laboratoare) din scoala);
• oferirea de feedback directorului.

In timpul vizitelor in scoli, inspectorii au administrat, de asemenea, un chestionar elevilor. Scopul acestui chestionar a fost de a stabili parerile elevilor referitoare la TIC, nu numai cu privire la interactiunea lor cu TIC din scoala, ci si la utilizarea TIC de catre acestia, in afara timpului petrecut in scoala.

Pentru scolile primare, o intreaga clasa a 5-a a fost selectata pentru participare, considerandu-se ca acest grup va avea destula experienta in utilizarea TIC in scoala pentru a putea oferi feedback informativ; aceasta grupa de varsta a fost, de asemenea, considerata indeajuns de matura pentru a raspunde la abordari atat de formale, de tipul interviurilor si chestionarelor.

Pentru scolile post-primare a fost selectata o clasa intreaga din anul de obtinere a  Leaving Certificate (invatamant secundar) deoarece, in acel moment, in perioada petrecuta in scoala, ar fi avut 3 ani de experienta in utilizarea TIC in scoala lor, fiind astfel considerati a se plasa pe o pozitie care le permitea acordarea de raspunsuri la intrebari. Un total de 437 elevi de scoala primara si 450 elevi de gimnaziu au completat chestionarele.

Asistenta la ora (invatamant primar) si inspectii la anumite materii (invatamant gimnazial)

Ca parte a activitatii zilnice, inspectorii implicati in activitatea evaluativa din scoli au completat un "program de revizuire TIC" pentru fiecare scoala pe care au vizitat-o. Programele de revizuire TIC utilizate de catre inspectori au reprezentat un mijloc de prima mana de colectare a informatiilor referitoare la utilizarea TIC in acele unitati scolare, in special, in ceea ce priveste predarea si invatarea la clasa.

In scolile primare, revizuirea TIC a constat in trei sectiuni. Primele doua au fost identice si au fost completate in relatie cu activitatea a doi profesori de la doua clase de masa individuale. Cea de-a treia sectiune avea sa fie completata cu referire la activitatea unui membru al echipei speciale de educatie dintr-o scoala (ex. profesorul pentru sprijinirea invatarii sau profesorul resursa pentru cei ce calatoresc pe termen lung (Resource Teacher for Travellers)). Pentru toate cele trei sectiuni din program, inspectorii au avut doua sarcini: i) de a adresa intrebari profesorului referitoare la planificarea TIC si utilizarea TIC de catre acesta; ii) observarea si evaluarea nivelului de integrare a TIC in predare si invatare.

In total, inspectorii au vizitat 77 scoli primare si au completat programe de revizuire a TIC pentru 127 profesori de clase din invatamantul de masa. Majoritatea acestor lectii au avut loc in sali de clasa cu mai mult de o grupa in clasa (de exemplu, o lectie intr-o scoala rurala mica ar fi putut sa aiba elevi de anul intai, al doilea si al treilea in aceeasi sala).

In scolile post-primare, programul de revizuire a TIC a fost concentrat pe materie si a continut doua sectiuni. Prima sectiune a cuprins un chestionar scurt referitor la materie care a necesitat adresarea intrebarilor de catre inspectori, directorilor si profesorilor de la o anumita materie (sau materii) evaluate. Acestea au continut  intrebari legate de utilizarea TIC in cadrul anumitor materii, TIC in planificarea materiilor si pregatirea si implementarea TIC in procesul de evaluare a elevilor. A doua sectiune a programului de revizuire a cuprins doua formulare de asistenta la ora si a necesitat inregistrarea de catre inspectori a nivelului de integrare a TIC in predarea si invatarea materiei evaluate. In general, inspectorii au completat unul dintre aceste formulare pentru o lectie predata elevilor din ciclul de juniori si unul pentru o lectie predata elevilor din ciclul de seniori.

In timpul procesului de revizuire post-primara, inspectorii au vizitat 111 scoli    post-primare si au completat programe de revizuire privitoare la 311 lectii.

Evaluarea on-line

In 20 de scoli post-primare, inspectorii au intervievat un total de 79 profesori care au participat la evaluarea scolii supuse studiului de caz. Fiecare dintre acesti profesori a fost mai apoi invitat sa ia parte la un sondaj de urmarire on-line, menit a construi un profil al profesorilor implicati si sa obtina o perspectiva mai completa asupra parerilor acestora despre cateva probleme specifice ridicate in timpul interviurilor. Profesorilor li s-a cerut sa completeze un chestionar on-line bazat in principal pe raspunsuri obtinute la interviuri. Un total de 37 profesori au completat chestionarul -o rata de raspuns de 47%. Profilul acestor profesori a fost comparat cu cel al esantionului aleator de 800 profesori care au completat chestionarul trimis prin posta. Profilurile celor doua grupuri s-au potrivit destul de indeaproape in ceea ce priveste un numar de variabile semnificative, respectiv, sex, varsta si detinerea unui computer.

Metode de analiza a datelor

Toate datele colectate ca rezultat  au fost introduse in computer si importate in Data Desk si SPSS pentru efectuarea unei analize statistice. Fiecare tabel si organigrama din acest raport prezinta rezultatele privitoare la utilizarea procentajelor si cifrelor. Toate procentajele se bazeaza pe cifre valide (adica, in cazul in care respondentii au raspuns la intrebari, daca nu se specifica altceva). O anumita rotunjire a procentajelor a avut loc. Ordinea rezultatelor din fiecare sectiune urmareste in general ordinea intrebarilor din chestionarele relevante.

Diseminarea constatarilor evaluarilor

Rezultatele evaluarilor au fost impartasite factorilor interesati in momente diferite pe parcursul evaluarii. La finalizarea vizitelor in scoli efectuate in timpul evaluarii scolilor supuse studiului de caz, a fost intocmit un scurt raport, care a fost apoi trimis catre fiecare scoala. Aceste rapoarte se refereau la facilitatile TIC existente in scoli, si de asemenea, la planificarea TIC si utilizarea TIC la clasa. Fiecare raport a inclus recomandari de rezolvat de catre scoli ca parte din planurile acestora de dezvoltare in ceea ce priveste utilizarea TIC in scoala pe baza principalelor constatari descrise de Inspectorat, cat si a principalelor activitati propuse pentru imbunatatirea in viitor a implementarii politicii TIC.