Wyniki egzaminów zewnętrznych w kontekście...

Wyniki egzaminów zewnętrznych w kontekście ewaluacji

przeprowadzonych w roku szkolnym 2011/2012

Kraków, 26 listopada 2012 r.

autor: Andrzej Janczy

technikum i szkoła policealna 1

Program:

• Jakie są wymagania w stosunku do szkół?

• Statystyka poziomów spełniania wymagań

• Mocne strony kształcenia

• Słabe strony kształcenia

• Pytania badawcze

• Wnioski i rekomendacje


Obszar:

EFEKTY DZIAŁALNOŚCI DYDAKTYCZNEJ, WYCHOWAWCZEJ I OPIEKUŃCZEJ ORAZ INNEJ DZIAŁALNOŚCI STATUTOWEJ SZKOŁY LUB PLACÓWKI.


1.1. Analizuje się wyniki sprawdzianu, egzaminu gimnazjalnego, egzaminu maturalnego i egzaminu potwierdzającego

kwalifikacje zawodowe

Charakterystyka wymagania na poziomie D

Charakterystyka wymagania na poziomie B

Wyniki sprawdzianu i egzaminów są analizowane w celu poprawy jakości pracy szkoły lub placówki. W szkole lub placówce są wdrażane wnioski z analizy wyników sprawdzianu i egzaminów.

Do analizy wyników sprawdzianu i egzaminów wykorzystuje się różnorodne metody analizy wyników. Wdrażane w szkole lub placówce wnioski z analizy wyników sprawdzianu i egzaminów przyczyniają się do wzrostu efektów kształcenia.


Wyniki i wnioski z ewaluacji

1.1 Analizuje się wyniki sprawdzianu, egzaminu

gimnazjalnego, egzaminu maturalnego i egzaminu

potwierdzającego kwalifikacje zawodowe

Poziom

spełnienia Liczba

Technikum

A 5

B 13

C 8

Szkoła Policealna

A 1

B 10

C 2

D 2


A; 19%

B; 50%

C; 31%

technikum

A

B

C


A; 7%

B; 67%

C; 13%

D; 13%

szkoły policealne

A

B

C

D


Mocne strony: 1. Szkoły prowadzą analizę wyników w wieloletnich

perspektywach. Wiążą te analizy z badaniami osiągnięć.

2. Wyniki badań wpływają na organizowane w szkołach wsparcie uczniów, w organizacji którego wykorzystuje się środki UE.

3. Nauczyciele organizują się w grupy wspierające rozwój kompetencji zawodowych.


Dlaczego bardzo wysoki poziom spełnienia wymagania:

• Prowadzenie karty osiągnięć ucznia (od przyjścia ucznia do wyniku egzaminacyjnego ) umożliwia indywidualizację działań. Wyniki egzaminu zawodowego powyżej średniej OKE w Krakowie.

• Systematycznie prowadzone analizy osiągnięć uczniów, podłączone do działań wspierających rozwój. Wyższe od statystycznie przeciętnych wyników egzaminu zawodowego i matury (zwłaszcza z matematyki).

• Poprawa wyników egzaminu zawodowego i matury (4 krotny wzrost absolwentów szkoły, którzy uczą się w szkołach wyższych).

• Kompleksowość analiz osiągnięć przekładające się na zmianę wyników (średnie wyniki egzaminu zawodowego wyższe niż średnie województwa i kraju, wskaźnik EWD z języka polskiego wyraźnie powyżej przeciętnej efektywności nauczania).


Słabe strony: 1. Realizowane w szkole wnioski wynikające z analiz wyników

egzaminów maturalnych lub zawodowych nie powodują zmian.

2. Niewiele szkół wykorzystuje potencjał badawczy EWD.

3. Wnioski formułowane są na dużym poziomie ogólności, są deklaratywne i nie są formułowane operacyjnie, co powoduje niemożność ich wdrożenia.

4. Nie analizuje się skuteczności wdrożonych wniosków.

Szkoły Policealne:

1. Dodatkowa trudność wynika z niewielkiej liczby słuchaczy, co (zdaniem szkół) ma uniemożliwiać sensowność takich analiz.


Dlaczego średni i niski poziom spełnienia wymagania:

Ustalenie średniego poziomu spełnienia wymagania (8 techników, 2 szkoły policealne – poziom C) związane jest przede wszystkim z brakiem wzrostu efektów kształcenia.

Przykłady:

Brak analiz jakościowych, prowadzone są tylko analizy ilościowe.

Wyniki egzaminu zawodowego określone odsetkiem zdających ten egzamin maleją od kilku lat.

Zwiększający się odstęp od średnich wyników uzyskiwanych na egzaminie zawodowym, niżej niż przeciętna efektywność nauczania matematyki i przedmiotów przyrodniczych.


Pytania badawcze: Jakie dane/ jakie informacje z egzaminów zewnętrznych są analizowane jakościowo?

Cytat z ankiety:

„Jakość zdanych egzaminów poprzez analizę progów procentowych uzyskiwanych przez zdających w kontekście województwa i kraju; porównanie procentowych wyników z egzaminów maturalnych i potwierdzających kwalifikacje zawodowe z poprzednimi latami; określa się stanin, w którym mieści się wynik szkoły, analizujemy najniższe wyniki, najwyższe, średnie uzyskiwane z poszczególnych zadań.”


Jakie dane analizowane są jakościowo:

dane ilościowe

dane jakościowe

jakościowe i ilościowe

brak informacji

18% 27% 36% 18%

W jaki sposób analizuje się dane jakościowo:

analiza ilościowa

analiza jakościowa

jakościowe i ilościowe metody

analiz

brak informacji

11% 53% 26% 11%


Przykłady analiz: -zestawienie wyników całej klasy pozwala określić obszary, treści i umiejętności, które wymagają podejścia grupowego;

-analizy kontekstowe dotyczące wpływu absencji;

-analizowane są czynniki wpływające na osiągnięcia ucznia, tj. czynniki pedagogiczne (ilość godzin odbytych zajęć, frekwencja na zajęciach), czynniki indywidualne i czynniki środowiskowe;

-ustalają co było powodem słabszej wiedzy lub niższych umiejętności uczniów (np. absencja uczniów lub nauczyciela, nieprawidłowe planowanie pracy dydaktycznej, źle dobrane formy lub metody pracy);


Przykłady wdrożonych wniosków: Standardowe (np.: dodatkowe zajęcia z różnych przedmiotów, egzaminy próbne, umiejętności, z którymi nie radzą sobie uczniowie).

Ciekawe:

• terminarz wykonywania zadań z określonego działu;

• koordynator ds. nabywania konkretnych umiejętności;

• współdziałanie nauczycieli przedmiotów ścisłych (matematyka, fizyka) i nauczycieli przedmiotów zawodowych w zakresie nabywania pewnych „niedokształconych” umiejętności.

Ale są również:

• egzamin próbny

• dodatkowe godziny w ramach art. 42a


Jak wykorzystują wnioski nauczyciele:

Około ¾ wypowiedzi nauczycieli:

„kładę większy nacisk na wiedzę i umiejętności z których uczniowie osiągnęli słabe wyniki”;

Wykorzystanie wniosków dotyczyło również:

• zmian planów dydaktycznych, programów, podręczników (około ½)

• zmian metod i form pracy (około ½).


Inspirujące:

• np.: omawianie wybranych poleceń na lekcji, a nie zadawanie rozwiązania testu w domu - niesamodzielność.

• ćwiczę analizy zestawień, tabel, wykresów, umiejętność wnioskowania, bo jest to potrzebne moim kolegom zawodowcom.

• upraktyczniam zajęcia.

Mało inspirujące: • wyławianie talentów matematycznych

• angażuję ich w konkursy przedmiotowe, koła zainteresowań

• na bieżąco

• nie wykorzystuję na swoim przedmiocie, gdyż nie ma z niego egzaminu zewnętrznego


Żaden z 905 nauczycieli nie napisał, że porównuje wnioski z własnymi (szkolnymi) badaniami osiągnięć uczniów.


Co ma największy wpływ na poprawę wyników egzaminu:

42%

16% 13%

8% 6% 6% 5% 5% 0%

5%

10%

15%

20%

25%

30%

35%

40%

45%



42%

16% 13%

8% 6% 6% 5% 5% 0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

Dodatkowe zajęcia z matematyki: 73%



42%

16% 13%

8% 6% 6% 5% 5% 0%

5%

10%

15%

20%

25%

30%

35%

40%

45%


Jakie są dowody na wzrost wyników:

• średnie wyniki z poszczególnych części egzaminu;

• odsetek zdających egzamin zawodowy;

• odsetek zdających poszczególne części egzaminu;

• porównanie tych danych z wynikami w Małopolsce lub kraju (tworzone są w szkołach poziomy odniesień).

W wielu szkołach brak takich ustaleń. Są czynione na potrzeby ewaluacji.


Rekomendacje:

1. Należy pracować nad analizami osiągnięć od podstaw (jak je prowadzić, z jakich metod korzystać, jak gromadzić i udostępniać wyniki).

2. Wykorzystywać analizowanie osiągnięć uczniów, z którymi przyszli do szkoły do budowania systemów.

3. Sukcesy i porażki uczniów oceniać w kontekście pracy pedagogicznej (jakie znaczenie dla wyniki ma współpraca nauczycieli?).


Środowisko

Zdanie jednego z partnerów szkoły:

„efektywność kształcenia jest weryfikowana przez rynek pracy”


Wyniki egzaminów zewnętrznych w kontekście...

Documents

Transcript of Wyniki egzaminów zewnętrznych w kontekście...