Politické anestetikum PISA
5.4.2011 | Ondrej Kaščák a Branislav Pupala | Nielen o škole
Medzinárodné testovanie žiakov známe ako PISA nespĺňa to, čo od neho očakávame. Namiesto objektívneho ponúka pokrivený politický obraz. .týždeň tým pokračuje v diskusii o kríze vzdelanosti.
Nosná téza antropológa Andrewa B. Kipnisa uverejnená v roku 2008 v časopise American Ethnologist, že postsocialistické a aj vzdialené komunistické krajiny sveta (napríklad Čína) otvorene prijímajú a dokonca intenzifikujú západnú „kultúru auditu“, bezpodmienečne platí aj o nás. Výhradne debaty o výsledku rôznych medzinárodných vzdelávacích „auditov“ sú u nás schopné rozprúdiť diskusie o vzdelávaní a stali sa základom politickej rétoriky o vzdelávaní. Debaty o testovaní žiakov zatieňujú akékoľvek iné diskusie o školstve. Testovanie treba rozšíriť na všetky vekové skupiny a dimenzie ľudského bytia, takže nás nemôžu prekvapiť návrhy súčasných politických reprezentantov na rozšírenie testovania do stále mladších vekových skupín žiakov (no zároveň aj do obdobia pokročilej dospelosti celoživotne učiacich sa) a do nových, netradičných, ba až absurdných oblastí testovania, ako je napríklad morálka.
Testovanie ukľudňuje politickú sféru. Bez neho by vzdelávacia politika nebola viditeľná, nemala by misiu (zlepšiť sa v testovaní), neexistovala by úrodná pôda pre nastoľovanie reforiem. Zároveň poskytuje testovanie politikom punc odbornosti. Ich rozhodnutia sú totiž podložené údajmi z testov, majú teda akoby objektívnu základňu. Testovanie tak v oblasti vzdelávania predstavuje prostriedok „politiky založenej na dôkazoch“ (tzv. Evidence-based Policy), po ktorej kričia súčasné politické reprezentácie predstierajúce svoju ideologickú neutralitu. Alfou a omegou súčasnej „kultúry auditu“ vo vzdelávaní sa pritom stalo medzinárodné testovanie 15-ročných žiakov PISA. Výsledky PISA sú vnímané ako berná minca stavu slovenského školstva, usmerňujú vzdelávacie reformy, umožňujú kritiku školstva. Túto modlu vzývajú politici (ale často aj akademici) ako odborného garanta ich rozhodnutí. Je načase sa z tejto anestézy prebrať.
.zvláštne zahmlievanie
Po každom zverejnení výsledkov PISA sa (za hojnej politickej podpory) dejú veľkolepé akcie sebaprezentácie národných PISA administrátorov. Reguluje sa účasť z akademickej sféry, pozývajú sa vybraní hostia. Pozvaniam na akademickú pôdu za účelom diskusie o povahe a problémoch testovania sa reprezentanti národných PISA-konzorcií vyhýbajú. Kolegovia z Rakúska a z Nemecka boli touto neochotou doslova zaskočení. Batérie testových úloh sa zverejňujú až s niekoľkoročným odstupom po testovaní, často nekompletné, niektoré úlohy neboli z prvých testovaní zverejnené dodnes. Technické správy sú metodologicky neúplné, prezentované dáta sú selektované a štatistické procedúry vzbudzujú mnohé otázky. PISA-konzorciá odmietajú komentovať a interpretovať nimi namerané výsledky. Vytvoria len rebríčky krajín a zverejnia čísla. Pritom sú národní administrátori platení z našich daní a zároveň je PISA know how trhovým artiklom – ide o produkt privátneho konzorcia riadeného organizáciou ACER (Australian Council of Educational Research), ktorá funguje celosvetovo podľa trhového modelu a predáva jednotlivým podieľajúcim sa krajinám testovaciu technológiu, riadi trh so zaškoľovaním do testovania, do administrácie a s dotyčnými školiacimi materiálmi.
.slovensko ako lúzer
Slovensko je v PISA na strane porazených. Za európskych víťazov bývajú pravidelne pasovaní Škandinávci s ich jednotnou školou, ale čísla ukazujú, že s výnimkou Fínska sú skôr priemerní a že dosahujú výsledky porovnateľné napr. s vysoko selektívnym Nemeckom. Fínsko následne privítalo politické delegácie z viacerých európskych krajín, aby ich poučilo o svojom zázraku. Akademickí metodológovia však ukazujú, že tento PISA-zázrak nesúvisí s povahou školského systému, ale so zložením obyvateľstva a sociálnym blahobytom. Pri porovnaní s oblasťami s obdobnými demografickými a socioekonomickými znakmi ako Fínsko dosiahli lepšie výsledky flámske Belgicko, Holandsko, či nemecké Bavorsko. Vzniká tu prvé podozrenie: PISA-zázrak nie je školským zázrakom. Naviac existujú desiatky dôkazov, že pri testovaní PISA sa nedodržujú metodologické pravidlá, nehovoriac o dokázaných prípadoch podvádzania. Aj samotné Fínsko postupovalo napríklad pri výbere vzorky selektívnejšie oproti iným krajinám. Samotný test je metodologicky nastavený veľmi zvláštne. Štatisticky významný rozdiel tu tvorí 9 bodov, čo pri testovaní z matematiky z roku 2003 znamená pol úlohy na 26 testových úloh. Faktor motivácie môže ovplyvniť výsledok až v rozpätí 50 bodov, čo dobre dokladujú faktickí pravidelní víťazi PISA, štáty juhovýchodnej Ázie, kde sú žiaci pod veľkým výkonovým tlakom a úspech je spájaný s národnou hrdosťou (pred vypĺňaním testov napríklad spievajú žiaci hymnu).
Slovenské problémy sú v tomto testovaní následne pochopiteľné. Sú tu však aj ďalšie faktory. Veľká miera nekorešpondovania otázok s obsahovou náplňou nášho vyučovania v daných predmetoch. PISA obsahovo zodpovedá skôr tradičnej náplni angloamerického školstva, kde na rozdiel od kontinentálne európskeho priestoru funguje rozsiahla predmetová a obsahová integrácia. Formát otázok má pri testovaní podobu otázok s voliteľnými odpoveďami, ktoré sa na základných školách u nás používajú zriedka. V angloamerických krajinách napríklad vypustili inštrukciu, že žiaci majú zvoliť vždy len jednu odpoveď, pretože je to pre daných žiakov úplne jasné. V nemecky hovoriacich krajinách, napriek výslovnému upozorneniu, zvolilo takmer 10% žiakov viac ako jednu odpoveď. Vynárajú sa aj jazykové problémy – žiaci zo všetkých krajín musia vyplniť položky v rovnakom čase, no zdrojovými jazykmi testovania sú angličtina a francúzština, z ktorých sa následne vytvárajú národné varianty zadaní. Tieto varianty sú však po preklade obvykle o 10-20% textovo dlhšie a vyžadujú intenzívnejšie čitateľské nasadenie.
.ilúzia reálneho sveta
Reprezentanti PISA-projektu radi zdôrazňujú, že oceňujú vzdelanie orientované na reálne životné potreby a každodenné situácie a že práve ich testovanie vyhodnocuje tento typ vzdelania a takéto schopnosti žiakov. Podrobná analýza testových položiek však ukazuje, že ide o číru ilúziu a že orientácia testovania na životu blízke situácie je nielen predstieraná, ale dokonca aj diskriminujúca. Na ilustráciu vyberme jednu z matematických úloh, s príznačným názvom „Chôdza“. Matematická úloha je zasadená do každodennej reality chôdze, chodiaci majú v úlohe svoje mená, stopy krokov sú dokonca takmer realisticky zobrazené na obrázku. Žiaci majú v tejto „reálnej situácii“ a podľa poskytnutých údajov včítane vzorca vypočítať dĺžku kroku jedného chodca a rýchlosť chôdze druhého chodca. Aká realita sa však v úlohe podľa stanovených údajov žiakom predostiera? Presne taká, že odporuje každodennej skúsenosti a bežnej realite. Údaje sugerujú, že krok človeka je nevyhnutne dlhší keď chôdzu zrýchľuje a obrázok podľa výpočtov reprezentuje mužské chodidlo, ktoré by malo mať 55 cm! Prítomnosť obrázka ako znázornenia reality navyše zvádza k tomu, že je pre riešenie úlohy nevyhnutný, no z hľadiska zadania úlohy je zbytočný a teda aj mätúci. Žiaci, ktorí do riešenia zapoja skúsenostné poznanie, teda nevyhnutne a celkom paradoxne zlyhajú. Úspešní sú tí, ktorí postupujú typickým školským spôsobom – dosadia správne čísla na správne miesta a „realitu“ úlohy úplne odignorujú. Úloh, ktoré v snahe zakomponovať školské poznatky do reality túto realitu skresľujú, nájdeme vo zverejnených balíkoch množstvo. Táto skutočnosť by mohla byť azda len komická, keby nemala vážnejšie dôsledky. Ide totiž o to, že presne takýto typ úloh znevýhodňuje tých žiakov, ktorí sa nechajú zviesť predstieraným každodenným uvažovaním a zapoja do riešenia „sedliacky rozum“. Takéto riešenie vedie k neúspechu, pretože sa napokon predpokladá jasné algoritmické riešenie bez ohľadu na to, či je v súlade s realitou alebo nie je. V publikovanej analýze takéhoto typu matematických úloh (osobitne v národných testových batériách Veľkej Británie) profesor Durhamskej univerzity Barry Cooper jasne dokumentuje, že použitie sugerovaného každodenného úsudku a nerozlišovanie každodenného a školského poznania vedie zákonite u niektorých skupín žiakov k neúspechu, pričom na lep každodennosti sú náchylné sadať deti z nižších sociálnych vrstiev. Tie sú totiž viac viazané na svet bežnej skúsenosti a nie na akademické poznatky. Zavádzajúca každodennosť v projekte PISA isté skupiny detí znevýhodňuje, a sú to dokonca tie, pre ktoré je skúsenostné poznanie dominujúcim modusom „čítania“ reality.
.jazykovo zaťažený inteligenčný test
Úlohy „každodennej reality“ sú v PISA predovšetkým akýmisi „slovnými hrami“, takže dokonca aj v matematickej oblasti či v oblasti prírodovedy ťahajú za kratší koniec slabší čitatelia. Od žiakov sa teda nevyžaduje matematické (či prírodovedné) modelovanie reality, vyžaduje sa poznanie pravidiel testových slovných hier a jemu zodpovedajúce„správne“ čítanie textov zadaných úloh. Hoci čítanie má v testovaní PISA svoju doménu (o tej sa hovorí najčastejšie, keď zalamujeme rukami nad výsledkami čitateľskej gramotnosti našich žiakov), matematické či prírodovedné úlohy sú vlastne tiež redukované na testovo užitočné čítanie. Takže PISA je možno ešte viac o čítaní ako sama deklaruje, avšak znova o redukovanom čítaní na technickú a obsahovo nešpecifickú „prácu s informáciami“. Legitímne sa potom vynára otázka, čo PISA vlastne testuje, aký vzťah má toto testovanie k tomu, čo žiakom skutočne dáva školské vzdelávanie a učenie a čo výsledky PISA môžu vypovedať o úrovni školského vzdelávania v ktorejkoľvek krajine.
Nastavenie jednotlivých oblastí PISA testovania tak, že sa všetky majú vzťahovať k univerzálnemu „riešeniu problémov“ znamená, že sa nielen rozpúšťajú hranice jednotlivých oblastí školského poznávania, ale že vyučované obsahy vzdelávania ustupujú do úzadia v prospech požadovania obsahovo vyprázdnených mentálnych úkonov. Veď už len dobré zvládnutie testových stratégií (napr. vedieť predvídať správnu odpoveď na základe vonkajšieho „výzoru“ ponúkaných odpovedí, vedieť sa strategicky pohybovať hore-dole v testových položkách a pod.) je dôležitou podmienkou úspechu v teste. To spolu s tým, ako PISA konštruuje svoje „úlohy orientované na reálne situácie“ znamená, že základná schopnosť, ktorá sa testuje, je schopnosť orientovať sa v testovej situácii, pretože jedinou reálnou situáciou, v ktorej sa žiak pri PISA testovaní ocitá, je situácia testovania.
No PISA najmä svojim vlastným chápaním gramotnosti (či viacerých gramotností) zďaleka obchádza schopnosti nadobudnuté školským vzdelávaním. Lebo, ako sa ukazuje, jej požiadavky majú skôr charakter požiadaviek rôznorodých inteligenčných testov. Tie merajú všeobecné mentálne schopnosti bez ohľadu na obsahy poznania a kognitívne porozumenie osvojované v škole. Porovnania výkonov v testoch PISA s rôznorodými inteligenčnými testami tento vzťah jasne preukázali. Je teda viac ako jasné, že o reálnych výsledkoch vzdelávania, o učebných efektoch školy a o kvalite vlastného vzdelávacieho systému sa z tohto typu testovania sotva dajú vyčítať spoľahlivé a smerodajné informácie. Podľa slov jedného z najdôslednejších nezainteresovaných analytikov projektu PISA Joachima Wuttkeho je PISA skôr jazykovo zaťažený inteligenčný test, ktorého aplikácia do rozhodovania o vzdelávaní zaváňa silným politickým pochybením. Veľké medzinárodné preteky PISA sú teda síce veľmi populárnou a dobre propagovanou športovou hrou, jej pravidlá však vytvárajú falošný obraz kondície zúčastnených hráčov a nastavujú im príliš pokrivené politické zrkadlo.
Autori sú vysokoškolskí pedagógovia, pôsobia na Trnavskej univerzite.
Článok bol pôvodne uverejnený v týždenníku .týždeň dňa 28. marca 2011 a nájdete ho tu.
Nielen o škole
Webinár: Výhody a riziká domáceho vzdelávania
2.12.2022, Nielen o škole
19.5.2016, Zuzana Zimenová, Nielen o škole
Výzva rodičov a učiteľov poslancom NR SR a ministrovi školstva, vedy, výskumu a športu SR
16.6.2015, Nielen o škole
Školská samospráva je naďalej v ohrození
13.4.2015, Nielen o škole
Pripomienkové konanie končí, ale aktivity proti okliešteniu školskej samosprávy pokračujú
2.4.2015, Nielen o škole
23.3.2015, Nielen o škole
5.9.2014, Marie Stracenská, Nielen o škole
Rebríček kvality vzdelávania Pearson
13.5.2014, Zuzana Zimenová, Nielen o škole
O využití projektu Khan Academy v prostredí bežných škôl
24.4.2014, Zuzana Zimenová, Nielen o škole
Ján Macek: Vytáča ma pasivita kolegýň, mám jej plné zuby
24.3.2014, SME, Nielen o škole
Čo bude formovať podobu vzdelávania?
21.2.2014, Zuzana Zimenová, Nielen o škole
Pedagógovia sa obávajú, že bude ešte horšie
8.12.2013, Anna Chlupíková, Nielen o škole
Pripomienky učiteľov k správe o stave školstva
26.6.2013, Braňo Kočan, Nielen o škole
17.6.2013, Peter Farárik, Nielen o škole
10.6.2013, Ján Macek, Nielen o škole
5.6.2013, Peter Farárik, Nielen o škole
O správe učiteľov o situácii v školstve
25.4.2013, Braňo Kočan, Nielen o škole
Niekoľko postrehov k situácii v slovenskom školstve
21.4.2013, Vlado Crmoman, Nielen o škole
Infovek 2 je pomalý, predražený a už ho v škole nechceme
19.3.2013, Ján Macek, Nielen o škole
Josef Widmer: Nové modely pre náročné povolania
11.3.2013, Neue Zürcher Zeitung, Nielen o škole
Infografika: There is No Homework In Finland
Vladimír Urban: Čím je škola slabšia, tým sú lepšie známky
23.1.2013, SME, Nielen o škole
Otvorený list kritizuje šírenie waldorfu
10.9.2012, Nielen o škole
Martin Mojžiš: Problémom našich škôl nie je málo softvéru, ale veľa nudy
2.2.2012, Vladimír Burjan, Nielen o škole
3.10.2011, Martin Mojžiš, Nielen o škole
Martin Mojžiš kritizuje Planétu vedomostí
16.6.2011, Martin Mojžiš, Nielen o škole
7.6.2011, Nielen o škole
5.4.2011, Ondrej Kaščák a Branislav Pupala, Nielen o škole
2.3.2011, Vladimír Burjan, Nielen o škole
Ministerstvo školstva nerobí správne kroky
14.1.2011, Martin Mojžiš, Nielen o škole
Vratké nohy povinnej angličtiny
26.10.2010, Branislav Pupala, Nielen o škole
6.9.2010, Branislav Pupala, Nielen o škole
Martin Kríž: Školy budú mať iba toľko slobody, koľko si jej vezmú
2.3.2010, Vladimír Burjan, Nielen o škole
7.12.2009, Pavel Sibyla, Nielen o škole
Podľa zdroja z rezortu školstva sa v učebnicovom tendri nevyberalo podľa kritérií...
Ministerstvo školstva nesleduje experimenty na školách
21.10.2009, Zuzana Humajová, Nielen o škole
25.9.2009, SME, Nielen o škole
Základné školy stále nemajú v reformných ročníkoch nové učebnice...
Máme školstvo, aké si zaslúžime
11.9.2009, Pavel Sibyla, Nielen o škole
Školská reforma je Potemkinova dedina
29.6.2009, Martin Hanus, Nielen o škole
Martin Hanus hodnotí školskú reformu po roku...
29.6.2009, Martin Hanus a Eva Čobejová, Nielen o škole
OECD: Učitelia sú málo motivovaní
22.6.2009, HN, Nielen o škole
Vladimír Burjan: Nemám svedomie kritizovať učiteľov
15.6.2009, Martin Hanus a Eva Čobejová, Nielen o škole
Učebnice nebudú v Kalifornii, možno ani u nás
12.6.2009, Eva Čobejová, Nielen o škole
Je veľmi otázne, či aspoň druhé reformné triedy budú mať v septembri nové knižky...
4.6.2009, Martin Mojžiš, Nielen o škole
11.5.2009, Martin Mojžiš, Nielen o škole
INEKO: Učitelia dostali viac slobody, chýbajú im však učebnice
4.5.2009, Michal Rehúš, Nielen o škole
Dávid Králik: Neschopný učiteľ nech má len základný plat
23.3.2009, SME, Nielen o škole
Aký je Váš názor na zmeny v slovnom hodnotení? Napíšte ministrovi!
3.2.2009, Juraj Droppa, Nielen o škole
Reakcie učiteľov na národnú učebnicu
9.1.2009, Nielen o škole
Ján Mikolaj: Chcem školy zmeniť
15.12.2008, Štefan Hríb a Martin Hanus, Nielen o škole
Nebezpečné spoločenstvá, rodina, škola a štát (seminár)
3.12.2008, Miroslav Lojda, Nielen o škole
Protimonopolný úrad, nevadí ti ministerstvo školstva?
21.11.2008, Pavol Minárik ml., Nielen o škole
Martin Mojžiš: Učebnica má zaujať najmä učiteľov
8.11.2008, SME, Nielen o škole
Václav Klaus ml.: Netešte sa na reformu
6.10.2008, Martin Hanus a Eva Čobejová, Nielen o škole
Videokomentár Anny Gottweisovej k reforme a školstvu
16.9.2008, Anna Gottweisová, Nielen o škole
Pozrite si videokomentár učiteľky matematiky Anny Gottweisovej k reforme a školstvu...
8.9.2008, Oľga Zápotočná, Nielen o škole
2.9.2008, Martin Mojžiš, Nielen o škole
18.7.2008, Nielen o škole
Informácie o fyzike, vyučovaní fyziky a príprave učiteľov fyziky...
Prečo som tak skoro alergická na slovo reforma?
8.7.2008, Adriana Markovičová, Nielen o škole
Edičná politika plná pochybností
8.7.2008, Oľga Zápotočná, Nielen o škole
7.7.2008, Pavel Sibyla, Nielen o škole
Nový školský zákon prináša veľké vízie s pochybnou uskutočniteľnosťou...
3.7.2008, Dávid Králik, Nielen o škole
...pohľad obyčajného (m)učiteľa na dlho očakávanú reformu školstva...
9.6.2008, Martin Mojžiš, Nielen o škole
4.6.2008, Martin Mojžiš, Nielen o škole
3.6.2008, Martin Mojžiš, Nielen o škole
2.6.2008, Eva Čobejová, Nielen o škole
27.5.2008, Martin Mojžiš, Nielen o škole
26.5.2008, Martin Mojžiš, Nielen o škole
20.5.2008, Martin Mojžiš, Nielen o škole
19.5.2008, Daniel Hevier, Nielen o škole
13.5.2008, Martin Mojžiš, Nielen o škole
12.5.2008, Martin Mojžiš, Nielen o škole
5.5.2008, Martin Mojžiš, Nielen o škole
2.5.2008, Tomáš Němeček, Nielen o škole
1.5.2008, Martin Mojžiš, Nielen o škole
30.4.2008, Martin Hanus a Eva Čobejová, Nielen o škole
31.3.2008, Peter Zajac, Nielen o škole
24.3.2008, Daniel Bútora a Martin Kríž, Nielen o škole
17.3.2008, Eva Čobejová, Nielen o škole
17.3.2008, Branislav Pupala, Nielen o škole
10.3.2008, Eva Čobejová, Nielen o škole
25.2.2008, Martin Hanus a Eva Čobejová, Nielen o škole
15.1.2008, Martin Mojžiš, Nielen o škole
27.12.2007, Eva Čobejová, Nielen o škole
Reforma vzdelávania alebo kozmetická úprava školstva
5.10.2007, Peter Zajac, Nielen o škole
Branislav Pupala: Škola nemôže riešiť problémy sveta
22.9.2007, Bohumil Synek, Nielen o škole
Šlabikár – najčítanejšia kniha
17.9.2007, Elena Akácsová, Nielen o škole
K Návrhu koncepcie vyučovania cudzích jazykov v základných a stredných školách
25.6.2007, Anna Oslancová a Daniela Krajňáková, Nielen o škole
Učiť piatakov základom ekonómie
6.6.2007, Arthur E. Foulkes, Nielen o škole
25.2.2007, Martin Mojžiš, Nielen o škole
25.2.2007, Miroslav Urban, Nielen o škole
Základný či aplikovaný výskum?
25.2.2007, Jordan Kolarov, Nielen o škole
25.2.2007, Vlado Bužek, Nielen o škole
Čítanie sa učí ako spartakiáda
29.1.2007, Branislav Pupala a Oľga Zápotočná, Nielen o škole
8.1.2007, Martin Kríž, Nielen o škole
13.11.2006, Branislav Pupala, Nielen o škole
15.5.2006, Branislav Pupala, Nielen o škole
Domino reformy vzdelávania - ako ďalej?
3.4.2006, Martin Kríž, Nielen o škole
21.3.2006, Peter Zajac, Nielen o škole
Školský zákon a politická elita
11.3.2006, Peter Zajac, Nielen o škole
6.3.2006, Eva Čobejová, Nielen o škole
27.2.2006, Martin Hanus, Nielen o škole
10.10.2005, Matúš Medo a Martin Mojžiš, Nielen o škole