Vyhodnotenie výsledkov štatistického pozorovania. Kurzy ďalšieho vzdelávania „analýza, interpretácia a využitie výsledkov hodnotiacich postupov v kontexte implementácie federálnych štátnych štandardov všeobecného vzdelávania Metódy odborného hodnotenia kvality testovacích materiálov
Musí byť presne definovaný postup získavania odhadov parametrov populácie (súčet ukazovateľa, priemerná hodnota ukazovateľa, pomery hodnôt ukazovateľa, podiely a pod.). Odhad je hodnota niektorého parametra populácie vypočítaná z údajov z pozorovania vzorky. Odhadom sa rozumie aj vzorec alebo algoritmus na výpočet číselnej hodnoty parametra študovanej populácie odhadovanej zo vzorových údajov.
V prípade pozorovaní založených na vzorkovaní pravdepodobnosti sa odhady zvyčajne vypočítavajú pomocou váh vhodných pre návrh vzorkovania (váhy vzorkovania).
Na kompenzáciu vplyvu systematických chýb (neprijatie odpovede od pozorovacích jednotiek, neúplné pokrytie) na spoľahlivosť výsledkov pozorovania a získanie presnejších hodnôt je možné upraviť odhady vrátane použitia pomocných informácií (napríklad kalibračnej metódy) .
Ak sa v procese hodnotenia používajú pomocné premenné, ich výber musí byť odôvodnený, musia byť korelované s pozorovanými premennými a aktualizované. Použitie konkrétneho modelu postupu posudzovania by sa malo zdokumentovať vrátane základných predpokladov, ktoré model urobil.
Vo vzorových pozorovaniach, ktoré používajú nepravdepodobné vzorky, sa odhady zvyčajne získavajú pomocou vhodných štatistických modelov. V tomto prípade musia byť postupy posudzovania odôvodnené a vytvorené predpoklady musia byť hodnoverné a podľa možnosti otestované.
Odhady parametrov populácie musia byť sprevádzané charakteristikami ich presnosti (variačný koeficient odhadu, stredná kvadratická chyba (MSE), stredná kvadratická (štandardná) výberová chyba), ktoré musia zohľadňovať charakteristiky plánu odberu vzoriek (stratifikácia). , viacstupňový výber atď.), ako aj korekcie zahrnuté do váh. Ak je to možné, mali by odrážať aj iné závažné chyby, ktoré sa vyskytujú počas procesu tvorby štatistiky. Miery presnosti pre odhady najdôležitejších ukazovateľov by sa mali získať pre celú populáciu aj pre hlavné rozvojové úseky. Ak sú vypočítané približnými metódami výpočtu, potom musia byť tieto metódy výpočtu zdokumentované.
Kritériá na zverejňovanie odhadov musia byť stanovené pred ich výpočtom: to znamená, že musí byť stanovená miera chyby v odhade, nad ktorou sa výsledné údaje nezverejňujú.
Postupy hodnotenia výsledkov štatistického pozorovania, ako aj ich uplatňovanie sú podrobne popísané v príslušných častiach metodických materiálov (metodické odporúčania, nariadenia a pod.), predpísaným spôsobom schválené a verejne zverejnené na úradnom mieste. webová stránka Rosstatu.
Postup hodnotenia možno vykonať pomocou špecializovaného alebo štandardného softvéru. Vlastný softvér musí byť predtým a presne otestovaný pred vykonaním konečných hodnotení. Všetky výsledky z procesov hodnotenia musia byť reprodukovateľné (presne alebo v rámci blízkych aproximácií), čo znamená, že ak sa celý proces spracovania opakuje, musia sa dosiahnuť rovnaké výsledky.
Možné možnosti interpretácie výsledkov hodnotiacich postupov. Prípad jednotnej štátnej skúšky. Školiaci kurz „Aktuálne otázky využívania výsledkov hodnotenia vzdelávacích úspechov školákov na rôznych úrovniach vzdelávacieho systému“ September 2013, Jerevan, Arménska republika Sergej Anatoljevič Bočenkov, expert Nezávislej agentúry pre hodnotenie kvality vzdelávania „Leader “, Cheboksary SEKCIA 5
Problém využitia výsledkov celoštátnych skúšok pri riadení kvality vzdelávania. Priemerné skóre jednotnej štátnej skúšky je najbežnejším a akceptovaným ukazovateľom odrážajúcim výsledky vzdelávania. Riziká používania. Ak nie GPA, tak čo? Analýza praxe používania rôznych ukazovateľov výsledkov jednotnej štátnej skúšky: zoskupenie, účel, obmedzenia a riziká používania. Príklady interpretácie výsledkov hodnotiacich procedúr (na príklade Jednotnej štátnej skúšky) pre rôzne skupiny užívateľov (pre učiteľov, pre školy, pre vzdelávací systém). Problém porovnateľnosti výsledkov hodnotiacich postupov. Interpretácia výsledkov hodnotiacich postupov. Základné fixácie. Otázky na diskusiu:
Nemôžete Výsledky Jednotnej štátnej skúšky nie je možné použiť na meranie, sledovanie a hodnotenie kvality výsledkov vzdelávania. Výsledky USE možno použiť na meranie, sledovanie a hodnotenie kvality výsledkov vzdelávania. nepoužívať V medzinárodnej praxi sa rozlišujú tri skupiny hodnotiacich postupov: skúšky, monitorovanie a hodnotenie v triede. Výsledky skúšok sa v manažmente kvality nepoužívajú. Jednotná štátna skúška je „vysoká“ skúška, slúži len na meranie individuálnych výsledkov vzdelávania Prečo sa výsledky jednotnej štátnej skúšky používajú na hodnotenie výsledkov vzdelávania: Pretože neexistuje nič porovnateľnejšie z hľadiska spoľahlivosti, bezpečnosti a validity. Pretože na postup už boli vynaložené prostriedky. Prečo nezískať informácie odtiaľto, keď neexistujú žiadne zdroje na nový postup? Jednotná štátna skúška je záverečná certifikácia absolventov, hlavný postup hodnotenia výsledku Pretože Jednotná štátna skúška je záverečná certifikácia absolventov, hlavný postup hodnotenia výsledku METODICKÝ PROBLÉM: Ako hodnotiť kvalitu vzdelávania na základe o výsledkoch jednotnej štátnej skúšky, ako analyzovať a interpretovať výsledky jednotnej štátnej skúšky? Čo robiť s výsledkami jednotnej štátnej skúšky? Existujú dva uhly pohľadu:
O využívaní výsledkov jednotnej štátnej skúšky 1. Samotné výsledky jednotnej štátnej skúšky bez uvedenia ďalších údajov možno použiť len na dva účely – na ukončenie školskej dochádzky a výber kandidátov na pokračovanie v štúdiu na vysokej škole. 2. Pri hodnotení výkonu učiteľa, školy a vzdelávacieho systému možno výsledky jednotnej štátnej skúšky použiť len v kombinácii s inými údajmi charakterizujúcimi rôzne výsledky výkonu. 3. Správna interpretácia výsledkov jednotnej štátnej skúšky umožňuje ich využitie pri riadení kvality vzdelávania.
Priemerné skóre jednotnej štátnej skúšky je najbežnejším a akceptovaným ukazovateľom vo vzdelávacom systéme Ruskej federácie, ktorý odráža výsledky vzdelávania. Ak sa niečo robí dosť často zle, stane sa to správne. Región Samara ~school120/ege.htm Chuvashia /egeh_2012_chuvashija_sta tisticheskij_sbornik_2_ver.p dfhttp://ege21.ru/ege/metod /egeh_2012_chuvashija_sta tisticheskij_sbornik_8.f. Porovnanie výsledkov USE pre školu s výsledkami pre obec, región, krajinu Dynamika výsledkov USE pre región za tri roky
Použitie priemernej hodnoty je povolené len po posúdení jej typičnosti a spoľahlivosti. Ako vyhodnotiť typickosť a spoľahlivosť priemeru? Priemer musí byť typický, to znamená, že musí odrážať základnú populáciu, z ktorej sa čerpá. Typickosť priemernej hodnoty je nepriamo úmerná stupňu variability (disperzie) nameranej hodnoty. Čím je rad rozptýlenejší, tým menej typický je stredný. Čím väčší je počet meraní v populácii, tým je priemer spoľahlivejší. Stredná štvorcová (alebo štandardná) odchýlka: Štandardná odchýlka je mierou spoľahlivosti priemeru. Čím je táto hodnota menšia, tým lepšie aritmetický priemer odráža celú zastúpenú populáciu. Štandardná odchýlka je mierou spoľahlivosti priemeru. Čím je táto hodnota menšia, tým lepšie odráža aritmetický priemer celú reprezentovanú populáciu. Variačný koeficient: Variačný koeficient je pomer štandardnej odchýlky k aritmetickému priemeru, vypočítaný v percentách. Variačný koeficient je pomer štandardná odchýlka od aritmetického priemeru, vypočítaná v percentách. Hodnota kritéria variačného koeficientu je 33,3 %, to znamená, že ak je V menšie alebo rovné 33,3 %, variácia sa považuje za slabú, a ak je väčšia, je silná. V prípade silnej variácie sa skúmaná štatistická populácia považuje za heterogénnu a priemerná hodnota je atypická a nemožno ju použiť ako všeobecný ukazovateľ tejto populácie. Hodnota kritéria variačného koeficientu je 33,3 %, teda ak V je menšie alebo rovné 33,3 %, odchýlka sa považuje za slabú, a ak je väčšia, za silnú. V prípade veľkej variácie sa štatistická populácia považuje za heterogénnu a priemerná hodnota sa považuje za atypickú a nemožno ju použiť ako všeobecný ukazovateľ tejto populácie.
Priemerné hodnoty a mierka. Sú hodnotiace stupnice rovnaké? Ak sú testy z dvoch predmetov porovnateľné z hľadiska náročnosti a stupnice sú zosúladené, potom je úroveň výcviku v ruštine všetkých absolventov v krajine v priemere vyššia ako v matematike. Ak testy v dvoch predmetoch nie sú rovnaké v obtiažnosti, potom je možných niekoľko možností: Úroveň prípravy v ruštine je vyššia ako v matematike. Úroveň prípravy z matematiky je vyššia ako z ruského jazyka, len test je ťažší. Úroveň prípravy v týchto dvoch predmetoch je približne rovnaká. ? Jednotná štátna skúška 2013
Dve úrovne zvládnutia vzdelávacieho štandardu (USE-2013) podľa metódy FIPI Predmet PB1 (v zátvorke TB1 - skóre na 100-bodovej škále) PB2 (v zátvorke TB2 - skóre na 100-bodovej škále) Ruský jazyk17 zo 64 (36 zo 100)54 zo 64 (73 zo 100) Matematika5 z 32 (24 zo 100)15 z 32 (63 zo 100) Sociálne štúdie15 z 59 (39 zo 100) 48 z 59 (72 zo 100) História13 z 58 (32 zo 100)47 z 58 (72 zo 100) Fyzika11 z 51 (36 zo 100)33 z 51 (62 zo 100) Chémia14 zo 65 (36 zo 100)58 zo 65 (80 zo 100) Biológia17 zo 69 (36 zo 100)60 zo 69 (79 zo 100) Geografia14 z 53 (37 zo 100) 43 z 53 (69 zo 100) Informatika8 zo 40 (40 zo 100) 35 zo 40 (84 zo 100) Cudzie jazyky16 z 80 (20 zo 100) 65 z 80 (82 zo 100) 100) 100) Literatúra8 zo 42 (32 zo 100)36 zo 42 (73 zo 100) „...Uvedený postup nám umožňuje koordinovať výsledky testov rovnako pripravených účastníkov. a zabezpečuje porovnateľnú porovnateľnosť výsledkov skúšok v priebehu rokov.“ PB1 - najnižšie primárne skóre, ktorého získanie znamená, že účastník skúšky ovláda základné pojmy a metódy v príslušnom všeobecnovzdelávacom predmete PB2 - najnižšie primárne skóre, ktorého získanie svedčí o vysokej úrovni prípravy účastníka skúšky , a to prítomnosť systémových vedomostí, zvládnutie komplexných zručností, schopnosť vykonávať tvorivé úlohy
© S.A. Bochenkov Korelácia 100-bodovej škály a úrovne zvládnutia vzdelávacieho štandardu (RF, Jednotná štátna skúška-2013) 70 bodov Porovnanie 100-bodových škál podľa priemerných percentilových hodnotení, alebo čo je základom porovnania priemerného skóre Jednotnej štátnej skúšky medzi subjektmi 63,4 58,6 67, 8 53,5 48,7 72,4 59,5 63,1 1,9 % 2,6 % 7,0 % 4,4 % 6,0 % 6,7 % 3,6 % 1,1 %
Príklad porovnania výsledkov Jednotnej štátnej skúšky dvoch škôl: Profil školy Počet absolventov Priemerný výsledok Jednotnej štátnej skúšky za predpokladu, že všetci absolventi absolvovali všetky predmety s rovnakým výsledkom, rovným TB2 Záver o výsledkoch špecializačného školenia Záver o efektívnosť vysokých škôl na základe kvality prípravy absolventov, ktorí na ne nastúpili školy Škola s inžinierskym profilom (matematika, fyzika + ruský jazyk) 30 (matematika 63 + fyzika 62 + ruský jazyk 73) / 3 = 66,0 S rovnakou kvalitou prípravy (rovná sa skóre TB2, ktorého získanie naznačuje vysokú úroveň prípravy účastníka skúšky, konkrétne prítomnosť systémových vedomostí, zvládnutie komplexných zručností, schopnosť vykonávať kreatívne úlohy) priemerné skóre inžinierstva triedy je NIŽŠIE ako lekárska trieda o 11,3 bodu alebo o 17 %.Všetci absolventi nastúpili na príslušné špecializované vysoké školy pre inžinierske a medicínske vzdelávanie. Lekárska univerzita teda vychádza z hľadiska priemerného skóre o 17 % lepšie ako technická univerzita, pričom kvalita prípravy uchádzačov sa nelíši a rozdiel určuje nerovnomerná 100-bodová škála Škola s lekárskym profilom (biológia, chémia + ruština) 30 (ruština 73 + biológia 79 + chémia 80) / 3 = 77,3
Ak nie GPA, tak čo? Aké ukazovatele má zmysel používať pri analýze výsledkov USE? Skupina ukazovateľov charakterizujúcich rozšírenie záverečného certifikačného konania formou Jednotnej štátnej skúšky a aktívnu účasť absolventov na konaní Jednotnej štátnej skúšky Skupina ukazovateľov charakterizujúcich vývoj minimálnych požiadaviek vzdelávacieho štandardu Skupina ukazovateľov ukazovatele charakterizujúce úroveň a kvalitu výsledkov vzdelávania Skupina ukazovateľov vyjadrujúcich rovnaký prístup k vzdelávaniu primeranej kvality Skupina ukazovateľov charakterizujúcich úroveň zvládnutia obsahu študovaných predmetov (bloky a jednotlivé testované didaktické celky) Konvenčné znaky: - Ukazovateľ nie je príliš informatívny alebo má veľké obmedzenia pri používaní - Indikátor obsahuje chybu, vedie k chybným úsudkom - Indikátor je informatívny, keď sa používa správne
Skupina ukazovateľov charakterizujúcich zvládnutie minimálnych požiadaviek vzdelávacieho štandardu Úroveň zvládnutia vzdelávacieho štandardu na získanie dokladu o strednom (úplnom) všeobecnom vzdelaní - podiel absolventov, ktorí úspešne absolvovali (nad minimálnu hranicu) Jednotné vzdelanie. Štátna skúška z dvoch povinných predmetov, % úroveň zvládnutia vzdelávacieho štandardu na získanie odborného vzdelania - získanie osvedčenia o výsledkoch jednotnej štátnej skúšky s bodovým ohodnotením zo všetkých predmetov potrebných na prijatie na vybranú odbornú školu - podiel absolventov, ktorí úspešne absolvovali (nad minimálnu hranicu) všetky skúšky, ktoré si zvolili formou Jednotnej štátnej skúšky v celkovom počte absolventov, %. Miera zvládnutia vzdelávacieho štandardu pre každý predmet je podiel žiakov, ktorí prekonali minimálnu hranicu (pre každý predmet), %. Široký rozsah použitia, pretože Úlohou učiteľa, školy a školstva je vytvárať podmienky na zvládnutie vzdelávacieho štandardu. Dosiahnutie rovnakých hodnôt ukazovateľov si môže vyžadovať úplne odlišné množstvá a kvalitu vzdelávacích zdrojov v rôznych podmienkach, preto je vhodné porovnávať najmä v rámci klastra. Riziko zníženia úrovne požiadaviek na subjekt na minimum. Riziko prerozdelenia zdrojov v prospech povinných predmetov. Riziko vytvorenia závislosti úrovne minimálnej hranice od celkových výsledkov dosiahnutých absolventmi daného ročníka v Ruskej federácii ako celku. Príklady ukazovateľov: Obmedzenia a riziká:
Skupina ukazovateľov charakterizujúcich úroveň a kvalitu vzdelávacích úspechov Priemerné skóre na 100-bodovej škále (variácie - len v povinných predmetoch, len v odborných predmetoch). Priemerné skóre v každom predmete Podiel absolventov, ktorí získali zodpovedajúci počet bodov Jednotnej štátnej skúšky z predmetov: od 50 do 75 bodov (možnosť - do 50, 51-75); 70 bodov a viac (možnosť – 80 bodov a viac, 90 bodov a viac), %. Podiel (počet) účastníkov, ktorí dosiahli 100 bodov (na 1000 účastníkov), %. Podiel absolventov, ktorí dosiahli výsledok v hlavnom predmete, ktorý zodpovedá vynikajúcej úrovni (platí pre 10 % najlepších výsledkov v Ruskej federácii). Podiel absolventov, ktorí absolvovali skúšku z predmetu s výsledkom rovným TB2 (vysoká úroveň) a vyšším na celkovom počte tých, ktorí tento predmet vyštudovali na profilovej úrovni. Podiel absolventov, ktorí absolvovali všetky predmety vyštudované na špecializačnom stupni, nie je nižší ako hranica špecializačnej prípravy (TB2), možno ho použiť na hodnotenie škôl, ktoré realizujú modely špecializačného vzdelávania na seniorskom stupni. Nevyhnutné pre hodnotenie efektívnosti profilov deklarovaných a realizovaných školou. Riziko neprimeraných požiadaviek na najvyššie možné skóre. Podpora účasti na porušovaní postupu jednotnej štátnej skúšky a informačnej bezpečnosti. Škála sa medzi predmetmi dosť líši a súhrnný prehľad výsledkov viacerých predmetov je nielen neinformatívny, ale môže viesť aj k chybným záverom. Riziko chybných záverov v dôsledku neporovnateľnosti priemerného skóre medzi subjektmi a dynamiky v priebehu rokov. Riziko nahradenia benchmarku pre zvládnutie obsahu vzdelávacieho materiálu benchmarkom pre dosahovanie vysokého skóre. Príklady ukazovateľov: Obmedzenia a riziká:
Čo sú „výsledky USE“? Všetko závisí od uhla pohľadu... Individuálnym výsledkom absolventa v predmete je skóre na 100-bodovej škále a riešiteľnosť úloh Dobré výsledky USE pre učiteľa sú pre všetkých študentov, aby dobre zvládli USE. .. totiž: Aby každý, kto sa na skúšku z predmetu pripravil, na skúšku išiel, ale nepripravený nešiel. Aby každý, kto úspešne prejde Jednotnou štátnou skúškou (splnil minimálnu hranicu 100 %), mal lepšie výsledky ako ostatní učitelia a školy. Tak, aby výsledky jednotnej štátnej skúšky boli adekvátne aktuálnym známkam zadávaným učiteľom. Dobré výsledky USE pre učiteľa znamenajú, že všetci študenti prejdú USE dobre... a to: Aby na skúšku išiel každý, kto sa na skúšku z predmetu pripravil a nepripravený nešiel. Aby každý, kto úspešne prejde Jednotnou štátnou skúškou (splnil minimálnu hranicu 100 %), mal lepšie výsledky ako ostatní učitelia a školy. Tak, aby výsledky jednotnej štátnej skúšky boli adekvátne aktuálnym známkam zadávaným učiteľom. Dobré výsledky jednotnej štátnej skúšky pre školu znamenajú, že všetci študenti školy úspešne zvládnu jednotnú štátnu skúšku... a to: Aby všetci absolventi prijatí na jednotnú štátnu skúšku dostali certifikát a úplný certifikát o výsledkoch jednotnej štátnej skúšky. Tak, aby rozsah predmetov, ktoré si absolventi zvolili, zodpovedal profilu školy. Takže výsledky v základných predmetoch sú v porovnaní s podobnými školami vysoké. Dobré výsledky jednotnej štátnej skúšky pre školu znamenajú, že všetci študenti školy úspešne zvládnu jednotnú štátnu skúšku... a to: Aby všetci absolventi prijatí na jednotnú štátnu skúšku dostali certifikát a úplný certifikát o výsledkoch jednotnej štátnej skúšky. Tak, aby rozsah predmetov, ktoré si absolventi zvolili, zodpovedal profilu školy. Takže výsledky v základných predmetoch sú v porovnaní s podobnými školami vysoké. Dobré výsledky USE pre obec znamenajú, že všetci žiaci školy na území prejdú USE dobre... a to: Že všetci absolventi prijatí na záverečnú certifikáciu úspešne zložili skúšky a získali doklady o vzdelaní. Tak, aby profil sieťových škôl bol potvrdený výsledkami Jednotnej štátnej skúšky tak rozsahom zvolených predmetov, ako aj kvalitou dosiahnutých výsledkov. Aby rozdiely vo výsledkoch USE medzi školami boli menšie ako medzi výsledkami v rámci škôl. Aby nedochádzalo k porušovaniu postupu a anomálnym výsledkom Dobré výsledky Jednotnej štátnej skúšky pre obec znamenajú, že všetci žiaci škôl na území dobre zvládnu Jednotnú štátnu skúšku... a to: Aby všetci absolventi prijatí na záverečná certifikácia úspešne zloží skúšky a získa doklady o vzdelaní. Tak, aby profil sieťových škôl bol potvrdený výsledkami Jednotnej štátnej skúšky tak rozsahom zvolených predmetov, ako aj kvalitou dosiahnutých výsledkov. Aby rozdiely vo výsledkoch USE medzi školami boli menšie ako medzi výsledkami v rámci škôl. Aby nedochádzalo k porušeniam postupu a abnormálnym výsledkom?
Interpretácia výsledkov je určená na jednej strane požiadavkami skupiny používateľov, na druhej strane zdrojmi údajov Požiadavky rôznych skupín používateľov na výsledky hodnotiaceho procesu Účastníci a ich rodičia Učitelia Školská správa Školské orgány Metodické služby Rodičia si vyberajú školu Médiá, miestna komunita Žiadosti rôznych skupín užívateľov o výsledky hodnotenia Postupy Účastníci a ich rodičia Učitelia Školská správa Školské orgány Metodické služby Rodičia vyberajú školu Médiá , miestna komunita Zdroje údajov o výsledkoch hodnotiaceho konania a podmienkach organizácie vzdelávacieho procesu Protokoly o výsledkoch Jednotnej štátnej skúšky (GIA) Predpisy hodnotiaceho konania Špecifikácia a kodifikátory KIM Kodifikátor regionálnych škôl _____________________________ Škola ( kraj) rozvojový program Údaje z iných hodnotiacich konaní a monitoringu Zdroje údajov o výsledkoch hodnotiaceho konania a o podmienkach organizácie vzdelávacieho procesu Protokoly o výsledkoch Jednotnej štátnej skúšky (JPP) Predpisy hodnotiaceho konania Špecifikácie a kodifikátory KIM kodifikátor krajských škôl _____________________________ Program rozvoja školy (kraja) Údaje z iných postupov hodnotenia a monitoringu Informačné produkty obsahujúce interpretáciu výsledkov hodnotiaceho konania Osvedčenie o výsledkoch jednotnej štátnej skúšky Krajská správa o výsledkoch hodnotenia. Odborná správa (podľa predmetu, skupiny žiakov, školy, skupiny škôl). Analytická poznámka pre ministra. Informačná brožúra pre rodičov. Tlačová správa Informačné produkty obsahujúce interpretáciu výsledkov hodnotiaceho konania Certifikát o výsledkoch jednotnej štátnej skúšky Regionálna správa o výsledkoch hodnotenia. Odborná správa (podľa predmetu, skupiny žiakov, školy, skupiny škôl). Analytická poznámka pre ministra. Informačná brožúra pre rodičov. tlačová správa
Interpretácia výsledkov jednotnej štátnej skúšky pre učiteľa Žiadosti o informácie od UČITEĽA o výsledkoch jednotnej štátnej skúšky Úroveň požiadaviek na testové materiály jednotnej štátnej skúšky z predmetu. Dopyt po akademickom predmete ako skúške formou Jednotnej štátnej skúšky medzi jeho študentmi. Študenti ovládajúci vzdelávací štandard na minimálnej úrovni. Študenti ovládajúci vzdelávací štandard na profilovej úrovni. Úspešné zvládnutie jednotlivých didaktických celkov (úloha po úlohe), obsahových blokov, rozvoj zručností a druhov aktivít. Súlad súčasného systému hodnotenia s externým hodnotením. Žiadosti UČITEĽA o informácie o výsledkoch jednotnej štátnej skúšky Úroveň požiadaviek na skúšanie a meranie materiálov jednotnej štátnej skúšky v predmete. Dopyt po akademickom predmete ako skúške formou Jednotnej štátnej skúšky medzi jeho študentmi. Študenti ovládajúci vzdelávací štandard na minimálnej úrovni. Študenti ovládajúci vzdelávací štandard na profilovej úrovni. Úspešné zvládnutie jednotlivých didaktických celkov (úloha po úlohe), obsahových blokov, rozvoj zručností a druhov aktivít. Súlad súčasného systému hodnotenia s externým hodnotením. „Rámec kvality“ práce UČITEĽA vo výsledkoch Jednotnej štátnej skúšky - ak sa predmet študuje na základnej úrovni: zvládnutie vzdelávacieho štandardu na minimálnej úrovni býva 100%; všetci slabo prospievajúci študenti úspešne riešia určitý súbor úloh, ktoré im umožňujú prekonať minimálnu hranicu - ak sa predmet študuje na špecializovanej úrovni: dopyt po predmete je vyšší ako priemer za územie a podobné vzdelávacie inštitúcie; úroveň vzdelania na minimálnej úrovni 100 %; zvládnutie vzdelávacieho štandardu na úrovni profilu je vyššie ako priemer za územie a pre podobné školy je súčasný systém hodnotenia adekvátny externému hodnoteniu. „Rámec kvality“ práce UČITEĽA vo výsledkoch Jednotnej štátnej skúšky - ak sa predmet študuje na základnej úrovni: zvládnutie vzdelávacieho štandardu na minimálnej úrovni býva 100%; všetci slabo prospievajúci študenti úspešne riešia určitý súbor úloh, ktoré im umožňujú prekonať minimálnu hranicu - ak sa predmet študuje na špecializovanej úrovni: dopyt po predmete je vyšší ako priemer za územie a podobné vzdelávacie inštitúcie; úroveň vzdelania na minimálnej úrovni 100 %; zvládnutie vzdelávacieho štandardu na úrovni profilu je vyššie ako priemer za územie a pre podobné školy je súčasný systém hodnotenia adekvátny externému hodnoteniu.
Príklad interpretácie výsledkov jednotnej štátnej skúšky pre učiteľa. Riešiteľnosť úlohy po jednotlivých problémoch. Grafickým vyjadrením úspešnosti, výsledkom testu, ktorý vykonala skupina žiakov, je profil riešiteľnosti, ktorý zobrazuje úspešnosť splnenia každej úlohy. V porovnaní s koridorom očakávanej riešiteľnosti je vidieť, ktoré témy boli spracované lepšie, ktoré horšie a ktoré sa ukázali ako neúspešné. Prax analýzy výsledkov skúšok v kontexte individuálnej školy, triedy a učiteľa dáva rôzne profily pre riešiteľnosť úloh.
Príklad interpretácie výsledkov jednotnej štátnej skúšky pre učiteľa. Výsledky zvládnutia obsahových blokov kurzu a rozvoj základných zručností. FYZIKA RUSKÉHO JAZYKA 71,9 % 43,8 % 69,3 % 65,2 % 72,3 % Úlohy vysokej zložitosti Úlohy základnej a pokročilej úrovne zložitosti Metódy poznávania Kvantová fyzika Elektrodynamika Molekulárna fyzika Mechanika
Príklad interpretácie výsledkov jednotnej štátnej skúšky pre učiteľa. Skupiny študentov podľa úrovne pripravenosti na Jednotnú štátnu skúšku 2012 z fyziky. Vysoká úroveň prípravy na jednotnú štátnu skúšku: vedomosti a zručnosti postačujú na úplné pokračovanie vo vzdelávaní na špecializovanej univerzite s pomerne vysokou konkurenciou. Zvýšená úroveň prípravy na jednotnú štátnu skúšku: vedomosti a zručnosti postačujú na pokračovanie vo vzdelávaní v špecializovaných odboroch na univerzitách s priemernou úrovňou požiadaviek. Základná úroveň prípravy na jednotnú štátnu skúšku: vedomosti, zručnosti a metódy činnosti spĺňajú požiadavky normy na minimálnej možnej úrovni. Do skupiny so základným stupňom prípravy sú študenti, ktorí sa môžu ďalej vzdelávať v špecializačných odboroch v neziskových a stredných odborných učilištiach alebo si zvoliť smer štúdia na vysokej škole, kde tento predmet nie je špecializovaný. Nízka úroveň prípravy na jednotnú štátnu skúšku: riziková skupina, pretože nesystematickosť a fragmentárnosť ich vedomostí im neumožňuje prekonať minimálnu hranicu na získanie osvedčenia o výsledkoch jednotnej štátnej skúšky. Podiel absolventov, ktorí úspešne vykonali Jednotnú štátnu skúšku z predmetu z celkového počtu absolventov, ktorí tento predmet absolvovali - 100 % Podiel absolventov, ktorí zložili Jednotnú štátnu skúšku z predmetu s výsledkom zodpovedajúcim pokročilej úrovni resp. vyšší z celkového počtu absolventov, ktorí študovali predmet na špecializačnom stupni - 81,25 %
Interpretácia výsledkov Jednotnej štátnej skúšky pre školu (správa, pedagogický zbor, žiaci, rodičia, spoločnosť) Žiadosti o informácie ŠKOLY o výsledkoch Jednotnej štátnej skúšky Zodpovedá deklarovaný profil školy rozsahu predmetov, ktoré si absolventi zvolili? zložiť jednotnú štátnu skúšku? Aká je úroveň zvládnutia vzdelávacieho štandardu na minimálnom stupni (podiel absolventov, ktorí úspešne zložili dve povinné skúšky, podiel absolventov, ktorí úspešne zložili všetky skúšky formou Jednotnej štátnej skúšky)? Aká je úroveň zvládnutia vzdelávacieho štandardu na profilovej úrovni (percento absolventov, ktorí úspešne absolvovali všetky predmety študované na profilovej úrovni s výsledkom zodpovedajúcim pokročilej úrovni (PB 2) a vyššie)? Je súčasný systém hodnotenia používaný učiteľmi v súlade s externým hodnotením? Aké je umiestnenie školy v rebríčku podľa uvedených ukazovateľov medzi školami v meste (okrese) a medzi podobnými (klastrovými) školami v kraji? Aká je dynamika hodnôt kľúčových ukazovateľov? Žiadosti ŠKOLY o informácie o výsledkoch Jednotnej štátnej skúšky Zodpovedá deklarovaný profil školy rozsahu predmetov, ktoré si absolventi zvolili na vykonanie Jednotnej štátnej skúšky? Aká je úroveň zvládnutia vzdelávacieho štandardu na minimálnom stupni (podiel absolventov, ktorí úspešne zložili dve povinné skúšky, podiel absolventov, ktorí úspešne zložili všetky skúšky formou Jednotnej štátnej skúšky)? Aká je úroveň zvládnutia vzdelávacieho štandardu na profilovej úrovni (percento absolventov, ktorí úspešne absolvovali všetky predmety študované na profilovej úrovni s výsledkom zodpovedajúcim pokročilej úrovni (PB 2) a vyššie)? Je súčasný systém hodnotenia používaný učiteľmi v súlade s externým hodnotením? Aké je umiestnenie školy v rebríčku podľa uvedených ukazovateľov medzi školami v meste (okrese) a medzi podobnými (klastrovými) školami v kraji? Aká je dynamika hodnôt kľúčových ukazovateľov? Čo znamená byť „dobrou školou“ na základe výsledkov jednotnej štátnej skúšky? Ide o školu, ktorej absolventi si aktívne vyberajú skúšky formou Jednotnej štátnej skúšky spomedzi profilových predmetov školy, ktoré potrebujú na ďalšie vzdelávanie. Ide o školu, kde všetci absolventi úspešne absolvujú dve povinné skúšky vo forme Jednotnej štátnej skúšky (ruský jazyk a matematika). Je to potrebné na získanie dokladu o stredoškolskom (úplnom) vzdelaní. Ide o školu, ktorej všetci absolventi úspešne zložili všetky skúšky (študované na profilovej úrovni) formou Jednotnej štátnej skúšky (povinná a voliteľná nad minimálnu hranicu), t.j. získal úplný certifikát o výsledkoch jednotnej štátnej skúšky pre súťaž po prijatí na zvolenú špecializáciu. ide o školy, ktoré poskytujú všeobecne vysokú úroveň vzdelávania vo všetkých predmetoch, najmä v odborných predmetoch. Ide o školu, ktorá vykazuje pozitívnu dynamiku alebo stabilitu vo vysokých výsledkoch na každej z uvedených pozícií. Čo to znamená byť „dobrou školou“ na základe výsledkov jednotnej štátnej skúšky? Ide o školu, ktorej absolventi si aktívne vyberajú skúšky formou Jednotnej štátnej skúšky spomedzi profilových predmetov školy, ktoré potrebujú na ďalšie vzdelávanie. Ide o školu, kde všetci absolventi úspešne absolvujú dve povinné skúšky vo forme Jednotnej štátnej skúšky (ruský jazyk a matematika). Je to potrebné na získanie dokladu o stredoškolskom (úplnom) vzdelaní. Ide o školu, ktorej všetci absolventi úspešne zložili všetky skúšky (študované na profilovej úrovni) formou Jednotnej štátnej skúšky (povinná a voliteľná nad minimálnu hranicu), t.j. získal úplný certifikát o výsledkoch jednotnej štátnej skúšky pre súťaž po prijatí na zvolenú špecializáciu. ide o školy, ktoré poskytujú všeobecne vysokú úroveň vzdelávania vo všetkých predmetoch, najmä v odborných predmetoch. Ide o školu, ktorá vykazuje pozitívnu dynamiku alebo stabilitu vo vysokých výsledkoch na každej z uvedených pozícií.
Neposkytuje kvalitné školenia v obľúbených predmetoch (biológia, chémia). poskytuje vysokú úroveň prípravy tak v odborných predmetoch (angličtina, náuka o spoločnosti) ako aj v iných predmetoch. okrem obľúbenej fyziky poskytuje vysokú úroveň takmer vo všetkých predmetoch. Príklad interpretácie výsledkov Jednotnej štátnej skúšky pre ŠKOLU. Súlad medzi dopytom po akademických predmetoch a kvalitou prípravy na Jednotnú štátnu skúšku
Interpretácia výsledkov Jednotnej štátnej skúšky z riadenia vzdelávacích systémov (mestská, krajská samospráva) Žiadosti o informácie od orgánov štátnej správy o výsledkoch Jednotnej štátnej skúšky v školstve obce, kraja Spoľahlivosť postupu pre vykonávanie Jednotnej štátnej skúšky na území (porušenie, falšovanie). Pokrytie stredoškolského (úplného) vzdelania pre žiakov príslušného veku inštitúciami systému - zvládnutie vzdelávacieho štandardu. Rovnaký prístup k vzdelaniu primeranej kvality. Identifikácia rizikových skupín medzi kategóriami žiakov, určenie stupňa depresie území, identifikácia škôl pôsobiacich v náročných podmienkach. Uspokojovanie potrieb obyvateľstva vo všeobecnom a špecializovanom vzdelávaní, ktoré zabezpečuje sieť škôl. Kontrola kvality a hodnotenie výkonu školy. Efektívne využitie sieťových zdrojov. Žiadosti orgánov štátnej správy o výsledky Jednotnej štátnej skúšky v školstve obce, kraja Spoľahlivosť postupu pri vykonávaní Jednotnej štátnej skúšky v území (priestupky, falšovanie). Pokrytie stredoškolského (úplného) vzdelania pre žiakov príslušného veku inštitúciami systému - zvládnutie vzdelávacieho štandardu. Rovnaký prístup k vzdelaniu primeranej kvality. Identifikácia rizikových skupín medzi kategóriami žiakov, určenie stupňa depresie území, identifikácia škôl pôsobiacich v náročných podmienkach. Uspokojovanie potrieb obyvateľstva vo všeobecnom a špecializovanom vzdelávaní, ktoré zabezpečuje sieť škôl. Kontrola kvality a hodnotenie výkonu školy. Efektívne využitie sieťových zdrojov. Čo to znamená mať „dobrý vzdelávací systém“ založený na výsledkoch jednotnej štátnej skúšky? Postup pri vykonávaní jednotnej štátnej skúšky je chránený, vo výsledkoch jednotnej štátnej skúšky sa nepozorujú žiadne abnormálne výsledky. Všetci absolventi prijatí na záverečnú certifikáciu úspešne absolvujú skúšky a získajú doklady o vzdelaní. Rozdiely vo výsledkoch medzi školami sú nižšie ako medzi výsledkami v rámci škôl. Identifikovali sa rizikové skupiny v populácii študentov, určil sa stupeň depresie každého prvku územia a existujú údaje o pracovných podmienkach každej školy. Profil škôl potvrdzujú výsledky Jednotnej štátnej skúšky, čo sa týka rozsahu zvolených predmetov, ako aj kvality dosiahnutých výsledkov. Všeobecné vzdelávanie a odborná príprava poskytovaná sieťou škôl zodpovedá potrebám obyvateľstva. Čo to znamená mať „dobrý vzdelávací systém“ založený na výsledkoch jednotnej štátnej skúšky? Postup pri vykonávaní jednotnej štátnej skúšky je chránený, vo výsledkoch jednotnej štátnej skúšky sa nepozorujú žiadne abnormálne výsledky. Všetci absolventi prijatí na záverečnú certifikáciu úspešne absolvujú skúšky a získajú doklady o vzdelaní. Rozdiely vo výsledkoch medzi školami sú nižšie ako medzi výsledkami v rámci škôl. Identifikovali sa rizikové skupiny v populácii študentov, určil sa stupeň depresie každého prvku územia a existujú údaje o pracovných podmienkach každej školy. Profil škôl potvrdzujú výsledky Jednotnej štátnej skúšky, čo sa týka rozsahu zvolených predmetov, ako aj kvality dosiahnutých výsledkov. Všeobecné vzdelávanie a odborná príprava poskytovaná sieťou škôl zodpovedá potrebám obyvateľstva.
Príklad interpretácie výsledkov Jednotnej štátnej skúšky škôl v rámci jednej z obcí kraja: Klaster Počet absolventov Podiel absolventov, ktorí úspešne absolvovali dve povinné skúšky vo forme Jednotnej štátnej skúšky (nadprahové) “ +“ - VŠETCI absolventi zvládli štandard; "-" - NIE VŠETCI absolventi zvládli normu Podiel absolventov, ktorí úspešne absolvovali všetky skúšky vo forme Jednotnej štátnej skúšky (nadprahov) Kvalita prípravy v povinných predmetoch. Priemerné skóre v dvoch predmetoch Kvalita odborného výcviku. Podiel absolventov, ktorí absolvovali všetky výberové skúšky s výsledkami nad profilovou úrovňou Kvalita profilovej prípravy. Podiel skúšok s výsledkami nad úrovňou profilu. Skupina podľa kumulatívnych výsledkov Jednotnej štátnej skúšky 2012 MBOU "Gymnázium A" ,0%+92,1%58,267,9%21,3%1 MBOU "Stredná škola A" ,0%+96,8%59,016,4%17,3% 1 MBOUSŠ "Stredná škola BOU" " ,0%+97,1%54,324,4%13,8%1 MBOU "Stredná škola V" ,0%+97,6%57,102,4%13,0%1 MBOU "Stredná škola X s" UIOP" ,0%+95,8%61,520,0% 18,1%2 MBOU "Stredná škola G" ,0%+90,9%46550,0% 2 MBOU "SOŠ D" ,0%+79,6% 53087,1%14,4%3 Mestská rozpočtová vzdelávacia inštitúcia "SŠ E,0%+82,5%50 %6,8%3 Mestská rozpočtová vzdelávacia inštitúcia "Stredná škola Zh",0%+78,0%47,642,0%6,7 %3 MAOU "Škola I s UIOP" ,0%+91,4%52,720,0%4,5%3 MBOU "Škola K s UIOP" , 0%+90,0%50,200,0%3,4%3 MBOU "SOSH L" 26198,4% -86,9%53,003,3%9,6%3 MBOU "V(S)OSH? "62588,0% -60,0%38,340,0% 3 MBOU SOŠ M" 25998,3% -74,6%47,800,0% 4 Školy, ktoré poskytovali svojim absolventom nielen minimálnu úroveň zvládnutia vzdelávacieho štandardu, ale dosahovali aj vysoké výsledky v špecializačnej príprave 35,5% absolventov kraja Školy, ktoré poskytli svojim absolventom nielen minimálnu úroveň zvládnutia vzdelávacieho štandardu, ale dosiahli vysoké výsledky v špecializačnom vzdelávaní 35,5 % absolventov kraja Školy s nízkymi výsledkami v niektorých ukazovateľoch USE a vysokými výsledkami v iných – školy s nestabilnými výsledkami a rôznymi problémami 33,7 % absolventov kraja Školy s nízkymi výsledkami v niektorých ukazovateľoch USE a vysokými inými – školy s nestabilnými výsledkami a rôznymi problémami 33,7 % absolventov kraja Školy poskytujúce len minimálnu všeobecnovzdelávaciu prípravu 17,8 % absolventov odboru kraj Školy, ktoré poskytujú len minimálne všeobecné vzdelanie 17,8 % absolventov kraja Školy s nízkou mierou využitia na všetkých pozíciách 13,0 % absolventov kraja školy s nízkou mierou využitia na všetkých pozíciách 13,0 % absolventov kraja Interpretácia výsledkov postupov posudzovania. Hlavné poznámky: Analýza a interpretácia výsledkov hodnotiaceho procesu je určená na jednej strane požiadavkami skupiny potenciálnych užívateľov a na druhej strane dostupnými zdrojmi údajov. Požiadavky na analytické materiály na základe výsledkov hodnotiaceho postupu sú rôzne a závisia od bodu, v ktorom sa prijímajú rozhodnutia manažmentu, t. chápanie výsledku hodnotiaceho postupu na každej úrovni riadenia a pre každú žiadosť môže byť odlišné. Pre cielenú prípravu analytiky je potrebné čo najpresnejšie chápať, na aké otázky by chceli zástupcovia tejto užívateľskej skupiny dostať odpovede a aké sú kritériá (charakteristiky) kvality hodnoteného objektu. Pre každú skupinu užívateľov je potrebné aplikovať špeciálny model na analýzu a interpretáciu výsledkov hodnotiaceho procesu a vlastný systém kľúčových ukazovateľov. Ukazovatele by mali odrážať stav danej oblasti práce a z pohľadu, v ktorom manažér pracuje, pretože Na základe týchto ukazovateľov buduje nielen svoje aktivity, ale na ovplyvňovanie týchto ukazovateľov využíva aj všetky zdroje, ktoré má k dispozícii.
Súbor postupov hodnotenia. Ako porovnávať výsledky? Porovnanie výsledkov, ktoré preukázal každý účastník (rovnaká skupina účastníkov) v rôznych postupoch hodnotenia Pripravenosť žiakov 1. ročníka na štúdium v škole Hodnotenie v rámci triedy, monitorovanie školy Pripravenosť žiakov 5. ročníka na štúdium na základnej škole Hodnotenie v rámci triedy, monitorovanie školy štátny hodnotiaci test absolventov 9. ročníka Vnútrotriedne hodnotenie, školský monitoring Výsledky predmetových olympiád Jednotnej štátnej skúšky absolventov 11. ročníka Sledovanie vzdelávacích a pracovných dráh absolventov 11. ročníka Porovnanie výsledkov jednotlivých hodnotiacich konaní skupinou účastníkov vhodný vek z rovnakej školy (obce atď.) Súbor postupov externého hodnotenia by sa mal doplniť o hodnotenie v triede a rôzne monitorovanie….
Porovnateľnosť výsledkov viacerých postupov posudzovania navzájom. Možnosti riešenia problému. Zmeny v samotných postupoch posudzovania: Návrh postupov posudzovania ako súčasti jedného komplexu OSOKO. Vzájomná kompatibilita databáz jednotlivých výsledkov rôznych postupov posudzovania. Zavedenie systému elektronického portfólia pre študentov. Použitie špeciálnych metód analýzy: Jednotnosť metodiky výpočtu kľúčových ukazovateľov v rôznych hodnotiacich postupoch (jednotnosť štruktúry modelov hodnotenia). Prostredníctvom vhodných systémov indikátorov, stanovenia kritérií kvality pre efektívneho učiteľa, dobrú školu a vzdelávací systém. Použitie priemerných a relatívnych hodnôt, korekčných faktorov, metód prepočtu atď. Berúc do úvahy kontextové informácie. Využitie systému úrovní na interpretáciu výsledkov: – Identifikácia úrovní na základe percentilového prístupu – Identifikácia dvoch prahových skupín účastníkov – podiel účastníkov, ktorí úspešne zložili Jednotnú štátnu skúšku z predmetu (nad minimálnou hranicou základnej úrovne) a podiel účastníkov, ktorí prekročili minimálnu hranicu úrovne profilu spomedzi tých, ktorí študovali predmet na úrovni profilu.
PRÍKLAD: Národný program hodnotenia vzdelávania NAPLAN (Austrália) pre žiakov 3., 5., 7. a 9. ročníka Ako interpretovať výsledky Snímka z prezentácie I.A. Waldman edu.ru/trainings/study/226
ĎAKUJEM ZA TVOJU POZORNOSŤ! Sergej Anatoljevič Bočenkov Čeboksary, záliv
Syritsyna Tatyana Nikolaevna,
Zástupca riaditeľa pre výchovnú prácu
MBOU "Stredná škola Južné Podolsk"
Mestská časť Cherlak
Omská oblasť
Využívanie výsledkov hodnotiacich postupov
pri zlepšovaní kvality vzdelávania
Vytvorenie systému hodnotenia kvality vzdelávania je jednou z kľúčových priorít rozvoja vzdelávania v Ruskej federácii. Čoraz viac sa uznáva, že meranie výsledkov študentov je potrebné nielen na účely monitorovania, ale aj na zlepšenie kvality vzdelávania.
Ako by sa mali využívať výsledky hodnotiacich postupov pri riadení kvality vzdelávania?
Výsledky hodnotiacich postupov by mali slúžiť ako základ pre skvalitnenie výučby akademických predmetov; zvyšovať povedomie, rozvíjať modely rodičovského hodnotenia a prijímať informované rozhodnutia o výbere vzdelávacej trajektórie dieťaťa.
Každá vzdelávacia organizácia má v súčasnosti vytvorený základný vzdelávací program, ktorý určuje hlavné usmernenia pre pedagogický zbor pri dosahovaní kvality. Výsledky hodnotiacich postupov využívame pri riešení problémov premietnutých do hlavného vzdelávacieho programu školy, ako aj na zvýšenie efektivity celého kolektívu.
V súčasnosti sa vo vzdelávacom systéme formuje komplexný systém hodnotenia kvality vzdelávania, ktorý zahŕňa OGE, Jednotnú štátnu skúšku, celoruské testovanie, národné a medzinárodné štúdie kvality vzdelávania, ako aj štúdium učiteľských kompetencií. .
Na základnej škole sa hodnotiace postupy vykonávajú vo forme komplexnej práce, ktorá umožňuje identifikovať úroveň formovania univerzálnych vzdelávacích akcií.
Komplexné prierezové práce písali žiaci 1.-3. Žiaci 4. ročníka sa zúčastnili celoruského testu.
Tento postup hodnotenia bol vykonaný s cieľom posúdiť kvalitu základného vzdelávania v škole. Hlavnou črtou VPR je, že umožňuje komplexný pohľad na výsledky vzdelávania: nehodnotí sa len dosiahnutie plánovaných výsledkov v jednotlivých predmetoch, ale aj hlavné metapredmetové výsledky, ktoré sú dôležité pre hodnotenie pripravenosti. pokračovať vo vzdelávaní na základnej škole.
Študenti MBOU "SOŠ Južné Podolsk" preukázali vysokú kvalitu vedomostí vo všetkých predmetoch: v ruskom jazyku - 88% so 100% pokrokom, v matematike - 66% s 88% pokrokom, v okolitom svete - 66% so 100 % pokroku. Na základe výsledkov práce bolo prijaté rozhodnutie pokračovať vo vzdelávaní školákov na úrovni základného všeobecného vzdelania a boli vytvorené pedagogické odporúčania pre individuálnu podporu žiakov už v 5. ročníku. Výsledky VPR môžu byť použité ako podklady, keď zamestnávateľ pripravuje žiadosti pedagogických zamestnancov o certifikáciu.
Výsledky VPR 2016 sa trochu líšia od výsledkov priebežnej certifikácie najmä v okolitom svete.
Učitelia základných škôl tento nesúlad výsledkov zohľadňujú pri stanovení systému opatrení na zvýšenie objektivity hodnotenia vedomostí žiakov, svoje úsilie zameriavajú na aktívnejšie štúdium metodických odporúčaní pre prípravu na záverečnú atestáciu z predmetov, resp. aktívne používanie školiacich materiálov na hodinách, ale čo je najdôležitejšie - Používajú produktívnejšie metódy práce na rozvoj silných a stabilných vedomostí dieťaťa o predmetoch.
Na základe výsledkov VPR boli učiteľom základných škôl dané tieto odporúčania:
1. Venujte pozornosť typickým chybám, ich príčinám a možným riešeniam.
2. Zvýšiť osobnú zodpovednosť každého učiteľa v dôsledku práce, aby žiaci získali základné vedomosti, zručnosti a schopnosti určené programom a vzdelávacími štandardmi pre ruský jazyk.
3. Objektívne hodnotiť prácu študentov, riadiac sa prijatými hodnotiacimi štandardmi.
4. Pripraviť individuálne programy (vývojové trajektórie) pre študentov, ktorí ukončili VPR s veľmi nízkymi výsledkami a pre študentov, ktorí ukončili VPR s dosť vysokými výsledkami.
5. Vykonajte skúšobnú prácu na základe materiálov banky otvorených úloh NIKO, VPR s následnou analýzou výsledkov (identifikáciou dynamiky výsledkov vzdelávania).
Ďalším dôležitým prvkom systému hodnotenia kvality vzdelávania je štátna záverečná certifikácia.
Výsledky OGE a Jednotnej štátnej skúšky sú prostriedkom na zhrnutie a zároveň základom pre ročnú analýzu kvality vzdelávania v kontexte všeobecnovzdelávacích predmetov v škole. Protokoly s výsledkami OGE a Jednotnej štátnej skúšky prezentujú výsledky jednotlivých predmetov, riešiteľnosť každej úlohy, primárne a výsledné skóre. Podrobíme ich komplexnému spracovaniu a generujeme štatistické informácie o predmetoch a témach.
Výber konkrétneho predmetu absolventmi nám umožňuje určiť profesijné zameranie absolventov.
Všeobecné výsledky štátnej záverečnej certifikácie absolventov9,11 stupňa zahŕňajú ukazovatele, na základe ktorých zisťujeme úroveň všeobecnovzdelávacej prípravy našich absolventov.
Výsledky školy porovnávame s ukazovateľmi za okres a kraj. V akademickom roku 2015-2016 sa štátnej záverečnej atestácie zúčastnilo 24 žiakov: 15 deviatakov a 9 absolventov 11. ročníka.
1 študent 9. ročníka získal vysvedčenie o základnom všeobecnom vzdelaní s vyznamenaním, 2 absolventi boli ocenení medailou Ruskej federácie „Za mimoriadne úspechy v učení“.
Mnohí absolventi majú dva nezávislé odborné posudky z povinných predmetov (keďže Jednotnú štátnu skúšku robia tí žiaci jedenásteho ročníka, ktorí robili Jednotnú štátnu skúšku pred dvoma rokmi). Následne to môže byť použité na určenie individuálnej dynamiky každého študenta v matematike alebo ruštine.
Vykonávame tiež výskum na porovnanie súčasných a externých hodnotení. Dátové štatistiky v tejto oblasti umožňujú vidieť systém súčasného hodnotenia učiteľov v rámci jednotných hodnotiacich štandardov. Štvrťročné, polročné a ročné známky v predmete pridelenom učiteľom korelujú so skóre OGE a USE. Škola tak vytvorila systém efektívneho využívania štatistickej analýzy výsledkov štátnej záverečnej certifikácie, ktorý je neoddeliteľnou súčasťou hodnotenia kvality vzdelávania.
Pozrime sa na niektoré výsledky Jednotnej štátnej skúšky a Jednotnej štátnej skúšky za niekoľko rokov.
1. Výsledky jednotnej štátnej skúšky a odborné sebaurčenie absolventov:
Skúmaním preferencie výberu všeobecnovzdelávacích odborov absolventmi SOŠ Južno-Podolsk je možné určiť trendy vo formovaní spoločenskej objednávky a reštrukturalizácii trhu vzdelávacích služieb v jednotnom systéme štátnych skúšok. Štatistiky jednotnej štátnej skúšky ukazujú, že väčšina absolventov si vyberá jednotnú štátnu skúšku zo sociálnych vied na druhom mieste -ruská história , biológia, fyzika.
Preto je potrebné v týchto predmetoch nielen posilňovať úroveň pripravenosti v triede, ale poskytovať aj doplnkové vzdelávacie služby, ktoré prispejú k implementácii princípu dosahovania kvality – „Customer Focus“. Výsledky diagnostiky ukázali, že absolventi 11. ročníkov SOŠ Južno-Podolsk si v posledných rokoch vyberali najmä odbory pedagogických a technických univerzít, absolventi 9. ročníkov nastupujú na stredné odborné učilištia najmä v odboroch kuchár. automechanik a strojník. vodič traktora.“ Po analýze našich výsledkov a porovnaní výsledkov Jednotnej štátnej skúšky v roku 2016 s výsledkami Jednotnej štátnej skúšky v roku 2015 sme pochopili, že je potrebné organizovať prácu na vytvorení jednotného vzdelávacieho priestoru v rámci rozvoja poľnohospodárstva. -priemyselný klaster. V súčasnosti tu na sebe vidíme „problémové problémy“, ktoré sa prejavujú nielen poklesom výsledkov jednotnej štátnej skúšky a nízkym hodnotením absolventov pri výbere predmetov ako geografia a chémia, ale aj všeobecne hromadením ľudských zdrojov pre poľnohospodárstvo. To platí najmä pre náš región. Rozvojovou úlohou na rok 2017 je preto zvýšiť špecializovanú prípravu absolventov 9. a 11. ročníka v týchto predmetoch.
2. Identifikácia úrovne zvládnutia tém v jednotlivých predmetoch(jednotná štátna skúška na základe štatistických údajov z kontrolných a meracích materiálov umožňuje študovať úroveň zvládnutia tém v predmetoch):
V procese realizácie tejto práce sme dospeli k záveru, že jednotná štátna skúška nám umožňuje získať informácie nielen o úrovni výchovno-vzdelávacej prípravy absolventov v jednotlivých predmetoch, ale aj o kvalite práce učiteľa. , v MBOU „SOŠ Južno-Podolsk“ je už niekoľko rokov stabilná, medzi školským a okresným priemerom je výrazný nesúlad v priemernom skóre v matematike. To znamená, že priemerné skóre školy je výrazne nižšie ako okresné, čo naznačuje, že práca učiteľov matematiky nie je dostatočne seriózna. Na základe tejto skutočnosti sa pravidelne prijímajú rozhodnutia manažmentu, výsledky tejto práce sú viditeľné už pri maturite 9. ročníka na OGE z matematiky, kde sa priemerné skóre školy mierne líši od priemeru okresu.
Porovnávacie údaje získané ako výsledok monitorovacích štúdií výsledkov Jednotnej štátnej skúšky umožňujú určiť poradie absolventov a učiteľov. Na stretnutiach ShMO sa zisťujú dôvody úspešného a neúspešného absolvovania skúšok absolventmi,udalosti sú plánované skvalitňovať vzdelávanie a poskytovať metodickú pomoc učiteľom. Medzi hlavné formy organizácie práce založenej na diagnostike profesijných ťažkostí učiteľov, analýze a monitorovaní výsledkov jednotnej štátnej skúšky patria:
Vypracovanie programu metodickej podpory vzdelávacieho procesu za účelom metodickej pomoci a podpory pedagógom pri vytváraní kvalitného systému prípravy študentov na Jednotnú štátnu skúšku a Jednotnú štátnu skúšku;
Vytvorenie databázy použitých učebných materiálov;
Využitie pedagogických technológií, organizácia výberových predmetov v rámci prípravy na jednotnú štátnu skúšku.
Každá z týchto otázok sa posudzuje na zasadnutiach metodických združení na začiatku nového akademického roka, bol vyvinutý algoritmus prípravy študentov na štátnu akademickú skúšku - 2017. Som si istý, že aj nezávislé hodnotenie individuálnych vzdelávacích úspechov umožní učiteľ upraviť súčasný systém hodnotenia, ktorý používa, s prihliadnutím na požiadavky externého hodnotenia.
Moderné prístupy k hodnoteniu kvality vzdelávania rodičov strašia, majú veľa otázok, obávajú sa, ako pomôcť vlastnému dieťaťu v príprave na dôležitú skúšku. Keďže v súčasnosti sa prostredníctvom aktivít Rady školy poskytujú špecifické formy implementácie práv rodičov na spoluriadenie vzdelávacieho procesu, viacrozmerná spolupráca medzi rodinou a školou je nevyhnutnejšia ako kedykoľvek predtým.
V našej škole sa v záujme zapojenia rodičov do vzdelávacieho procesu konajú dni otvorených dverí, rodičia sa zúčastňujú Štátnej skúšky, VPR ako verejní pozorovatelia. Otázky monitorovacích štúdií na rôznych úrovniach sa prejednávajú na zasadnutiach Rady školy. Rodičia sú neustále informovaní prostredníctvom informačného stánku a oficiálnej webovej stránky o pripravovaných monitorovacích štúdiách a existuje horúca linka pre otázky štátnej skúšky.
Nepochybne existujú možné riziká a rozpory pri vykonávaní postupov hodnotenia:
Nevedomé postavenie určitej časti rodičov k výchove;
nedostatočná motivácia žiakov k výchovno-vzdelávacej činnosti;
Monitorovacie štúdie nemusia byť žiadané a nemusia byť systematické;
Nesprávne používanie a interpretácia výsledkov postupov hodnotenia;
Frekvencia a objem hodnotiacich postupov by mali byť optimálne a štúdie by sa nemali navzájom duplikovať.
Na základe výsledkov Jednotnej štátnej skúšky a Jednotnej štátnej skúšky sa v škole uplatňuje:model hodnotenia kvality vzdelanie: organizácia vzdelávacieho prostredia - využitie moderných pedagogických technológií - vytvorenie systému hodnotenia kvality výsledku a sledovania osobných úspechov absolventa - hodnotenie kvality vzdelávania cez charakteristiku procesu a súlad výsledku s absolventský model.
Aby sme to zhrnuli, treba zdôrazniť, že využitie výsledkov hodnotiacich postupov umožňuje školskej správe:
Vypracovať a realizovať programy na zlepšenie efektívnosti vyučovania a učenia sa, vykonávať zmeny v základnom vzdelávacom programe;
Identifikovať úzke miesta v činnosti pedagogického zboru a vypracovať vhodné odporúčania pre každého učiteľa;
Identifikujte najmenej pripravených študentov, aby ste im poskytli potrebnú pomoc;
Poskytovať primeranú zdrojovú, organizačnú a metodickú podporu neefektívnym učiteľom;
Nechajte si nezávisle posúdiť činnosť jednotlivého učiteľa alebo skupiny učiteľov na organizáciu práce s pedagogickými zamestnancami.
Učitelia využívajú výsledky hodnotiacich postupov pri úprave svojich pracovných programov, ako aj pri príprave na certifikáciu s cieľom stanoviť kvalifikačnú kategóriu.
Žiaci a ich rodičia na základe výsledkov hodnotiacich konaní dostávajú odporúčania na zostavenie individuálneho vzdelávacieho programu, zmeny v individuálnom učebnom pláne, ako aj vyhliadky na získanie ďalšieho odborného vzdelávania.
Práve táto koordinovaná práca na využívaní výsledkov hodnotiacich postupov všetkými účastníkmi výchovno-vzdelávacieho procesu vedie ku každoročnému zvyšovaniu kvality vzdelávania na škole.
Literatúra
1. Bolotov V.A., Valdman I.A., Gorbovskij R.V., Zakhir Yu.S., Mertsalova T.A. Kľúčové otázky vo vývoji národných a regionálnych systémov hodnotenia kvality vzdelávania (odborný posudok), - M.: Vydavateľstvo Vysokej školy ekonomickej, Národnej výskumnej univerzity, 2016. - 380 s.
2.Valdman I.A. Model využitia výsledkov monitorovacích štúdií na zlepšenie kvality vzdelávania a zabezpečenie efektívneho riadenia vzdelávacích systémov. Manažment vzdelávania: teória a prax č.1 (17) – 2015.
Údaje získané z pozorovaní, prieskumov, experimentálnych prác a experimentov ešte nemožno považovať za vedecky spoľahlivé výsledky, ak nie sú podrobené analýze, hodnoteniu a vedeckej interpretácii (interpretácii).
Analýza by mala odhaliť úlohu objektívnych a subjektívnych faktorov ovplyvňujúcich priebeh a výsledky a umožniť identifikovať hlavné faktory a podmienky potrebné na využitie získaných údajov. Výsledky sa hodnotia, identifikuje sa ich význam, stupeň novosti a praktický význam. Interpretácia umožňuje vysvetliť mechanizmy pôsobenia, význam získaných výsledkov, ich vzťah k doteraz známym ustanoveniam a pojmom a odhaliť perspektívy ďalšieho využitia novonadobudnutých poznatkov či overených technológií.
Aby bolo možné vykonať záverečnú časť štúdie, je potrebné vrátiť sa do jej počiatočnej fázy s použitím identifikovaných a už testovaných kritérií, ukazovateľov a ukazovateľov (merateľné ukazovatele). V podstate ide o záverečnú fázu monitoringu – neustále sledovanie vzdelávacieho procesu, vplyv na jeho kvalitu a výsledky zavádzaných inovácií. Ide o štúdium dynamiky procesu za účelom porovnania s očakávanými výsledkami. Monitoring zahŕňa zber a systematizáciu informácií, ich analýzu a interpretáciu a rozhodovanie o úpravách procesov na ich optimalizáciu.
Kritériá (zovšeobecnené charakteristiky), na základe ktorých sa sleduje a posudzuje dynamika a výsledky procesu vo vzdelávaní vzhľadom na jeho komplexnosť a multifunkčnosť, musia byť vždy komplexné, ale diferencované.
Existujú kritériá hodnotenia kvality projektov a programov (relevantnosť, vedecká validita, novosť, praktická realizovateľnosť, zabezpečenie zdrojov), kritériá úspešnosti transformačného procesu (právne a zdrojové zabezpečenie, stupeň motivačnej pripravenosti, efektivita aktivít, psychologické pohodlie účastníkov, dynamika napredovania k plánovaným výsledkom) a napokon kritériá pre úspechy (výsledky).
Posledná skupina kritérií – výkonnostné kritériá – sa môže týkať buď skúmaného a transformovaného procesu (systému), alebo hlavného „produktu“ vzdelávania – človeka, jednotlivca.
Výkonnostné kritérium proces transformácie z osobného hľadiska, ako sa domnievame, musí nevyhnutne zahŕňať päť „podkritérií“, ktoré tvoria: kritérium výsledkov hlavnej činnosti – vzdelávacie, športové, tvorivé a výkonové (v závislosti od typu a zamerania vzdelávacej inštitúcie alebo študovanej oblasti), kritérium osobného rozvoja, kritérium slušného správania, kritérium zdravia, v niektorých prípadoch je oprávnené vyzdvihnúť ďalšie kritérium sociálnej adaptácie alebo pripravenosti na život v otvorenej spoločnosti. Ukazovatele, podľa ktorých sa každé kritérium sleduje, sú po prvé veľmi rôznorodé a premenlivé a po druhé, samy osebe sú čiastkové a relatívne. Výsledky vzdelávania preto nemožno posudzovať podľa jednotlivých ukazovateľov, napríklad podľa výsledkov Jednotnej štátnej skúšky, ktoré odzrkadľujú najmä kvalitu vedomostí a výsledných zručností, ale len veľmi nepriamo poukazujú na rozvoj schopností myslenia, sociálnu zrelosť, na sociálnu zrelosť. kultúrny rozhľad a kompetencie. Veľmi „čiastkovým“, obmedzeným ukazovateľom je identifikácia „zvyškových vedomostí“ študentov pri certifikácii vysokých škôl. Nepochybne dôležité, z pochopiteľných dôvodov, nevyčerpávajúce a neúplné sú také ukazovatele výchovno-vzdelávacej činnosti, ako je výkon školy, udeľovanie medailí absolventom, ich prijímanie na vysoké školy, dokonca aj na rozpočtové miesta, nehovoriac o poplatkoch. Rám 10
nykh. Len na základe súboru ukazovateľov možno vykonať analýzu a vyhodnotiť výsledky. Pochopenie získaných výsledkov umožňuje naplniť požiadavky na výskumnú prácu, vrátane dizertačnej práce, potvrdiť novosť, teoretický význam a praktickú užitočnosť výsledkov. V správach o výsledkoch praktických projektov a programov nie sú požiadavky týkajúce sa teoretického významu také povinné; požiadavka novosti je kategorickejšia, hoci jej stupeň sa môže líšiť: od objavov po vylepšenia a modernizáciu známeho a musí sa identifikovať praktický význam najmä presvedčivo.
Novosť, teoretický a praktický význam pôsobia ako všeobecné kritériá efektívnosti vykonanej práce.
Pri vytváraní novosti je kľúčové slovo na konkrétnu odpoveď „po prvýkrát“. Prvýkrát bola založená a odhalená.
definované, získané pôvodné údaje, poskytnuté vysvetlenie a pod. Novosť môže byť obsiahnutá vo formulácii problému, v nápade a pláne, v technológiách a postupoch optimalizácie pedagogického procesu, v identifikácii optimálnych podmienok pre jeho vznik. Pripomeňme, že slová „po prvýkrát“ a „novinka“ sú synonymá, a ak sa objaví novosť, potom opakovanie slova „po prvýkrát“ nemá zmysel (pozri rámček 11).
Uveďme pojmy (slovesá), ktoré nám umožňujú identifikovať novosť výsledkov.
Rám 12 
Vráťme sa k príkladu autora, ktorý identifikuje novosť svojho diela. V štúdii „Výchova tvorivého postoja budúceho učiteľa k organizácii vzdelávacieho procesu“ (2004) autor vidí novinku v tom, že identifikoval štruktúru tvorivého postoja budúceho učiteľa k organizácii vzdelávacieho procesu. výchovno-vzdelávacieho procesu, pričom táto štruktúra zahŕňa motivačno-hodnotovú, obsahovo-procesnú a emocionálno-vôľovú zložku (pozn. možno ich identifikovať v akomkoľvek pedagogickom alebo výchovnom procese). Podstata skúmaného vzťahu spočíva v hľadaní a výbere originálnych foriem, metód, prostriedkov organizácie vzdelávacieho procesu, rozvíjaní individuálneho tvorivého štýlu činnosti a maximálnej sebarealizácii budúceho učiteľa.
Slovo „po prvýkrát“ nemožno použiť na vyhlásenia tohto druhu, pretože všetky sú už veľmi dobre známe. O tom, čo mohol autor objaviť aplikáciou týchto princípov na predmet svojho štúdia, skromne mlčí.
V takýchto prípadoch by som rád pripomenul postgraduálnym študentom, uchádzačom a praktizujúcim výskumníkom, že nie sú diplomati. Charles Talleyrand, ako je známe, povedal, že jazyk dostal diplomat, aby skryl svoje myšlienky. Toto príslovie sa často spomína, pokiaľ ide o diplomatický jazyk, ale dáva sa výskumníkovi, aby jasne a konkrétne vyjadril svoje myšlienky, princípy, odporúčania a novosť, ktorú majú (ak sa, samozrejme, objaví).
Napríklad nami už spomínaná L. I. Gritsenko, vyjadrujúca novosť svojich pozícií vo vzťahu k odkazu A. S. Makarenka, zdôrazňuje, že sociálna orientácia jeho výchovného konceptu je naplnená humánnym a osobnostným obsahom, podstata výchovy A. S. Makarenka spočíva v konštruktívnej syntéze navonok a vnútorne orientovaných prístupov k rozvoju človeka, ktorá sa uskutočňuje na základe subjektívnej činnosti. Binárny charakter vzdelávacieho systému A. S. Makarenka sa prejavuje v zosúlaďovaní kolektívnych a individuálnych princípov, direktívnych a humanistických metód pri organizácii pedagogicky účelných životných činností predmetov výchovy.
Tento prístup polemizuje tak s tradičnou pozitívnou interpretáciou A. S. Makarenka ako autora koncepcie vzdelávania „v tíme, pre tím a prostredníctvom tímu“, ako aj s jeho kritickým hodnotením ako „komisára pre vzdelávanie“, ako údajne zástanca vojensko-disciplinárnej pedagogiky.
V praktickom výskume nie je striktne potrebné samostatné označovanie novosti a teoretického významu a v dizertačných prácach ich nie je vždy možné jednoznačne oddeliť, ale je potrebné identifikovať a konkrétne zverejniť oboje.
Pozrime sa na príklad, ktorý sme už použili.
Zdôrazňujúc teoretický význam svojej práce o tvorivom dedičstve A. S. Makarenka, L. I. Gritsenko vyzdvihuje nasledujúce ustanovenia, ktoré nepochybne obsahujú vedeckú novinku:
S určuje sa podstata a špecifiká axiologických smerníc Makarenkovského vzdelávania;
S bola odhalená organická binárno-syntetická integrita Makarenkovského vzdelávacieho systému, vrátane kolektívu a jednotlivca;
S ukazuje sa subjektívna, aktívna povaha mechanizmov vzdelávania v tíme, prejavujúca sa v špecifických črtách využívania princípov environmentálnej konformity a kultúrnej konformity v Makarenkovského vzdelávaní;
S identifikovali sa sociálno-demokratické základy fungovania vzdelávacích inštitúcií A. S. Makarenka zabezpečujúce ich humanistickú a osobnostnú orientáciu;
S odhaľuje sa obsah a podstata cieľov výchovy a vzdelávania v systéme A. S. Makarenka, odhaľujú sa rozpory ideovej (triednej) povahy oficiálnych predstáv o vzdelávaní a ich humanistickej orientácie;
S Genéza a podstata Makarenkovových predstáv o tíme bola študovaná na základe moderných vedeckých poznatkov a prístupov v domácej a svetovej vede.
L. I. Gritsenko v podstate ukázal, aké moderné a perspektívne sú koncepčné ustanovenia vzdelávacieho systému A. S. Makarenka o jednotlivcovi a kolektíve na objasnenie spôsobov a podmienok harmonizácie pedagogického procesu.
Teoretický význam znamená niečo iné ako novosť, a to: ako nové súvislosti, závislosti, prístupy, metódy identifikované vo výskume menia (prehlbujú, rozširujú, dokazujú nekonzistentnosť určitých ustanovení) teórie, koncepcie, prístupy existujúce vo vede a praxi; aké nové potrebné pojmy boli zavedené do vedeckého obehu; aké vyhliadky na vedecký a vedecko-praktický výskum otvárajú výsledky výskumu (pozri rám 13).
Rám 13
A nakoniec o praktickom význame a užitočnosti. Aby ste to identifikovali, musíte pochopiť a ukázať, čo sa už prakticky urobilo, kde a kým, s akými výsledkami boli aplikované odporúčania vyplývajúce z výskumu, aké implementačné materiály boli vyvinuté a distribuované (príručky, odporúčania, programy, metódy , technológie atď.). Je užitočné predkladať návrhy na zlepšenie obsahu, organizácie a materiálneho zabezpečenia vzdelávania a jeho pracovníkov, na posilnenie úlohy školstva v sociálno-ekonomickom rozvoji krajiny a regiónu a na zlepšenie jeho stavu. Tieto návrhy je potrebné adresovať rôznym úrovniam štátnej správy a samosprávy, rôznym orgánom štátnej správy v súlade s ich kompetenciami. Otázky, ktoré je potrebné zodpovedať pri určovaní praktického významu práce, sú uvedené v rámčeku 14.
