[Popis ankety hodnocení] [Návod pro vyučující] [Návod pro studenty] [Popis vyhodnocení] Přihlášení do systému (klikněte na tento odkaz) Výsledky hodnocení kvality výuky - výsledky anket A i B jsou přístupné po přihlášení do systému (statistické vyhodnocení) Přehledy podle akademického roku Přehled hodnocení: 2006/07, 2005/06 Statistika hodnocení: ZS 2007/08, LS 2007/08 Globální statistiky odpovědí: ZS 2006/07, LS 2006/07; ZS 2005/06, LS 2005/06; ZS 2004/05, LS 2004/05; ZS 2003/04, LS 2003/04 Popis, návody 1. Systém pro hodnocení kvality výuky O kvalitě vzdělávacího procesu rozhoduje celá řada faktorů. Jedním z prostředků, jak zvyšovat kvalitu výuky je i studentské hodnocení, které slouží jako jeden z nástrojů při vytváření zpětné vazby mezi učitelem a jeho studenty. Na univerzitě je v provozu elektronický systém pro generování, vyplňování i vyhodnocování dotazníku v anketách hodnocení. Systém je jedním z modulů IS STAG. 1.1  Ankety a dotazníky V systému jsou implementovány dva druhy anket. Anketa pro hodnocení semestru používá dynamický dotazník typu A - student hodnotí pomocí tří tvrzení předměty, které měl v daném semestru zapsané. Pro každého studenta se generuje individuální dotazník. Anketa je pro každý semestr jedna a inicializuje ji prorektor pro studium a pedagogickou činnost. Znění tvrzení: Přednášky byly zajímavé, srozumitelné a byly pro mne přínosem. Cvičení (semináře) byla dobře vedena a byla užitečná. Podmínky pro absolvování předmětu (zápočet/zkouška) byly přiměřeně náročné a hodnocení bylo objektivní. Anketa pro hodnocení předmětu používá dotazník typu B s deseti povinnými a maximálně pěti volitelnými tvrzeními. Slouží pro podrobnější hodnocení jednoho předmětu. Pro každý předmět a semestr může být inicializována jedna anketa a je plně v kompetenci garanta hodnoceného předmětu. Ten určuje předmět, dobu otevření dotazníku a definuje volitelná tvrzení. Propojení se STAGem pak umožní výběr studentům, kterým je dotazník určen. Znění povinných tvrzení: Předmět jako celek měl logickou, promyšlenou a ucelenou koncepci Náročnost předmětu byla přiměřená dané etapě/ročníku studia Výuka předmětu byla dobře zabezpečena literaturou, technickým vybavením apod. Absolvování předmětu bylo pro mě přínosem, mnoho jsem se naučil(a) Vyučující na mne působil jako odborník se zaujetím pro obor Projev vyučujícího byl jasný a srozumitelný Vyučující dobře komunikoval se studenty, odpovídal na dotazy a poskytoval konzultace Náročnost hodnocení (zápočet, zkouška) byla přiměřená Způsob hodnocení byl objektivní a spravedlivý podle jasně stanovených pravidel Výuka neodpadla (bez náhrady) z důvodu nepřítomnosti vyučujícího ani jednou V obou anketách jsou v současnosti formulována pozitivní tvrzení. Respondenti vyjadřují v odpovědích svou míru souhlasu výběrem ze seznamu, který tvoří šestistupňová škála. Pro potřeby statistického zpracování je odpovědím přiřazeno skóre od 5 po 0. Možné odpovědi: Odpověď Skóre ===Bez odpovědi===   Naprosto souhlasím 5 Souhlasím 4 Částečně souhlasím 3 Částečně nesouhlasím 2 Nesouhlasím 1 Naprosto nesouhlasím 0 V případě, že respondent nechcete resp. neumí odpovědět, ponechá přednastavenu odpověď "Bez odpovědi". Tyto odpovědi se do statistik nezapočítávají. Respondenti mají možnost upřesnit své odpovědi pomocí slovních připomínek. 1.2  Anonymita Dotazníky obsahují záhlaví, jehož položky tvoří informace potřebné pro další statistické vyhodnocování (fakulta, studijní program, obor, kombinace, rok studia, akademický rok a semestr) a uchovávají se spolu s odpověďmi. Další položky záhlaví jsou potřebné pro vytvoření dotazníku na míru. Tyto položky, které by mohly identifikovat respondenta (jméno, příjmení, osobní číslo), slouží jen ke kontrole adresnosti a neuchovávají se. Princip: tabulka, která zaznamenává, že určitý student (respodent) odpověděl na určitý dotazník tabulka, která uchovává odpovědi BEZ jakékoliv vazby na respodenta Vzhledem k tomu, že není vazba mezi tabulkou odpovědí a respodenty, nelze se k odeslanému dotazníku vracet (opravovat, měnit své odpovědi či rušit celý dotazník). 1.3  Pravidla pro zveřejňování výsledků Pro zveřejňování výsledků anket platí tyto zásady: Po ukončení ankety budou zpracované výsledky k dispozici odpovědným pracovníkům (garantům předmětů, vedoucím kateder, prorektorovi pro studium a pedagogickou činnost). Garanti předmětů budou mít 20 dní na to, aby na vyhodnocení ankety reagovali; v tomto období budou mít garanti předmětů možnost zveřejnění výsledků hodnocení svého předmětu vetovat. Toto svoje rozhodnutí budou moci zdůvodnit zveřejněnou slovní poznámkou. Po uplynutí 20 dní od ukončení ankety pro hodnocení semestru (typ A) budou pracovníci s vyšší odpovědností moci dát souhlas se zveřejněním výsledků u těch předmětů, za které nesou odpovědnost (kromě předmětů, jejichž zveřejnění garanti vetovali); tzn., že např. děkan fakulty může dát souhlas se zveřejněním výsledků hodnocení všech předmětů garantovaných jeho fakultou. U ankety pro hodnocení předmětu (typ B) budou výsledky zveřejněny automaticky systémem, pokud je garant nezakázal. 2.  Návod pro vyučující (příprava dotazníku typu B) Dotazník typu B může založit garant předmětu nebo vedoucí pracoviště (pro všechny předměty svého pracoviště). Seznam předmětů s možností založení dotazníku typu B - dle zadané katedry a ak.roku Seznam předmětů se založeným dotazníkem typu B - dle zadané katedry a ak.roku Počty založených dotazníků typu B - dle zadané fakulty a ak.roku Z úvodní stránky se odkazem "Přihlášení do systému" po zadání uživatelského jména (login) a hesla přihlásíte do systému STAG. Pro přihlášení musí garant předmětu použít uživatelské jméno s rolí "vyučující". Následující stránka je dostupná pouze vyučujícím (resp. vedoucím pracovníkům) a slouží k přípravě dotazníků, tj. inicializaci anket pro hodnocení předmětů, které garantují, a k prohlížení jejich výsledků před zveřejněním. Nabídka vlevo se skládá z těchto částí: Příprava tvrzení pro hodnocení předmětu Zde máte možnost pracovat s množinou vámi navrhnutých nepovinných tvrzení, z kterých pak můžete vybírat svá volitelná tvrzení (max. 5) při zakládaní dotazníků. Tato tvrzení musí být formulována pozitivní větou (max. 120 znaků ) - ne formou otázky. Všechna se ukládají a pokud jste je ještě nepoužili v některém dotazníku, můžete je měnit - editovat nebo vkládat nová. Tvrzení jsou viditelná a použitelná jen pro vámi navržené dotazníky. Založení dotazníku Postupně vyberte rok, semestr, katedru a předmět. Nabízejí se předměty probíhajícího semestru. Ke každému předmětu se zobrazí přehled přednášejících a cvičících. Pokud není seznam úplný, obraťte se na příslušného zodpovědného pracovníka na fakultě /ústavu /katedře. Po kliknutí na "Založení/editace dotazníku" zadejte a zkontrolujte parametry dotazníku: Volitelné parametry: datum otevření a datum uzavření dotazníku, předstih pro e-mail (tj. počet dní před otevřením dotazníku, kdy se automaticky rozešlou e-maily konkrétním studentům předmětu s žádostí o vyplnění dotazníku) Text e-mailu: Můžete upřesnit text e-mailu, v textu lze použít též zástupné znaky: %L URL adresa na dotazník %O Datum otevření %U Datum uzavření %S Semestr %R školní rok %P Zkratka předmětu formátu KATEDRA/KÓD_PŘEDMĚTU Změny textu potvrdíte kliknutím na "Uložit změny". Vytvořený text můžete otestovat odesláním na svoji e-mailovou adresu. Volitelná tvrzení, Výběr volitelných tvrzení: z vašich vytvořených tvrzení můžete vybrat maximálně 5 tvrzení - nezapomeňte uvést pořadí tvrzení! Uzavření změn dotazníku - dotazník můžete uložit nebo zrušit. Editace/zrušení dotazníků S dotazníkem můžete dále pracovat. Lze měnit parametry dotazníku a přidávat nebo odebírat volitelná tvrzení. Změny je třeba "uložit". Anketa je inicializovaná systémem automaticky podle vámi zvoleného nastavení. Nelze založit dva dotazníky k jednomu předmětu a semestru. Výsledky anket Na těchto stránkách naleznete seznamu předmětů, pro které jste byli inicializátorem anket hodnocení. Kliknutím na vybraný předmět se Vám zobrazí výsledky jeho hodnocení. Ty jsou Vám k dispozici následující den po ukončení ankety. Vy je pak můžete "Okamžitě zveřejnit" nebo vetovat jejích automatické zveřejnění tlačítkem "Zakázat zveřejnění". Zásady pro zveřejňování výsledků anket pro hodnocení předmětů (typ dotazníku B) Následující den po ukončení ankety jsou výsledky k dispozici odpovědným pracovníkům (garantům předmětů, vedoucím kateder,děkanům, prorektorovi pro studium a pedagogickou činnost). Garanti předmětů mají 20 dní na to, aby na vyhodnocení ankety reagovali; v tomto období mají možnost zveřejnění výsledků hodnocení svého předmětu vetovat. Toto svoje rozhodnutí mohou zdůvodnit slovní poznámkou. Po uplynutí 20 dnů od ukončení ankety systém automaticky zveřejní výsledky, pokud je garant nezakázal. 3.  Stručný návod pro studenty Protože hodnocení kvality je součástí systému STAG a vyplněním dotazníku měníte data, jedná se o aktivní přístup do systému, a proto je zapotřebí vaší autentizace. 3.1  Autorizovaný vstup Z úvodní stránky se odkazem "Přihlášení do systému" po zadání vašeho osobního čísla (login) a hesla přihlásíte do systému STAG. Následuje stránka integrující přístup k oběma typům anket - hodnocení semestru (typ A) a hodnocení předmětu (typ B). Na této stránce je též odkaz na výsledky předchozích anket. Je-li otevřena např. anketa hodnocení semestru nebo předmětu, které jste se ještě nezúčastnil/a, kliknutím na příslušný odkaz typu ankety v první části se zobrazí seznam anket daného typu. Pak dalším kliknutím na vybranou položku se otevře odpovídající dotazník. 3.2  Vyplnění dotazníku A Záhlaví První stránka po otevření dotazníku zobrazuje záhlaví, tj. vybrané informace o respondentovi, které slouží ke kontrole adresnosti generovaného dotazníku. Před vyplněním zkontrolujte uvedené údaje. Pokud údaje nesouhlasí se skutečností, dotazník nevyplňujte a zašlete zprávu (is@rt.ujep.cz). Anonymita Vašich odpovědí je zajištěna tím, že se při odeslání vyplněného dotazníku budou do databáze o Vás ukládat jen zvýrazněné informace. Neukládá se vaše jméno, příjmení a osobní číslo. Ukázka: Vysoká škola Univerzita Jana Evangelisty Purkyně Fakulta Fakulta životního prostředí Studijní program Inženýrská ekologie Obor Vodní hospodářství Rok studia 3 Akademický rok 2004/2005 Semestr LS Forma studia Prezenční Typ studia Magisterský Jméno Jan Příjmení Novák Osobní číslo Z0123 Předměty dotazníku U dotazníku hodnocení semestru se vygenerují předměty, které jste v daném semestru měli zapsané. Každý předmět je hodnocen třemi tvrzeními, se kterými vyjádříte míru souhlasu. V případě, že nechcete odpovědět resp. nevíte odpověď, ponechte přednastavenu odpověď "===Bez odpovědi===". Dále se můžete i slovně vyjádřit k průběhu výuky předmětu. Tlačítkem "Potvrdit/další" uložíte odpovědi a připomínku a zobrazí se vám předmět následující. Znění tvrzení: Přednášky byly zajímavé, srozumitelné a byly pro mne přínosem. Cvičení (semináře) byla dobře vedena a byla užitečná. Podmínky pro absolvování předmětu (zápočet/zkouška) byly přiměřeně náročné a hodnocení bylo objektivní. Připomínky Potvrzením odpovědí posledního předmětu se posunete na poslední stránku dotazníku, kde se ve dvou textových oknech můžete vyjádřit k průběhu semestru jako celku a k technickému provedení ankety respektive dotazníku. Odeslání dotazníku V dolní části dotazníku jsou dvě tlačítka. Tlačítko "Uložit dotazník pro pozdější úpravy" použijte v případě, že se k dotazníku budete chtít později vrátit a doplnit, změnit či prohlédnout odpovědi, popř. dopsat připomínky. K dotazníku můžete v době otevření ankety přistupovat opakovaně a vaše odpovědi a připomínky budou uloženy. Pokud máte dotazník vyplněný a už nebude chtít odpovědi nebo připomínky měnit, odešlete dotazník druhým tlačítkem "Odeslat dotazník". K odeslanému dotazníku se již nedostanete (anonymita respodenta). Každý student může odeslat pouze jeden dotazník. Doporučujeme tedy se před odesláním ujistit, že jste skutečně vyjádřili vaše stanoviska ke všem předmětům. Upozornění: Pokud využijete opakovaného přístupu k dotazníku, nezapomeňte jej odeslat před datem uzavření ankety! 3.3  Vyplnění dotazníku B Záhlaví Záhlaví dotazníku pro hodnocení předmětu je totožné se záhlavím pro hodnocení semestru. Vyučující Systém automaticky podle rozvrhových akcí vytvoří seznam jmen přednášejících a cvičících hodnoceného předmětu. V případě změny rozvrhové akce můžete nastavit správné vyučující vybráním příslušného radioboxu. Tvrzení Předmět je hodnocen 10 povinnými tvrzeními a maximálně 5 volitelnými tvrzeními, které definuje garant předmětu. V případě, že nechcete resp. neznáte odpovědět, ponechejte přednastavenu odpověď "===Bez odpovědi===". Po výběru odpovědí je uložíte tlačítkem "Potvrdit/další", které Vás zároveň přepne na stránku připomínek. Znění povinných tvrzení: Předmět jako celek měl logickou, promyšlenou a ucelenou koncepci Náročnost předmětu byla přiměřená dané etapě/ročníku studia Výuka předmětu byla dobře zabezpečena literaturou, technickým vybavením apod. Absolvování předmětu bylo pro mě přínosem, mnoho jsem se naučil(a) Vyučující na mne působil jako odborník se zaujetím pro obor Projev vyučujícího byl jasný a srozumitelný Vyučující dobře komunikoval se studenty, odpovídal na dotazy a poskytoval konzultace Náročnost hodnocení (zápočet, zkouška) byla přiměřená Způsob hodnocení byl objektivní a spravedlivý podle jasně stanovených pravidel Výuka neodpadla (bez náhrady) z důvodu nepřítomnosti vyučujícího ani jednou Připomínky Na poslední stránce dotazníku můžete ve dvou textových oknech slovně ohodnotit (okomentovat) výuku předmětu a napsat připomínky k technickému provedení ankety respektive dotazníku. Odeslání dotazníku Pro odeslání dotazníku platí stejná pravidla jako u dotazníku A. 3.4  Odhlášení ze systému hodnocení Odhlášení od systému provedete ukončením všech oken WWW prohlížeče. V případě, že WWW prohlížeč neukončíte, vystavujete se nebezpečí, že se na Vaše uživatelské jméno bude moci přihlásit kdokoliv! V případě technických potíží se obracejte na adresu is@rt.ujep.cz 4. Statistické vyhodnocování anket Při statistickém zpracování dat je důležité vycházet z toho, jakým způsobem byla data získána a jak způsob získávání dat může ovlivnit jejich vypovídací schopnost. Společnou nevýhodou všech anket je skutečnost, že lze jen velmi obtížně kontrolovat výběrovou proceduru a zpravidla není jasné, kterou část základního souboru výběr reprezentuje. Vypovídací schopnost anket je zatížena tzv. samovýběrovým efektem, tj.skutečností, že respondent není motivován k "pravdivému" vyplnění ankety. Zavedením elektronické formy dotazníku a zaručením anonymity odpovědí se snažíme minimalizovat negativní vlivy, které by mohly ovlivňovat vyplňování ankety ze strany studentů. Nikdy však nelze odstranit to, že na ankety odpovídají většinou lidé určitého typu. Lze tedy očekávat, že i na tuto studentskou anketu budou spíše odpovídat studenti s výrazně kladným vztahem k jednotlivým předmětům a studenti, kteří chtějí vyjádřit své negativní hodnocení. "Průměrní" studenti mají menší motivaci k vyplnění ankety. V první fázi projektu studentského hodnocení výuky budou zpracované informace sloužit primárně jednotlivým garantům předmětů (ti mohou dát souhlas se zveřejněním výsledků) a dalším osobám odpovědným na úseku kvality vzdělávací činnosti. V dalších obdobích se počítá se rozsáhlejším zveřejňováním výsledků. V dotazníku byly otázky koncipovány pomocí Likertovy metody, kdy studenti vyjadřují svůj souhlas nebo nesouhlas s daným tvrzením v rozsahu šestistupňové škály. Pro potřeby statistického zpracování byly odpovědi převedeny na kardinální intervalovou škálu tak, aby odpovědi mohly být vyjádřeny pomocí skóre. Odpověď Skóre ===Bez odpovědi===   Naprosto nesouhlasím 0 Nesouhlasím 1 Částečně nesouhlasím 2 Částečně souhlasím 3 Souhlasím 4 Naprosto souhlasím 5 Tato klasifikace předpokládá, že respondent vnímá intervaly mezi jednotlivými variantami odpovědí jako identické. Při takto definovaném bodovém ohodnocení odpovědí lze uvažovat též veličinu "celkové skóre předmětu", která vznikne součtem bodového ohodnocení odpovědí na jednotlivá tvrzení. Odpovědi s vyšším bodovým skóre hodnotí daný předmět spíše kladně, odpovědi s nižším skóre hodnotí předmět spíše záporně. Základní statistické zpracování bude vycházet z četností jednotlivých odpovědí. Jako agregované informace budou určeny základní statistické charakteristiky měřící různé vlastnosti jednorozměrných, případně i vícerozměrných četností. Pro určení pozice odpovědí lze použít především aritmetický průměr, variabilita odpovědí se obvykle poměřuje pomocí směrodatné odchylky, případně variačního koeficientu. Další informace o charakteru rozdělení četností odpovědí nám poskytuje výpočet dalších momentů - především šikmosti a špičatosti. Pro vyjádření informačního přínosu získaných dat lze dále určovat mutabilitu (rovnoměrnost jednotlivých typů odpovědí), reliabilitu (uvádí do jaké míry byly odpovědi na jednotlivé otázky náhodné), vnitrotřídní korelaci a další. Řada analýz je zaměřena na vícerozměrné metody, které slouží k odhalení závislostí a nezávislostí odpovědí na jednotlivé otázky a které zároveň mohou identifikovat rozdílnost odpovědí u různých skupin studentů (studenti z rozdílných fakult, studenti s různým typem zápisu předmětu, ...). Uvědomujeme si, že statistické zpracování odpovědí na ankety je vždy ovlivněno mnoha faktory a interpretace výsledků je citlivou záležitostí. Vzájemné poměřování předmětů podle jednoduchých statistických charakteristik - aritmetického průměru, směrodatné odchylky a podobně - je téměř nemožné vzhledem k rozdílným dalším parametrům daných předmětů (celkový počet zapsaných studentů, počet studentů, kteří odpověděli na anketu,...). Vytvoření zpětné vazby mezi učitelem a jeho studenty je však nezbytné a může být užitečné všem, kdo mají zájem na zvyšování kvality výuky na UJEP. Hlavní stránka systému STAG UJEP V případě potíží se obracejte na adresu is@rt.ujep.cz