Omezení self-Report opatření Nekognitivních dovedností

nedávné důkazy z ekonomie a psychologie zdůrazňují význam jiných rysů než obecné inteligence pro úspěch ve škole a v životě. Zdá se, že rozdíly v takzvaných „nekognitivních dovednostech“ přispívají k rozdílu v akademických úspěších oddělujících bohaté od chudých studentů. Nekognitivní dovednosti mohou být také tvárnější, a proto přístupné intervenci než kognitivní schopnosti, zejména po dětství a raném dětství. Pochopitelně, populární zájem o měření a rozvoj nekognitivních dovedností studentů vzrostl.

jak praxe a politika postupují vpřed, výzkum nekognitivních dovedností zůstává v plenkách. Neexistuje shoda ohledně toho, které dovednosti jsou nejdůležitější, jejich stability v rámci téhož jedince v různých kontextech, a, možná, nejvíce zásadně, jak mohou být spolehlivě měřeny. Zatímco výsledky testů, které hodnotí, jak dobře děti mohou číst, psát, a šifra jsou široce dostupné, nekognitivní dovednosti se obvykle hodnotí pomocí vlastní zprávy a, méně často, dotazníky s učitelem. Stejně jako testy úspěchů mají dotazníky výhodu rychlé, levné a snadné správy. A na rozdíl od behaviorální proxy servery, které by mohly být použity k posouzení celkové síly student charakter, dotazníky mohou být vytvořeny tak, aby zachytit více specifické rysy, které mají být zaměřeny na rozvoj.

jedním zjevným omezením dotazníků je to, že podléhají předstírání, a proto předpojatosti sociální potřebnosti. Při zvažování, zda položky, jako jsou „já jsem tvrdě pracující“ by měly být označeny „velmi podobně jako já,“ dítě (nebo ji učitel nebo rodič) může být nakloněny zvolit vyšší hodnocení, aby se více atraktivní pro sebe nebo pro ostatní. Do té míry, že zkreslení sociální potřebnosti je ve studované skupině jednotné, nafoukne jednotlivé odpovědi, ale nezmění jejich pořadí. Pokud někteří jedinci reagují více na sociální tlak než jiní, nicméně, jejich umístění v celkové distribuci odpovědí se může změnit.

možná obtížnější je referenční zkreslení, ke kterému dochází, když jsou odpovědi průzkumu ovlivněny odlišnými standardy srovnání. Dítě, které se rozhoduje, zda je dříč, musí vykouzlit mentální obraz tvrdé práce, se kterým může porovnat své vlastní návyky. Dítě s vysokými standardy by mohlo považovat tvrdého pracovníka za někoho, kdo dělá všechny své domácí úkoly dobře před spaním a navíc organizuje a kontroluje všechny své poznámky z denních tříd. Jiné dítě by mohlo považovat tvrdého pracovníka za někoho, kdo přinese domů své úkoly a pokusí se je dokončit, i když většina z nich zůstane nedokončená příští ráno.

pro ilustraci potenciálu referenčního zkreslení v měřeních nekognitivních dovedností, čerpám z průřezových údajů ze vzorku Bostonských studentů podrobně diskutovaných v nedávném pracovním dokumentu. Kolegové z Harvardu, MIT a University of Pennsylvania a použil jsem self-report průzkumy shromažďovat informace o non-kognitivní dovednosti z více než 1300 osmé třídy studentů ve 32 městských veřejných škol, a souvisí tato informace administrativních údajů o chování studentů a výsledky testů. Non-kognitivní dovednosti jsme měřili, patří svědomitost, sebeovládání, a kamínek – termín razil náš spolupracovník Angelo Duckworth zachytit studentů tendence udržet zájem a úsilí směrem, dlouhodobé cíle.

Důležité je, že školy se zúčastnili studenti v našem vzorku patří oba open-zápis veřejné školy provozované místní školní čtvrti a pět nad-objednané charterové školy, které bylo prokázáno, že mají velký, pozitivní vliv na výsledky studentů měřené státu, matematika a anglický jazyk umění testy. Tyto charterové školy mají orientaci“ bez výmluv“ a výslovné zaměření na kultivaci nekognitivních dovedností jako prostředku k podpoře akademických úspěchů a postsekundárního úspěchu.

naše výsledky potvrzují, že průzkumy, které jsme spravovali, zachycují rozdíly v nekognitivních dovednostech, které souvisejí s důležitými behaviorálními a akademickými výsledky. Obrázky 1a, 1b a 1c, a porovnat průměrný počet absencí, podíl studentů, kteří byli pozastavena, a průměrná test-skóre zisky mezi čtvrtou a osmou třídu studentů, kteří se zařadil v dolní a horní kvartil v každé dovednosti. Ukazuje například, že studenti, kteří se hodnotili ve spodním kvartilu s ohledem na sebeovládání, chyběli 2.9 více dní, než studenti v horní kvartil, a byl téměř třikrát vyšší pravděpodobnost, že byly pozastaveny jako osmákům; podobné rozdíly v nepřítomnosti a pozastavení sazby jsou zřejmé, pro svědomitost a štěrk. Dále, rozdíly v testu skóre zisky mezi zdola – a top-kvartil studentů na každé non-kognitivní dovednosti činí téměř celý rok stojí za učení v matematice během střední školy let.

Obrázek 1a. Průměrná dní nepřítomnosti, non-kognitivní dovednosti kvartil,

Obrázek 1b. Procenta pozastavena, non-kognitivní dovednosti kvartil,

Obrázek 1c. Test z matematiky-skóre zisky mezi 4. a 8. třídy, non-kognitivní dovednosti kvartil,

Poznámka: * označuje, že rozdíl mezi dolní a horní kvartil studentů je statisticky významný na 95% úrovni spolehlivosti.

Paradoxně, nicméně, pozitivní vztahy mezi těmito self-hlášeny opatření non-kognitivní dovednosti a růst v akademické úspěchy rozptýlit, když opatření jsou agregovány na úrovni školy. Jinými slovy, školy, ve kterých průměrný student hlásí vyšší úroveň svědomitosti, sebeovládání, a štěrk nevykazují vyšší zisky z testů než jiné školy. Ve skutečnosti se zdá, že se studenti v těchto školách učí o něco méně.

tento paradox je nejživější při porovnání studentů, kteří navštěvují charterové školy“ bez výmluv“, a těch, kteří navštěvují okresní školy s otevřeným zápisem. I přes daleko větší test-skóre zisky, než studenti, kteří se účastní open-zápisu okresních škol, a to i přes důraz na jejich školách místo na pěstování non-kognitivní schopnosti, charta školy studenti vykazují výrazně nižší průměrné úrovně sebeovládání měřeno pomocí studentské self-reporty (viz Obrázek 2). Tento statisticky významný rozdíl -0.23 standardní odchylky je v opačném směru, že se očekává, že na základě student-úroveň vztahů mezi self-control a test-skóre zisky zobrazí výše. Průměrné rozdíly mezi listinou a okresní studentů v svědomitost a štěrk, i když statisticky nevýznamné, spustit ve stejné pult-intuitivní směru.

Obrázek 2. Průměrný matematický test-skóre zisků a „non-kognitivní schopnosti,“ podle typu školy

Poznámka: * označuje, že rozdíl mezi okresní a charterových škol je statisticky významný na 95% úrovni spolehlivosti.

tento paradox by mohly vysvětlit dvě konkurenční hypotézy. Jeden je, že opatření jsou přesné a charterových škol, i přes jejich úspěch při získávání výsledků testů, a v rozporu s jejich pedagogické cíle, oslabit studentů non-kognitivní dovednosti spolu důležité rozměry, jako je svědomitost, sebeovládání a odvahu.

alternativou a podle mého názoru pravděpodobnější hypotéza je, že jsou opatření zavádějící vzhledem k referenční zkreslení vyplývající z rozdílů v klimatu ve škole mezi okresní a charterových škol. Postava 3 potvrzuje, že akademické a disciplinární klima charterových škol v našem vzorku, jak vnímají jejich studenti, se ve skutečnosti liší od klimatu okresních škol s otevřeným zápisem. Studenti Charty hodnotí přísnost učitelů, jasnost pravidel a očekávanou pracovní morálku podstatně vyšší než studenti okresních škol. Například hodnocení Charty studentů očekávání chování studentů převyšuje hodnocení jejich okresních protějšků o 0.57 na 5bodové stupnici použité pro tyto položky. Studenti navštěvující charterové školy také hlásí podstatně nižší úroveň negativních vzájemných efektů a mírně nižší úroveň vstupu studentů do svých škol. Tyto údaje samozřejmě také pocházejí z průzkumů vlastní zprávy a samy o sobě mohou podléhat referenčnímu zkreslení. Nicméně, naznačují, že akademické a disciplinární klima charterových škol se liší způsoby, které by mohly vést jejich studenty k nastavení vyšší laťky při posuzování jejich svědomitosti, sebeovládání, a štěrk.

obrázek 3. Akademické a disciplinární podnebí, jak je vnímají studentů, typ školy,

Poznámka: * označuje, že rozdíl mezi okresní a charterových škol je statisticky významný na 95% úrovni spolehlivosti.

další nedávné studie charterových škol „žádné výmluvy“ posilují věrohodnost hypotézy referenčního zkreslení. Například, 2013 Mathematica hodnocení KIPP střední školy najde velké pozitivní účinky na studenta zkouška skóre a času stráveného na domácí úkoly, ale žádné účinky na studenta-uvádí opatření, sebeovládání a vytrvalost ve škole. Podobně, Bude Dobbie a Roland Fryer zjistíte, že účast na Harlem Slib Akademie snížené studentské-uvádí se štěrkem, přesto, že má pozitivní účinky na výsledky a vysoké školy zápisu, a negativní účinky na dospívající těhotenství (u žen) a uvěznění (pro muže). Tento paralelní důkaz z výzkumu v podobném prostředí potvrzuje, že referenční zaujatost vyplývající z rozdílů ve školním klimatu je nejpravděpodobnějším vysvětlením těchto paradoxních zjištění.

Pokud je zjevné negativní účinky se účastní „žádné výmluvy“ charta školy na svědomitost, sebeovládání, a kamínek ve skutečnosti odrážejí referenční zkreslení, pak to, co naše data ukazují, je, že tyto školy vliv norem, na které studenti držet se při hodnocení jejich vlastní non-kognitivní dovednosti. Důsledky tohoto posunu normativních standardů pro jejich skutečné chování ve škole i mimo ni jsou samozřejmě neznámé – a zaslouží si další výzkum.

co je důležitější, zdá se, že stávající průzkum na základě opatření non-kognitivní dovednosti, i když možná užitečné pro srovnávání mezi studenty ve vzdělávacím prostředí, jsou nedostatečné, jak měřit efektivitu školy, učitelé, nebo zásahy do pěstování rozvoj těchto dovedností. Hodnocení účinků učitele, školy a rodinné vlivy na vývoj non-kognitivní dovednosti by mohly vést k nesprávným závěrům, pokud je hodnocení používané jsou zkreslené tím, že odlišné referenční rámce.

ve spěchu, aby přijali nekognitivní dovednosti jako chybějící kus v americkém vzdělávání, mohou politici přehlédnout omezení existujících opatření. Je proto nezbytné, aby vědci a pedagogové, kteří se snaží zlepšit studentů non-kognitivní dovednosti rozvíjet alternativní opatření, které jsou platné v širokém rozmezí školy nastavení. Tvůrci politik by se mezitím měli bránit návrhům na začlenění opatření založených na průzkumu nekognitivních dovedností do systémů odpovědnosti s vysokými sázkami.

měření matematický test-skóre zisky, jsme ustoupila 8-grade test skóre na kubický polynom 4. stupně skóre v obou matematiky a angličtiny, jazykové umění, a používá zbytky z této regrese jako měřítko výkonu studentů ve vztahu k očekáváním na základě jejich dosažení před vstupem na střední školu.

Odhady dopadu se účastní charta školy na základě přijímacího řízení loterie potvrdit, že tyto vzory nejsou kvůli výběru studentů se slabým non-kognitivní dovednosti do charterové školy; spíše každý rok účast na listině má statisticky významný negativní dopad na self-hlášeny svědomitost, sebeovládání, a štěrk.

tisk

Napsat komentář

Vaše e-mailová adresa nebude zveřejněna.