Prednosti in slabosti računalniškega testiranja. Izdelava testov in računalniško testiranje

Prednosti računalniškega testiranja so:

• * Objektivnost. Dejavnik subjektivnega pristopa s strani izpraševalca je izključen. Rezultati testiranja se obdelujejo preko računalnika.
• * Veljavnost. Faktor "loterije" rednega izpita, pri katerem lahko dobite "nesrečno srečko" ali nalogo, je izključen - veliko število testne naloge pokrivajo celoten obseg snovi pri posameznem predmetu, kar omogoča testirancu, da izrazi svoje obzorje širše in ne »pade« zaradi naključne vrzeli v znanju.
• * Enostavnost. Testna vprašanja so bolj natančna in jedrnata kot običajne izpitne pole in naloge ter ne zahtevajo podrobnega odgovora ali utemeljitve – samo izberite pravilen odgovor in vzpostavite korespondenco.
• * demokratično. Vsi testiranci so v enakih pogojih, rezultati testiranja so transparentni.
• * Masovnost in kratkotrajnost. Možnost zajemanja večjega števila testirancev s končno kontrolo v določenem zastavljenem časovnem obdobju. Hkrati izkoristite preostali čas za učenje nove snovi ali utrjevanje stare.
• * Možnost izdelave. Izvajanje izpita v obliki testiranja je tehnološko zelo napredno, saj omogoča uporabo avtomatske obdelave.
• * Zanesljivost informacij o obsegu naučenega gradiva in stopnji njegove asimilacije.
• * Zanesljivost. Ocena testa je nedvoumna in ponovljiva.
• * Sposobnost razlikovanja. Zaradi prisotnosti nalog različnih težavnostnih stopenj.
• * Izvajanje individualnega pristopa k usposabljanju. Možno je individualno preverjanje znanja in samotestiranje znanja študentov.

Računalniške metode imajo poleg prednosti tudi svoje slabosti:

1) Komunikacija med osebo in računalnikom ima svoje posebnosti in niso vsi enako mirni glede računalniškega testiranja. Na primer, če se postopek testiranja zavleče ali vsebina testa osebe ne zanima, se lahko pozitiven odnos nadomesti z nasprotnim: monotonija in monotonost dela, "neumnost" vprašanj in nalog bo utrujajo in dražijo. Včasih je negativen odnos do računalniškega testiranja posledica pomanjkanja povratnih informacij. In ko testirana oseba ne prejme povratne informacije, se poveča verjetnost napačnih odgovorov (lahko napačno razumete navodila, zamenjate ključe odgovorov itd.).

Izvedene so bile posebne študije, da bi ugotovili, kako se ljudje počutijo glede računalniškega testiranja. Izkazalo se je, da nekateri ljudje doživljajo tako imenovani učinek psihološka ovira, in za nekatere - učinek pretirane samozavesti. Zgodi se, da človek neke naloge sploh ni kos, ker se »boji« računalnika. Vključiti je mogoče tudi psihološke obrambne mehanizme, povezane z nenaklonjenostjo testiranca, da se odpre, željo po izogibanju pretirani odkritosti ali namernim izkrivljanjem rezultatov.

• 2) Pri računalniškem testiranju se strokovnjaki ukvarjajo le z dobljenimi rezultati. Testiranega ne vidijo, z njim ne komunicirajo, kar pomeni, da o njem nimajo dodatnih informacij in ne morejo ugotoviti njegovega dejanskega znanja.
• 3) Kontrola testa ne prispeva k razvoju ustnega in pisanještudenti.
• 4) Tudi širina tem, zajetih v testiranju hrbtna stran. Pri preverjanju znanja študent, za razliko od ustnega ali pisnega izpita, nima dovolj časa za poglobljeno analizo teme.
• 5) V testiranju je element naključnosti. Na primer, študent, ki ne odgovori na preprosto vprašanje, lahko pravilno odgovori na težje. Razlog za to je lahko naključna napaka pri prvem vprašanju ali ugibanje odgovora pri drugem. To izkrivlja rezultate testov in vodi do potrebe po upoštevanju verjetnostne komponente pri njihovi analizi.

Računalniško testiranje je nedavno nastalo področje psihodiagnostičnih raziskav (pregledov), povezanih z uporabo elektronske računalniške tehnologije. Pojav računalniške psihodiagnostike je posledica razvoja informacijske tehnologije. Poskusi avtomatizacije predstavitve dražljajnega materiala subjektu in kasnejše obdelave rezultatov so bili narejeni od 30-ih let. XX stoletje Toda šele od 70. Pravi razvoj računalniške psihodiagnostike se začne s prihodom osebnih računalnikov. Od 80. let prejšnjega stoletja računalniški testi se razvijajo v velikem obsegu. Najprej kako računalniške različiceže znane slepe metode, v 90. letih pa. kot posebne tehnike, ki upoštevajo možnosti sodobna tehnologija in se ne uporabljajo v prazni obliki, saj so namenjeni kompleksnemu, prostorsko in časovno spremenljivemu stimulativnemu materialu, specifičnemu zvoku ipd. Začetek 21. stoletja zaznamuje dejstvo, da se nadzor testiranja vse bolj prenaša na računalnik. Če so bile v preteklih letih nekatere faze raziskav avtomatizirane, na primer predstavitev materiala (zelo priročno je uporabljati računalnik namesto tahistoskopa), obdelava podatkov (zlasti okorni testi, kot so MMPI, 16PF, sociometrija), interpretacija rezultatov, je bila uporaba računalniškega materiala zelo priročna. (Lüscherjev test), torej moderni oder Vse pogosteje najdete programe, ki poskrbijo za celoten pregled, vse do diagnoze, kar zmanjša potrebo po prisotnosti psihologa na minimum. In to ima svoje prednosti in slabosti.

Nedvomne prednosti računalniških testov (CT) so: hitra izvedba; visoka hitrost in obdelava brez napak; sposobnost takojšnjega doseganja rezultatov; zagotavljanje standardnih pogojev testiranja za vse predmete; jasen nadzor nad postopkom testiranja (vprašanj ni mogoče preskočiti; po potrebi se lahko zabeleži čas posameznega odgovora, kar je še posebej pomembno pri inteligenčnih testih); možnost izločitve psihologa kot dodatne spremenljivke (kar je še posebej pomembno pri izvajanju pregleda); vizualizacija in zabava procesa (podpora pozornosti s pomočjo barv, zvoka, elementov igre, kar je še posebej pomembno za izobraževalne programe); enostavno arhiviranje rezultatov; možnost združevanja testov v baterije (programske pakete) z eno samo končno interpretacijo; mobilnost eksperimentatorja (vsi instrumenti na eni disketi); možnost izvajanja množičnih raziskav (na primer prek interneta).

Slabosti računalniških testov: kompleksnost, delovna intenzivnost in visoki stroški razvoja programa; potreba po dragi računalniški opremi; težavnost uporabe računalnikov na terenu; potreba po posebnem usposabljanju subjekta za delo s CT; težave pri delu z neverbalnim gradivom, še posebej težko ga je prevesti v računalniško obliko projektivni testi; pomanjkanje individualnega pristopa do testirane osebe (izguba nekaterih psihodiagnostičnih informacij, pridobljenih v pogovoru in opazovanju); latenca faz obdelave in interpretacije podatkov (kakovost teh postopkov je v celoti odvisna od razvijalcev programa). Nekateri subjekti lahko pri interakciji z računalnikom občutijo učinke "psihološke ovire" ali "prekomerne samozavesti". Podatkov o veljavnosti, zanesljivosti in reprezentativnosti slepih testov torej ni mogoče samodejno prenesti v njihove računalniške dvojnike, kar vodi do potrebe po novi standardizaciji testov.

Slabosti CT povzročajo, da so psihologi do njih previdni. CT se redko uporablja pri klinična psihologija, kjer je cena napake previsoka.

L. S. Vygotsky je opredelil tri ravni psihodiagnostike: simptomatsko (identifikacija simptomov), etiološka (identifikacija vzrokov) in tipološka (holistična, dinamična slika osebnosti, na podlagi katere temelji prognoza). Računalniška psihodiagnostika je danes na najnižji ravni - stopnji simptomatske diagnoze, ki praktično ne daje gradiva za ugotavljanje vzrokov in prognozo.

Očitno pa ima računalniška tomografija veliko prihodnost, kjer bo verjetno marsikatera od naštetih slabosti računalniške psihodiagnostike odpravljena prav zaradi nadaljnji razvoj elektronska tehnologija in izboljšanje psihodiagnostičnih tehnologij. Ključ do takšnega optimizma je vse večje zanimanje znanosti in prakse za računalniško diagnostiko, ki ima v svojem arzenalu že več kot 1000 računalniških tomografov.

Če poskušamo razvrstiti trenutno obstoječe računalniške tomografije, lahko ločimo naslednje vrste:

1. Po strukturi

a) analogi slepih testov;

b) sam CT pregled.

2. Po številu testiranih ljudi

a) CT individualno testiranje;

b) CT skupinsko testiranje (za hkratno oddajo enakega materiala na računalnikih, povezanih v lokalno omrežje).

3. Glede na stopnjo avtomatizacije testiranja

a) avtomatizacijo ene ali več faz izpita;

b) avtomatizacija celotnega pregleda.

4. Po nalogu

a) diagnostični CT pregledi;

b) izobraževalni CT (simulatorski testi, razvojni programi).

5. Po naslovniku

a) strokovno psihološko;

b) polprofesionalni;

c) neprofesionalno (zabavno).

Uporabnik profesionalnih računalniških tomografov je psiholog, zato jih razvijajo specializirani laboratoriji ali centri za računalniško psihodiagnostiko (med katerimi je treba omeniti Center za humanitarne tehnologije v Moskvi, JSC Imaton-M, laboratorij za klinično psihologijo V. M. Psihonevrološki inštitut Bekhterev v Sankt Peterburgu itd.). Ti testi imajo številne posebne lastnosti: 1) prisotnost arhiva (baze podatkov); 2) prisotnost gesla za vstop v test ali bazo podatkov, da se zagotovi zaupnost rezultatov; 3) podrobna interpretacija rezultatov z uporabo strokovnih izrazov, koeficientov, z izdelavo grafov (profilov); 4) razpoložljivost podatkov o razvijalcih metodologije, podatkov o veljavnosti in zanesljivosti, referenčni materiali o teoretičnih načelih, na katerih temelji metodologija. Polprofesionalni CT so namenjeni strokovnjakom sorodnih poklicev, na primer učiteljem, kadrovskim menedžerjem. Takšni testi so pogosto opremljeni z okrnjeno razlago brez uporabe posebnega besedišča ter so enostavni za učenje in uporabo. Testi te ravni so lahko namenjeni tudi nespecialistu, navadnemu uporabniku osebnega računalnika, ki ga zanima psihologija. Končno obstaja tudi veliko število neprofesionalni CT, katerega namen je popularizirati psihološke ideje ali zasledovati zabavne namene.

Pri uporabi profesionalnih ali polprofesionalnih računalniških tomografov je treba upoštevati enaka etična načela kot pri slepem testiranju. Pomembno je, da ne distribuirate rezultatov testov in zaščitite svoje datoteke z geslom, še posebej, če je v računalniku več uporabnikov. In glavna stvar je "ne ustvariti si idola." Ne pozabite, da je CT samo orodje, le pomočnik in ima svoje meje uporabe (po poznavanju katerih se profesionalni psiholog razlikuje od šarlatana iz psihologije).

Več o temi 13.7. Računalniško testiranje:

1. "Virtualna resničnost" ali Pedagoške možnosti estetskega računalniškega okolja pri predmetu "Računalniška grafika in animacija" Elena KHRAMTSOVA

Predavanje 11. Računalniško testiranje v izobraževanju.

1.Posebnosti računalniškega testiranja in njegove oblike.

2. Inovativne oblike testnih nalog za računalniško testiranje.

3. Računalniško prilagodljivo testiranje.

4.Spletno testiranje, njegova uporaba v učenje na daljavo.

1. Posebnosti računalniškega testiranja in njegove oblike

Splošne ideje o računalniškem testiranju. Od začetka 21. stoletja. Računalniki so se pogosto uporabljali pri izobraževanju za testiranje. V pedagoškem so se pojavile novosti ločena smer– računalniško testiranje, pri katerem se predstavitev testov, ocenjevanje rezultatov študentov in dostava rezultatov le-tem izvaja z osebnim računalnikom.

Faza generiranja testa lahko tehnološko poteka na različne načine, tudi z vnosom praznih testov v računalnik. Danes obstajajo številne publikacije o računalniškem testiranju; razvita je bila programska oprema in orodja za generiranje in predstavitev testov.

Kdaj je potrebno uporabiti računalniško testiranje?Čeprav računalniško testiranje močno olajša učiteljevo delo pri podajanju in ocenjevanju rezultatov testov, pa njegovo širjenje v marsičem ni nič drugega kot modna muha, katere vse negativne posledice še niso povsem raziskane. Izbira računalniško podprte oblike izpita bi morala temeljiti na pomembnejših in tehtnejših razlogih kot zgolj na strasti do inovacij, saj povzroča številne težave in študente postavlja v neenako slabši položaj. Računalniško testiranje je treba uporabiti v primerih, ko je nujno treba opustiti tradicionalne slepe teste.

Na primer, računalniško testiranje je potrebno pri izvajanju enotnega državnega izpita na težko dostopnih območjih Rusije. Zbor maturantov iz posameznih okolišev ob določenih urah izvajanje enotnega državnega izpita postane tako zapleten in drag podvig, da brez računalniškega testiranja in sodobnih komunikacijskih sredstev preprosto ni več mogoče. Računalniško testiranje je priporočljivo uporabljati tudi pri izvajanju izpitov za otroke s posebnimi potrebami. invalidnosti

z resnimi okvarami vida ali sluha. Z osebnim računalnikom lahko uporabljate večje pisave, zvočne posnetke, dodatne pripomočke za vnos testnih podatkov in druge pripomočke, ki kompenzirajo morebitno zaostajanje otrok s posebnimi potrebami na izpitih. Oblike računalniškega testiranja.

Računalniško testiranje se lahko izvaja v različnih oblikah, ki se razlikujejo po tehnologiji združevanja nalog v test (slika 17). Nekateri od njih še niso dobili posebnega imena v literaturi o vprašanjih testiranja.

Prva oblika je najpreprostejša. Končni test, standardiziran ali namenjen rutinskemu spremljanju, se vnese v posebno lupino, katere funkcije se lahko razlikujejo glede na stopnjo popolnosti. Običajno vam lupina med končnim testiranjem omogoča, da naloge predstavite na zaslonu, ocenite rezultate njihove izvedbe, ustvarite matriko rezultatov testa, jo obdelate in prilagodite. primarne točke

subjekte tako, da jih prenese na eno od standardnih lestvic, da se vsakemu subjektu izda rezultat testa in protokol njegovih ocen testnih nalog.

Druga oblika računalniškega testiranja vključuje avtomatizirano generiranje testnih možnosti, ki se izvaja z orodji. Možnosti se ustvarijo pred izpitom ali neposredno med njim iz banke umerjenih testnih nalog s stabilnimi statističnimi značilnostmi. Umerjanje se doseže z dolgotrajnim predhodnim delom na oblikovanju obrazca, katerega parametre nalog pridobimo na reprezentativnem vzorcu študentov, običajno v 3-4 letih s testi obrazca. Vsebinsko veljavnost in vzporednost opcij zagotavljamo s strogo urejenim izborom nalog za posamezno opcijo v skladu s testno specifikacijo. Tretja oblika – računalniško adaptivno testiranje – temelji na posebnih adaptivnih testih. Ideje o prilagodljivosti temeljijo na razmišljanjih, ki jih je neuporabno dati študentu

testne naloge, ki ga bo verjetno izvedel pravilno brez najmanjših težav ali pa zaradi visoke težavnosti zagotovo ne bo uspel. Zato se predlaga optimizacija zahtevnosti nalog, prilagajanje stopnji pripravljenosti posameznega testiranca, ter zmanjšanje dolžine testa z izločitvijo nekaterih nalog.

Zahvaljujoč računalniškemu testiranju je mogoče povečati informacijsko varnost in preprečiti razveljavitev tajnosti testa zaradi visoke hitrosti prenosa informacij in posebne zaščite elektronskih datotek.

Postopek izračuna rezultatov je poenostavljen tudi v primerih, ko test vsebuje le izbirne naloge. Ostale prednosti računalniškega testiranja se kažejo v sprotnem spremljanju, samokontroli in samopripravi učencev; zahvaljujoč računalniku lahko takoj izdate rezultat testa

in sprejeti takojšnje ukrepe za popravek asimilacije novega gradiva na podlagi analize protokolov na podlagi rezultatov korektivnih in diagnostičnih testov. Možnosti pedagoškega nadzora pri računalniškem testiranju se bistveno povečajo z razširitvijo nabora merjenih veščin v inovativnih tipih testnih nalog, ki uporabljajo raznolike zmožnosti računalnika pri vključevanju avdio in video datotek, interaktivnost, dinamično oblikovanje problemov z uporabo multimedijskih orodij itd. .

Zahvaljujoč računalniškemu testiranju se povečajo informacijske zmogljivosti kontrolnega procesa, postane mogoče zbrati dodatne podatke o dinamiki opravljanja testov posameznih študentov in razlikovati med zamujenimi in nerazpoložljivimi testnimi točkami.

Poleg nedvomnih prednosti ima računalniško testiranje številne pomanjkljivosti, ki so predstavljene na sliki 1. 18.

Slika 18 Težave, ki nastanejo med računalniškim testiranjem Značilne psihološke in čustvene reakcije učencev pri računalniškem testiranju.

Negativne reakcije običajno povzročijo različne omejitve, ki se včasih uvedejo pri izdajanju nalog pri računalniškem testiranju. Zabeleži se na primer bodisi vrstni red, v katerem so naloge predstavljene, bodisi največji možni čas za dokončanje posamezne naloge, po katerem se ne glede na želje subjekta naslednja naloga

test. Pri adaptivnem testiranju so učenci nezadovoljni, ker nimajo možnosti preskočiti naslednje naloge, pregledati celotnega testa, preden začnejo delati na njem, in spremeniti odgovorov na prejšnje naloge. Včasih učenci nasprotujejo računalniškemu preverjanju znanja zaradi težav, ki nastanejo pri izvajanju in zapisovanju matematičnih izračunov itd. Vpliv predhodne ravni računalniških izkušenj na uspešnost testa.

Rezultati tujih študij so pokazali, da izkušnje z delom z računalnikom, ki jih imajo šolarji, v mnogih primerih pomembno vplivajo na veljavnost rezultatov testa. Če preizkus vključuje neinovativne izbirne naloge, potem je vpliv računalniške izkušnje na testne rezultate zanemarljiv, saj takšne naloge od učencev med testom ne zahtevajo izvajanja kakršnih koli zapletenih dejanj. Ko so na zaslonu predstavljeni inovativni tipi nalog, ki obsežno uporabljajo računalniško grafiko in druge novosti, postane vpliv predhodnih računalniških izkušenj na testni rezultat zelo pomemben. Tako je pri računalniško podprtem preverjanju znanja potrebno upoštevati računalniško raven študentov, ki jim je test namenjen. Vpliv uporabniškega vmesnika na rezultate računalniškega testiranja. Uporabniški vmesnik vključuje funkcije, ki so na voljo študentu, in možnost premikanja po testnih nalogah, elemente za postavitev informacij na zaslon ter splošni vizualni slog podajanja informacij. Dober uporabniški vmesnik mora imeti jasno in pravilno logično zaporedje interakcije z preiskovancem, ki odraža splošna načela

grafično oblikovanje informacij. Bolj ko je vmesnik dovršen, manj pozornosti mu študent namenja in vse svoje napore osredotoča na izpolnjevanje testnih nalog. 2. Inovativne oblike testnih nalog z uporabo računalnika

testiranje. .

Inovativne naloge, ki uporabljajo zmožnosti računalniškega testiranja, so danes najbolj obetavna smer razvoja avtomatizacije pedagoških meritev. Glavni razlog za to je velik potencial inovativnih nalog za povečanje informativnosti pedagoških meritev in povečanje vsebinske veljavnosti testov. Glavni cilj razvoja inovativnih nalog za računalniško testiranje je oceniti tiste kognitivne sposobnosti, ki

funkcionalna pismenost in komunikacijske veščine, ki ostanejo neodkrite s tradicionalnim nadzorom ali uporabo praznih testov. Predmet ocenjevanja inovativnosti je lahko stopnja analitične in sintetične aktivnosti študenta, hitrost posploševanja.

nove informacije , prožnost miselnega procesa in številne druge kazalnike miselne aktivnosti, ki so se oblikovali med učnim procesom in jih ni mogoče oceniti z običajnimi testi. Možnosti inovativnih nalog pri računalniškem testiranju.

Inovativne naloge pomagajo zmanjšati vpliv naključnega ugibanja. s povečanjem števila možnih odgovorov brez povečanja okornosti testnih nalog. Na primer, pri ocenjevanju bralnega razumevanja lahko študenta prosite, naj izbere ključni stavek v besedilu in nanj pokaže s klikom miške. Tako vsak stavek v odlomku besedila postane možnost izbire namesto 4-5 odgovorov v tradicionalnih nalogah z že pripravljenimi odgovori. Za izboljšanje oblike nalog se uporabljajo kompleksne risbe in dinamični elementi, vključno s slikami, animacijo ali videom; s čimer se zmanjša čas, potreben za branje stanja. Razširitev zmožnosti testiranja se pojavi, ko je zvok vklopljen, kar vam omogoča, da vodite dialog s študentom, ocenite fonetične značilnosti njegove izgovorjave pri testiranju z tuji jezik

, preverite pravilno interpretacijo različnih zvokov. Glavne smeri inovativnosti pri razvoju nalog. Inovacije pri razvoju računalniško podprtih testnih nalog pokrivajo pet med seboj povezanih področij. Sem spadajo: oblika naloge, subjektova dejanja pri odgovoru, stopnja uporabe multimedijske tehnologije

, stopnjo interaktivnosti in metodologijo točkovanja.

Študentova dejanja pri odgovarjanju na naloge so odvisna od tistih inovativnih orodij, ki so vključena v test. Ko so zvočne informacije vključene v naloge, ki zahtevajo učenčev glasovni odziv, se za odgovor uporabi tipkovnica, miška ali mikrofon. Pomembno mesto v odgovorih je namenjeno interaktivnim procesom. Interaktivni način dela študentov med računalniškim testiranjem pomeni izmenično podajanje avdiovizualnih informacij, pri čemer je vsaka nova izjava s strani študenta ali računalnika konstruirana ob upoštevanju predhodnih informacij z obeh strani. Pri organiziranju interaktivnega načina pri računalniškem testiranju se uporablja predvsem zaslonski meni, v katerem lahko študent odgovori na vprašanja testne naloge izbira, ustvarja ali premika objekte – komponente odziva. Manj pogosto se v interaktivnem načinu uporablja glasovni vnos odgovora.

Na splošno stopnja interaktivnosti, ki je zagotovljena pri računalniško podprtem testiranju, označuje stopnjo, do katere določen obrazec naloge reagira ali se odziva na vnos izpraševanca. Ta stopnja se razlikuje od najpreprostejšega primera, ko je narejen en korak, do zapletenih, večstopenjskih nalog z razvejanjem po vsakem zaporednem učenčevem odgovoru.

Primerjalne značilnosti inovativne oblike nalog pri računalniškem testiranju za različne namene izboljšanja pedagoškega merjenja so podane v tabeli. 5.

Težave, ki nastanejo pri uporabi nalog povečane težavnosti pri računalniškem testiranju. Zahtevnejše naloge vedno zahtevajo več časa za odgovor, ne glede na to, ali so predstavljene z računalniško simulacijo virtualne resničnosti, ali so v obliki laboratorijskih vaj, esejev ali z uporabo multimedijskih tehnologij. Zaradi časovnih stroškov je število težke naloge mora biti nepomemben - ne več kot 10-15%, v nekaterih primerih - 20-25%. Raznolikost zvočnih in vizualnih podob pri računalniškem testiranju vodi do utrujenosti šolarjev, zato je treba pri vključitvi celo majhnega števila težkih inovativnih nalog v test bistveno skrajšati dolžino testa, kar negativno vpliva na veljavnost vsebine. , zanesljivost in informacijska varnost pedagoškega merjenja.

Kljub prednostim inovativnih oblik nalog, predstavljenih z uporabo računalnika, je treba z njimi ravnati previdno in skrbno analizirati njihovo merilno ustreznost in primernost pri testu. Običajno so inovativne zahtevne naloge izolirane v ločenem bloku in postavljene na konec testa*. Njihovo dokončanje ne sme jemati časa najšibkejšim učencem, ki najverjetneje ne bodo prišli do konca testa.

Tabela 5

Primerjalne značilnosti inovativnih oblik nalog pri računalniškem testiranju

Tarča izboljšanje pedagoške razsežnosti	Značilnosti obrazca za odgovor	Osnovno smeri inovativnosti	Značilnosti težavnosti Naloge
Zmanjšajte učinek ugibanja	Odgovor je številski (ali besedilni), ki ga sestavi učenec, tipkovnica ali glasovni vnos prek mikrofona	Uporaba obrazca za nalogo s konstruiranim odgovorom	Običajno visoka
Povečajte veljavnost vsebine	Odgovor je izbran z miško na grafični sliki z uporabo običajnega menija ali hiperteksta	Uporaba avdiovizualne serije.	Omogočanje medijev brez interaktivnosti Nizka oz
povprečje Zagotoviti	Odgovor je izbran povečanje konstruktivne in vsebinske veljavnosti	z miško na grafično sliko, zahtevane so dodatne informacije, uporabljen je hipertekst	Uporaba multimedije za simulacijo naravnega okolja in uporabnikovih dejanj v njem. Predstavljanje predmetov z uporabo animacije zunaj interaktivnosti
Srednje ali visoko Razširite sposobnost merjenja inteligence	spretnosti, kognitivne sposobnosti	Odgovor poteka s premikanjem predmetov na zaslonu in ga sestavi učenec s pomočjo tipkovnice, leve in desne tipke miške. Interaktivno možno	Uporaba multimedije za simulacijo naravnega okolja in uporabnikovih dejanj v njem. Predstavljanje predmetov z uporabo animacije zunaj interaktivnosti
povprečje Uporaba obrazca naloge s konstruiranim odgovorom in najenostavnejšo stopnjo interaktivnosti priložnost ocene ustvarjalni in praktično	spretnosti	Pri konstruiranju odgovora morajo učenci uporabiti dvostopenjski ali večstopenjski razvejani interaktivni prehod na različne stopnje dokončanja naloge. Uporaba obrazca za nalogo s konstruiranim odgovorom in	interaktivnost kompleksne ravni visoka
Povprečje oz	Odgovor modelira študent korak za korakom z uporabo večstopenjskega razvejanega interaktivnega prehoda na različne stopnje naloge in virtualne resničnosti	Dejanja subjekta pri odgovoru	visoko

Izračunavanje rezultatov študentov. Če računalniško testiranje ne uporablja multimedijskih in interaktivnih tehnologij, potem izračun primarne točkeŠtudenti se ocenjujejo tradicionalno s seštevanjem ocen pri posameznih nalogah. Vključevanje multimedijskih tehnologij vodi v večdimenzionalnost testnih rezultatov, saj je ocenjevanje cele vrste ustvarjalnih, komunikacijskih, splošnopredmetnih in drugih spretnosti z uporabo inovativnih oblik nalog vedno povezano z več merskimi spremenljivkami. Pojav interaktivnosti dodatno zaplete postopek izračunavanja rezultatov učencev; ta postane odvisen od odgovora izpraševanca na vsakem koraku reševanja testnih nalog in zahteva politomno ocenjevanje.

Preverjanje rezultatov reševanja nalog s konstruiranim, reguliranim odgovorom se izvaja s primerjavo odgovora preiskovanca s standardom, shranjenim v pomnilniku računalnika, in vključuje različne sinonime za pravilen odgovor in odgovor z dopustnimi črkovalnimi napakami.

Precej težje je avtomatizirano točkovanje pri nalogah s prosto oblikovanimi odgovori (kot so eseji) v humanistiki. Danes tuji testolosRazvili smo posebne programe za avtomatsko preverjanje esejev. Merila ocenjevanja v teh programih so precej raznolika: od upoštevanja površinskih značilnosti eseja, kot sta dolžina in stopnja popolnosti odgovora, do kompleksnih primerov analize z uporabo napredka v računalniškem jezikoslovju. Običajno vsi ti različni avtomatizirani programi točkovanja zahtevajo le vnos strokovnjakov na začetku dela, ko je treba kvalificirane učitelje "usposobiti". računalniški program

ovrednotenje morebitnih podrobnih odgovorov.

Testi s fiksno dolžino, računalniško generiranje vzporednih različic testov Glavne komponente avtomatiziranega postopka postavitve testa za računalniško predstavitev.

Postopek avtomatizirane testne sestave v primeru, da je. poteka vnaprej in ne v prilagodljivem načinu, vključuje sestavljanje (generiranje) vzporednih opcij, izbiro pravila za izračun rezultatov testiranih študentov in korekcijo opcij za izpolnjevanje zahtev teorije pedagoških meritev. razlike v težavnosti možnosti, ki nastanejo zaradi obstoja merskih napak, se po testiranju odpravijo z izravnavo lestvic, pridobljenih z izračunom testnih točk za posamezne možnosti preverjanja. Sorodna vprašanja, katerih rešitev je potrebna tudi za avtomatizirano postavitev testa, vključujejo delo na polnjenju banke testnih nalog in ocenjevanje informacijske varnosti testiranja.

Računalniško generiranje vzporednih testnih različic fiksne dolžine. Avtomatsko sestavljanje testa s fiksnim številom nalog predvideva prisotnost nastavljene dolžine testa, njegove specifikacije in bankeUčinkovita banka, ki podpira generiranje multivariantnega testa, mora vključevati okvire nalog različnih težavnosti za vsak vsebinski element s stabilnimi ocenami parametrov. S pomočjo posebne programske opreme in orodij se pridobi analog tradicionalnega slepega testa, ki je pripravljen za predstavitev nekaj minut po začetku generiranja in zagotavlja visoke kakovosti pedagoške meritve.

Metoda avtomatizirane postavitve testaza računalniško predstavitev v načinu brez povezave (brez uporabe lokalnihračunalniška omrežja ali internet) ali v na spletu (z uporabo lokalnih računalniških omrežij ali interneta). avtomatsko načrtovanje testa. Namen zasnove je generirati testne možnosti, ki izpolnjujejo vrsto pogojev, ki vključujejo: število nalog, vsebinsko strukturo, pogostost izbire nalog v možnosti ter številne zahteve, ki zagotavljajo generiranje vzporednega testa. možnosti.

Tehnologija postavitve možnosti mora podpirati sistematičen nadzor nad. pogostost vključitve posamezne naloge iz banke v test. Število enakih nalog v vzporednih možnostih, ki se uporabljajo za poravnavo lestvic med možnostmi, ne sme presegati 15-20 %. Za nadzor pogostosti vključitve naloge v možnosti največmožen odstotek izbire posamezne naloge iz banke. Ko je dosežen, naloga preneha biti uporabljena v nadaljnjih postopkih generiranja testa.

Običajno več vzporednih ali kvazivzporednihtestne možnosti so ustvarjene v načinu brez povezave za kasnejšo predstavitev v načinu na spletu , vključno z interaktivnimiinterakcija s študenti. Dan širitve komunikacijskih zmožnosti računalniškega nadzora v realnem času Priporočljiva je uporaba prilagodljivega testiranja: ki zagotavlja korak za korakomoptimizacija izbire in težavnosti nalog pri generiranju adaptivnega testa (glej poglavje 8.4).

3. Računalniško prilagodljivo testiranje

Prilagodljivo testiranje in njegove zmožnosti. Nastanek adaptivnega testiranja je povzročila želja po povečanju učinkovitosti pedagoških meritev, ki je bila praviloma povezana z zmanjšanjem števila nalog, časa in stroškov testiranja, pa tudi s povečanjem natančnost študentskih ocen. Prilagodljivi pristop temelji na individualizaciji postopka izbire testnih nalog, ki z optimizacijo zahtevnosti nalog glede na stopnjo pripravljenosti študentov zagotavlja generiranje učinkovitih testov.

Optimizacija težavnosti nalog običajno poteka korak za korakom. Če učenec pravilno opravi nalogo, potem dobi težjo nalogo. Če je naloga nepravilno opravljena, se umakne k lažjim bančnim nalogam. Če tri naloge zapored niso opravljene, se proces prekine s posebnimi metodami (najpogosteje z uporabo teorij. IRT ) Študentova ocena se določi za opravljene naloge na prilagojenem testu, ustvarjenem posebej zanj. Tako se pri računalniški prilagodljivi predstavitvi število testnih nalog in njihova težavnost individualno izbere za vsakega preiskovanca na podlagi njegovih odgovorov, posamezen sklop nalog pa tvori adaptivni test. Prilagodljivi testi v skupini subjektov so sestavljeni predvsem iz različnih nalog in se razlikujejo po številu in težavnosti nalog, tem bolj, čim večja je razpršenost med subjekti testne skupine v smislu pripravljenosti.

Nemogoče je doseči hkratno povečanje merilne učinkovitosti za vse kriterije, zato običajno pri organizaciji adaptivnega testiranja pride v ospredje eden; v najboljšem primeru dva kriterija. Na primer, v nekaterih primerih se med ekspresno diagnostiko v prilagodljivem načinu največ pozornosti posveča zmanjšanju časa preizkusa in števila predstavljenih nalog, vprašanja natančnosti ocenjevanja pa zbledijo v ozadje. V drugih primerih je lahko natančnost meritev prednostna naloga in testiranje vsakega subjekta se nadaljuje, dokler ni dosežena načrtovana minimalna napaka meritve.

Na dolžino prilagoditvenega preizkusa pomembno vpliva kakovost strukture znanja učencev. Običajno subjekti z jasno strukturo znanja opravljajo naloge naraščajoče težavnosti, pri čemer svojo oceno pripravljenosti pojasnjujejo z vsako naslednjo pravilno opravljeno nalogo. Izvedejo majhno število prilagodljivih testnih nalog in hitro dosežejo prag svoje usposobljenosti. Učenci z nejasno strukturo znanja, ki izmenjujejo pravilne in nepravilne odgovore, dobijo zahtevnostno nihajoče naloge. Postopek testiranja je zakasnjen, ker ob nenadnih spremembah zahtevnosti nalog ne pride do postopnega povečevanja natančnosti merjenja in je število težavnostno prilagojenih nalog pogosto celo večje kot pri običajnem, tradicionalnem preizkusu.

Prednosti prilagodljivega testiranja. Nekatere pomembne prednosti računalniško podprtega prilagodljivega testiranja vključujejo:

Visoka učinkovitost;

Visoka stopnja tajnosti;

Individualizacija tempa izvajanja testa;

Visoka stopnja motivacije za testiranje med najšibkejšimi študenti zaradi izključitve nepotrebno težkih nalog iz procesa njihove predstavitve;

Sporočanje rezultata na intervalni lestvici testnih točk vsakemu subjektu takoj, takoj po zaključku njegovega dela na individualno izbranem sklopu nalog v adaptacijskem testu.

Prilagodljive strategije testiranja. Strategije za predstavitev testnih nalog pri prilagodljivem testiranju lahko razdelimo na dvostopenjske in večstopenjske, v skladu s katerimi se uporabljajo različne tehnologije za generiranje prilagodljivih testov.

Dvostopenjska strategija vključuje dve stopnji. Na prvi stopnji vsi subjekti dobijo enak vhodni test, katerega namen je izvesti predhodno diferenciacijo študentov po osi merske spremenljivke. Na podlagi rezultatov diferenciacije je na drugi stopnji organiziran prilagodljiv način in izdelani prilagodljivi testi. : Kot rezultat razvoja teorije IRT

, ki zagotavlja enotno intervalno lestvico za ocenjevanje parametrov preizkušancev in težavnosti testnih nalog, je postalo možno izvesti novo optimizacijo postopka izbire postavk za modeliranje učinkovitih prilagodljivih testov: Začele so se razvijati večstopenjske prilagodljive strategije testiranja. , v okviru katerega se v procesu izpolnjevanja sklopov nalog vsak subjekt premika po svoji individualni poti. Večstopenjske prilagodljive strategije testiranja so razdeljene na fiksno razvejanje in odvisno od tega, kako so sestavljeni večstopenjski prilagodljivi testi. Če se za vse predmete uporablja isti nabor nalog s fiksno lokacijo na težavnostni osi, vendar se vsak učenec premika skozi nabor nalog posebej glede na rezultate dokončanja naslednje naloge, potem je strategija prilagodljivega testiranja fiksno razvejanje.

Težavnostne naloge v sklopu nalog so običajno nameščene na enaki medsebojni razdalji ali pa je izbran padajoči korak glede na naraščanje težavnosti, kar omogoča prilagajanje tempa testiranja testirancu, saj so naloge opravljenih, se poveča utrujenost in zmanjša motivacija za opravljanje testnih nalog.

Strategija prilagodljivega testiranja s spremenljivo razvejanostjo vključuje izbiro nalog neposredno iz banke z uporabo določenih algoritmov, ki predvidijo optimalno težavnost naslednje naloge na podlagi rezultatov preizkušanca pri prejšnji nalogi prilagodljivega testa. Tako se korak za korakom iz posameznih nalog pridobi adaptivni test. Spreminja se ne le težavnost, ampak tudi korak, ki ga določa razlika v težavnosti dveh sosednjih prilagodljivih testnih nalog. Posebna značilnost različne razvejane strategije prilagodljivega testiranja je ponovna ocena stopnje pripravljenosti preizkušanca po korakih, ki se izvede po vsakem

dokončanje naslednje testne naloge.

riž. 19. Spremenljiv večstopenjski algoritem testiranja

Algoritem, ki izvaja spreminjajočo se prilagodljivo strategijo testiranja, je cikličen po naravi in ​​ima obliko, prikazano na sl. 19. Vstop v prilagodljivo testiranje in izstop iz njega

Za izhod iz načina testiranja se uvedejo časovne omejitve ali omejitve števila nalog ali pa se določi načrtovana natančnost merjenja. Osredotočenost na natančnost pri organiziranju adaptivnih ciklov povzroča različne individualne trajektorije subjektov, ki jih je mogoče vizualizirati v obliki lomljenih črt. Oglišča lomljene črte ustrezajo posameznim nalogam adaptivnega testa, dolžina povezave je določena s spremenljivim korakom, katerega velikost enako razliki ocene težavnostnega parametra dveh sosednjih nalog adaptivnega testa. Očitno je, da čim krajša je dolžina prelomljene črte, tem boljša struktura znanja učencev in so učinkoviteje izbrani glede na težavnost prilagoditvene testne naloge (slika 20).

riž. 20. Vizualizacija posameznih trajektorij predmetov: v krogih - številke nalog

Na sl. Slika 20 prikazuje krivulje prilagodljivega testiranja treh študentov, ki so začeli vstop v prilagodljivi način na podlagi rezultatov protesta. Višje kot je vrh prekinjene črte, težja je bila prva naloga adaptivnega testa. Ob vstopu v protest je prvi študent pokazal najvišji rezultat, zato začne adaptivno testiranje s težjo nalogo. Za lažjo razpravo o rezultatih vizualizacije slika prikazuje trajektorije, ki se ne sekajo. Če je preiskovanec pravilno opravil nalogo, je čez prekinjene črte postavljen »plus«, če je preiskovanec nalogo opravil nepravilno, pa »minus«. Za merilo zaključka preverjanja je bilo izbrano preprosto pravilo: preverjanje se prekine, če učenci pravilno ali nepravilno opravijo tri naloge prilagoditvenega preizkusa zapored.

Kljub visokemu začetni rezultat, se zdi, da ima prvi učenec slabo strukturirano znanje, kar dokazuje menjavanje pravilnih in nepravilnih odgovorov.

Predstavljena slika je idealizacija, ki ponazarja realne situacije različnih večstopenjskih strategij za generiranje adaptivnih testov, pri katerih se po zaključku vsake naloge preračuna trenutna ocena stopnje pripravljenosti za izbiro naslednje adaptivne testne naloge.

Zanesljivost, veljavnost in dolžina testa pri prilagodljivem testiranju. Tako kot pri tradicionalnem testiranju se izbor nalog za adaptivne teste izvaja v skladu s specifikacijo testa. Težavnost optimizacije; lahko le zmanjšate število nalog, predstavljenih za vsak del, in hkrati ohranite smiseln načrt preizkusa za vsak predmet. Tako naj bi adaptivno testiranje, ne glede na strategijo podajanja nalog in njihovo število, zagotavljalo visoko vsebinsko veljavnost vsakega generiranega adaptivnega testa.

Zanesljivost pri prilagodljivem testiranju je odvisna od kombinacije dejavnikov. Ti vključujejo: število nalog, prisotnost sistematičnega nadzora nad pogostostjo izbire bančnih nalog pri ustvarjanju prilagodljivega testa. Na zanesljivost vplivajo tudi značilnosti banke testnih postavk, ki se nanašajo na kakovost meritev (stabilnost in razpon variacije ocen težavnosti) in kakovost vhodne (začetne) kontrole.

Prilagodljivi algoritem je organiziran tako, da se po vsaki naslednji predstavitvi naloge preveri razlika med pridobljeno in načrtovano točnostjo meritev. Ko je načrtovana natančnost dosežena, se algoritem za izbiro naloge prekine in doseže pričakovana zanesljivost adaptivnega testa.

5. Na spletu -testiranje, njegova uporaba na dalj

usposabljanje

Stopnje interaktivnosti .

V najenostavnejšem razumevanju interaktivnega načina učenja ima učenec možnost prejemati (brati, gledati, poslušati) le tiste informacije, ki jih sam izbere za učenje z računalnikom. Vse večja kompleksnost zmogljivosti in tehnologije za izvajanje interaktivnega načina vodi v modeliranje okoliškega sveta in obnašanja predmetov v njem, kar omogoča simulacijo realnosti. Seveda danes zaradi številnih razlogov pri poučevanju niso izkoriščene vse možnosti interaktivnega načina. Zlasti po besedah ​​A. G. Shmeleva, ki je največji specialist v Rusiji za uporabo interaktivnih tehnologij v izobraževalnem in psihološkem testiranju (sistem Teletesting), v prevladujejo neinteraktivne oblike podajanja izobraževalnih informacij.

Najenostavnejši interaktivni način v lokalnem omrežju in na internetu. V skladu z razvrstitvijo računalniških omrežij na lokalna in globalna je najenostavnejši interaktivni način organiziran znotraj enega prostora oz. izobraževalna ustanova ali z uporabo interneta. Praviloma interaktivnost temelji na asinhroni komunikaciji, ko je učiteljeva reakcija na rezultate testa zakasnjena zaradi časa, ki je potreben za preverjanje testa v avtomatiziranem načinu in izračunavanje rezultatov študentov na podlagi rezultatov njegovega zaključka.

V prvem primeru, ko je več deset ali sto računalnikov povezanih v lokalno omrežje, poseben izvedbeni program - instrumentalna lupina - zagotavlja izdajanje nalog na spletu -test za celotno skupino testirancev, običajno v individualnem časovnem režimu. Na zaslonu vsakega računalnika v lokalnem omrežju se pojavi naloga za eno od vzporednih možnosti, test. Pri zagotavljanju informacijske varnosti celotne skupine študentov se lahko uporabi samo ena različica testa.

Izvedba na spletu -test z uporabo interneta nima bistvenih razlik od primera uporabe lokalnega omrežja z najpreprostejšo stopnjo interaktivnosti brez prilagodljivega načina, ko vsi učenci izvajajo enake različice testa. Naloge večinoma od študentov zahtevajo, da izberejo enega ali več pravilnih odgovorov z uporabo znanih pogovornih predmetov, kot so izbirni gumbi ( izbirni gumbi ).

Rezultati testa se izračunajo s primerjavo odgovorov učencev s ključem in se najpogosteje zmanjšajo na preprosto seštevanje. Končni rezultat testa lahko pošljete po e-pošti. brez povezave Čas, porabljen za predstavitev rezultata testa, je odvisen od trajanja prenosa (običajno od nekaj sekund do nekaj ur) in časovnega intervala, ki bo minil, dokler študent ne prebere pošte, ki mu je prispela. V nekaterih primerih, ko študent zahteva dokumentarna dokazila o rezultatih, se rezultati testa lahko dostavijo

Povprečna stopnja interaktivnosti v spletno testiranje.Pri sprotnem spremljanju v času študija na daljavo se običajno izvaja srednja stopnja interaktivnost. Skladno z možnostmi sinhrone izmenjave informacij v realnem času s pomočjo internetnih pozivnikov je študentu zagotovljena pomoč in svetovanje učitelja pri reševanju nalog korektivnih in diagnostičnih testov.

S povprečno stopnjo interaktivnosti velika raznolikostpotekajo v obliki testnih nalog. Predvsem ima študent možnost urediti besedilo, predstavljeno v nalogi, tako da vnese nove stavke ali nadomesti en del besedila z drugim. Pri nalogah za vzpostavitev pravilnega zaporedja takoj po tem, ko preiskovanec izbere določen vrstni red elementov, računalnik na zaslonu prikaže novo zaporedje ipd. Če časovni pasovi ne ovirajo vzpostavitve sinhrone komunikacije, interaktivnost takoj zagotovi učinek »učitelj v bližini«, zahvaljujoč kateremu učenec prejme pomoč, oceno ali namig učitelja pri izvajanju tekočih kontrolnih nalog.

Visoka stopnja interaktivnosti v spletno testiranje.Visoka stopnja interaktivnosti je zagotovljena v primerih, ko se pri interakciji z učiteljem uporablja zvok in video, kar zahteva znatne finančne stroške, vendar vam omogoča preprosto identifikacijo študenta, ki opravlja test na daljavo.

Z pedagoška točka Visoko stopnjo interaktivnosti dosega prilagodljivo testiranje, ki vključuje obsežne tehnologije za optimizacijo težavnosti nalog glede na učenčeve odgovore na posamezno predhodno nalogo prilagodljivega testa.

Uvod ………………………………………………………………………......3

poglavje jaz . Testi kot sredstvo kontrole ………………………………………..5

1.1. Shema za izdelavo testnih nalog………………………………………………………...7

1.2. Uporaba računalniškega testiranja za kontrolo znanja. Motivacijski učinek………………………………………………………………..14

1.3. Tehnologije in sistemi testiranja……………………………………21

1.4. Tehnologija za oblikovanje računalniških testov predmetnega področja…………………………………………………………………………………30

1.5. Metodološke osnove za izdelavo računalniških testov………………..33

poglavje II . Tipsko testiranje

2.1. Pravila za izdelavo testne naloge in testa…………………………39

2.2. Tipične napake pri izdelavi testnih postavk………………………...42

2.3. Osnovna pravila testiranja za preizkuševalce in subjekte…..50

2.4. Ocena testiranja……………………………………………………………..52

2.5. Analiza in utemeljitev testiranja………………………………….57

2.6. Didaktična in metodološka vprašanja organizacije nadzora v računalniških učnih okoljih………………………………………………………..62

2.7 Zahteve za računalniške sisteme testiranja…………………………………………………………………..64

2.8. Delo s testerjem ADSoftTester………………………………………………………...66

Zaključek …………………………………………………………………….75

Reference …………………………………………………………...77

Aplikacija ……………………………………………………………………79

Uvod.

Predstavlja prehod celotnega človeštva iz postindustrijske faze razvoja v informacijsko družbo izobraževalno okolje globalni problem– povečanje količine in izboljšanje kakovosti izobraževalne informacije, z nespremenljivim učnim časom, v katerem se morajo te informacije naučiti.

Pisanje računalniških testov je precej zapleteno. Zelo pomembno je, da se naučite razlikovati strokovno opravljen dober test od popularnega in zabavnega revijalnega vprašalnika. Pravi, učinkovit, veljaven in učinkovit test je popoln izdelek, ki ima določene lastnosti in značilnosti ter izpolnjuje sodobno metodološke zahteve. Test ima sestavo, celovitost in strukturo. Sestavljajo ga naloge, pravila za njihovo uporabo, ocene za opravljeno posamezno nalogo in priporočila za interpretacijo rezultatov testa. Celovitost testa se kaže v medsebojni povezanosti nalog, vključenih v test. Nobenega elementa ni mogoče odstraniti iz testa, ne da bi to vplivalo nanj. Njegova struktura se kaže v načinu medsebojnega povezovanja nalog.

Ustvarjanje testa vključuje natančno analizo vsebine akademska disciplina, razvrstitev izobraževalno gradivo, vzpostavljanje medtematskih in medpredmetnih povezav, širitev didaktičnih enot s kasnejšo predstavitvijo teh enot skozi elemente sestave nalog.

Eden od načinov za rešitev protislovja, ki se je pojavilo pri pripravi testov, je uporaba testiranja kot dela mnogih pedagoške inovacije. Postalo je očitno dejstvo, da testi omogočajo pridobitev objektivnih ocen ravni znanja, sposobnosti, veščin in idej ter odkrivanje vrzeli v usposabljanju. V kombinaciji s programi usposabljanja na osebnih računalnikih testi omogočajo prehod na prilagodljivo učenje in kontrolo znanja - najučinkovitejše, a vendarle najmanj uporabljene oblike organizacije izobraževalnega procesa pri nas.

Ko govorimo o testih, vedno omenjamo njihove najpomembnejše značilnosti - veljavnost in zanesljivost, ki določata kakovost testa kot orodja za pedagoško merjenje. Naš cilj je bil analizirati motivacijski učinek uporabe kontrolnih testnih nalog.

obstaja posebna teorija testiranje, ki deluje s koncepti zanesljivosti, veljavnosti, matrike pokritosti itd., ki ni posebej specifično za računalniške teste.

Namen tega dela je pokazati, da je s pomočjo testiranja bolj priročno preverjati znanje učencev, traja manj časa in daje objektivno oceno znanja, kar je zelo pomembno v učnem procesu.

Cilji tega dela:

1. razširiti temo računalniškega testiranja;

2. pokazati, kako nastanejo testne naloge, kakšna so pravila za razvoj testnih nalog in testov, kako se ocenjujejo, kako se analizira testiranje, kakšne so tehnologije in sistemi testiranja, katere tipične napake se delajo pri razvoju testnih nalog;

3. spoznati delo enega od testologov ADSoftTester;

4. Na podlagi tega testerja razvijte več testov pri predmetih: računalništvo in angleščina.

poglavje jaz . Testi kot sredstvo kontrole.

Prehod celotnega človeštva iz postindustrijske faze razvoja v informacijsko družbo predstavlja globalni problem za izobraževalno okolje - povečanje količine in izboljšanje kakovosti izobraževalnih informacij z nespremenljivim izobraževalnim časom, v katerem se morajo te informacije naučiti.

Eden od načinov za rešitev tega protislovja je uporaba testiranja kot del številnih pedagoških inovacij. Postalo je očitno dejstvo, da testi omogočajo pridobitev objektivnih ocen ravni znanja, sposobnosti, veščin in idej ter odkrivanje vrzeli v usposabljanju. V kombinaciji s programi usposabljanja na osebnih računalnikih testi omogočajo prehod na prilagodljivo učenje in kontrolo znanja - najučinkovitejše, a vendarle najmanj uporabljene oblike organizacije izobraževalnega procesa pri nas.

Testiranje je ena tehnološko najnaprednejših metod avtomatiziranega nadzora z vgrajenimi parametri kakovosti.

Računalniško testiranje

Učenje je večplasten proces, kontrola znanja pa le eden od njegovih vidikov. Vendar pa je v njem računalniška tehnologija napredovali, kolikor je mogoče, med njimi pa ima testiranje vodilno vlogo. V številnih državah je testiranje nadomestilo tradicionalne oblike kontrole - ustne in pisne izpite ter razgovore.

Očitno je marsikateri učitelj že prestal nekaj evforije pri izdelavi testov in ugotovil, da je to zelo težka zadeva. Kup naključno premešanih vprašanj in odgovorov še zdaleč ni test. Izkazalo se je, da ustvarjanje ustreznega in učinkovitega testa zahteva veliko dela. Računalnik je lahko pri tem v veliko pomoč.

Obstaja posebna teorija testiranja, ki deluje s koncepti zanesljivosti, veljavnosti, matrike pokritosti itd., ki niso specifični za računalniške teste. O tem se ne bomo več spuščali, osredotočili se bomo predvsem na tehnološke vidike.

Kot je navedeno zgoraj, so instrumentalni avtorski sistemi za ustvarjanje pedagoških orodij trenutno vse bolj razširjeni: programi usposabljanja, elektronski učbeniki, računalniški testi. Za šolske in univerzitetne učitelje so še posebej pomembni programi za izdelavo računalniških testov - testne lupine. Obstaja veliko podobnih programskih orodij in programerji-razvijalci so pripravljeni zgraditi nove različice tako imenovanih avtorskih sistemov. Vendar pa široko uporabo teh programskih orodij ovira pomanjkanje enostavnih in delovno intenzivnih metod za sestavljanje testnih nalog, s katerimi bi lahko "napolnili" lupine. V tem razdelku so predstavljeni nekateri pristopi k razvoju računalniških testov.

Za poenostavitev nadaljnje predstavitve uvajamo številne definicije in pojme.

Preden začnete iskati ta tema, se obrnemo na slovar računalniških izrazov v računalništvu, da bi izvedeli natančno definicijo izraza test. Po slovarju računalniških izrazov v računalništvu (V.D. Valedinsky) je test preizkus funkcionalnosti opreme ali programa, odkrivanje in odpravljanje napak. Testiranje je pomemben korak pri razvoju programske opreme.

Testiranje je postopek ocenjevanja skladnosti študentovega osebnega modela znanja z modelom ekspertnega znanja. Glavni cilj testiranja je odkrivanje neskladnosti teh modelov (in ne merjenje ravni znanja), pri čemer se ocenjuje stopnja njihove neskladnosti. Testiranje se izvaja s posebnimi testi, sestavljenimi iz danega nabora testnih nalog.

Preizkusna naloga je jasna in natančna naloga na predmetnem področju, ki zahteva nedvoumen odgovor ali izvajanje določenega algoritma dejanj.

Preizkus je niz medsebojno povezanih testnih nalog, ki vam omogočajo, da ocenite skladnost študentovega znanja s strokovnim modelom znanja predmetnega področja.

Testni prostor - nabor testnih nalog za vse module modela ekspertnega znanja.

Ekvivalenčni razred je niz testnih nalog, tako da študentova izpolnitev ene od njih zagotavlja izpolnitev drugih.

Celoten test je podmnožica testnega prostora, ki zagotavlja objektivno oceno ujemanja med osebnim modelom in modelom strokovnega znanja. Učinkovit test je popoln test, ki je optimalen po obsegu.

večina zahtevna naloga Naloga kontrolorja je razviti teste, ki omogočajo najbolj objektivno oceno stopnje skladnosti oziroma neskladnosti med modelom osebnega znanja študenta in ekspertnim modelom.

1.1. Shema za izdelavo testnih nalog.

Preizkusne naloge najlažje sestavite tako, da oblikujete vprašanja za koncepte, ki sestavljajo vozlišča semantičnega grafa, in razvijete vaje, ki za njihovo dokončanje zahtevajo poznavanje lastnosti izbranega koncepta. več težka faza je razvoj testnih nalog, ki določajo razmerja med koncepti. Z njihovim izborom je povezana še globlja raven nalog, ki razkriva povezanost pojmov med posameznimi moduli.

Nabor testnih nalog (testni prostor), na splošno, po načelu izčrpnega testiranja, je lahko neskončen. Na primer, za celovit nadzor znanja tabele množenja celih števil od 1 do 100 je treba uporabiti 100x100 vseh možnih kombinacij dveh števil. In za vse naravna števila testni prostor postane neskončen.

Vir:

http://cblis.utc.sk/cblis-cd-old/2003/3.PartB/Papers/Science_Ed/Testing-Assessment/Papanastasiou.pdf

Opomba

Računalniško podprto učenje (CBT) ima lahko velik potencial, če se ustrezno uporablja za izboljšanje učenja. Vendar je to kakovost mogoče izboljšati z uporabo računalniško podprtega testiranja (CT) in natančneje z uporabo računalniško prilagojenega testiranja (CAT). Za namene tega dela avtor opisuje mehanizem in prednosti računalniškega prilagodljivega testiranja ter kako lahko izboljša učni proces na predmetnem področju znanosti. Pedagoga spodbujamo, da razmisli o nekaterih omejitvah in izzivih pri izvajanju, razpravljali pa bomo tudi o naravoslovnem izobraževanju.

KLJUČNE BESEDE Računalniško prilagodljivo testiranje, CAT, računalniško testiranje, računalniško usposabljanje, naravoslovno izobraževanje, ocenjevanje, povratna informacija.

Računalniško podprto učenje ima izjemno velik potencial za izboljšanje učenja na številnih področjih in disciplinah, vključno s predmetnim področjem znanosti. Vendar je treba računalniško usposabljanje natančno in nenehno spremljati, da se zagotovi njegova učinkovitost. To še posebej velja, ker so nekatere prejšnje raziskave pokazale, da je uporaba računalnika negativno povezana z dosežki v matematiki in naravoslovju (Papanastasiou in Ferdig, 2003). Čeprav ni jasno, v kakšnih okoliščinah se ti negativni učinki razvijejo in če med temi spremenljivkami obstaja vzročno-posledična povezava, zakaj še vedno obstaja. Zato naj bi to razmerje vzgojitelja opominjalo, da uporaba računalnika ni nujno »panaceja« in da se ne sme uporabljati neodgovorno in okupirati pozornosti učencev, ki se z njim težko soočajo.

Poleg tega bi moralo to negativno razmerje med uporabo računalnika in dosežkom spomniti učitelje, da obstaja velika potreba po nenehnem konstruktivnem in sumativnem ocenjevanju v znanosti. S pomočjo pravilnega ocenjevanja je mogoče prepoznati težave, ki nastanejo med učenjem in jih po možnosti odpraviti, če jih odkrijemo dovolj zgodaj. Ocenjevanje pa je treba uporabljati tudi pametno, tako da lahko dopolnjuje učni proces. Ker je računalniško podprto učenje v središču te konference, bo ta članek povezan z računalniško podprtim ocenjevanjem. Namen tega dokumenta je preseči preprosto računalniško podprto usposabljanje in opisati računalniško prilagojeno testiranje ter razpravljati o njegovih posledicah, prednostih in o tem, kako lahko učinkovito dopolnjuje računalniško podprto usposabljanje na tem znanstvenem področju.

Opis Računalniško podprto testiranje (CT) lahko opredelimo kot vsako vrsto ocenjevanja, ki se izvaja prek računalnika., odvisno od tega, kako prilagojen je test (College Board, 2000). Na primer, nekateri računalniški testi, imenovani tudi fiksni računalniški testi, so povsem linearni (Parshall, Spray, Kalohn in Davey, 2002). To so testi, ki so najbolj podobni testiranju s papirjem in svinčnikom, saj so fiksne oblike, fiksne dolžine in so testni elementi vnaprej nastavljeni v določenem vrstnem redu.

Za razliko od fiksnih računalniških testov so računalniško prilagojeni testi (CAT) računalniško podprti testi, ki imajo največjo stopnjo prilagodljivosti, saj jih je mogoče prilagoditi vsakemu študentu glede na splošno težavnost in vrstni red, v katerem so vprašanja predstavljena testirancu. Računalniško prilagojeni testi (CAT) so torej računalniški testi, ki so izdelani in prilagojeni posebej za vsakega testiranca na podlagi ocene njegovih sposobnosti in na podlagi odgovorov v prejšnjih korakih.

Prednosti računalniških prilagodljivih testov

Glavne prednosti računalniškega prilagodljivega testiranja so povezane z dejstvom, da so učinkoviti tako glede časa kot tudi porabljenih virov. O teh prednostih bomo razpravljali v naslednjem razdelku z vidika izvajalcev testov, z vidika učitelja, ki želi ugotoviti učenčevo raven znanja, in tudi z vidika razvijalca testa.

Učinkovitost Prilagodljivi testi omogočajo natančnejšo in cenejšo oceno sposobnosti subjekta kot uporaba papirnatih testov. Tipični papirnati testi so ustvarjeni za množično testiranje, tako da se test izvaja za veliko skupino študentov z različnimi sposobnostmi. Da bi to naredili, je večina vprašanj na tem testu srednje zahtevnih (saj ima večina študentov povprečna zmogljivost ) Posledica tega je, da test s to vsebino povzroča težave za učence z visokim in slabim uspehom. Testiranec z nizko stopnjo znanja je sposoben odgovoriti na prvih nekaj relativno lahkih vprašanj. In na vprašanja srednje in visoke ravni zahtevnosti študentu ne bo lahko odgovoriti. Posledično lahko testiranec na koncu ugiba odgovore na ta vprašanja ali pa jih preprosto pusti prazne. V tem primeru je težko zares oceniti njegovo znanje in zmožnosti, saj bi morali morebitni sklepi temeljiti le na odgovorih na prvih nekaj vprašanj, ki jih je učenec razumel. Ta situacija je podana spodaj. Učitelj želi opraviti test iz biologije na temo "Jetra" Vprašanje nizka raven zahteva prepoznavanje lokacije jeter na slikah osebe, vprašanja na visoki ravni pa zahtevajo študentovo sposobnost diagnosticiranja bolezni jeter na podlagi slik.

V tem primeru, če učenec ne zna locirati niti jeter na sliki človeškega telesa, ni razloga, da bi mu postavili težje vprašanje. Če pogledamo tovrstne teste z vidika študenta s poglobljenim znanjem biologije, je stanje nekoliko boljše, čeprav še vedno ni popolno. Večina vprašanj bo za to osebo prelahkih. Prilagodljivi testi vam omogočajo, da učinkovito izberete vprašanja, ki so posebej oblikovana za določeno raven znanja vsakega testiranca. Ko so vsa vprašanja jasno usmerjena v sposobnosti vsakega učenca, lahko učitelj pride do bolj zanesljivih in veljavnih sklepov o dejanskem znanju učenca.

Povratne informacije

Druga prednost računalniško podprtega testiranja na splošno, pa tudi računalniško prilagojenih testov, je, da lahko manipulirajo z neposrednimi in takojšnjimi povratnimi informacijami med učenci in učitelji (Wise & Plake, 1990). Pri tipičnem testu v papirni obliki vedno obstaja časovni zamik med učiteljem in testirancem. Brez oblikovanja ocene učitelji ne bodo mogli ugotoviti, ali je računalniško podprto poučevanje resnično namenjeno pomoči učencu pri učenju ali ne. To je še posebej pomembno, ker se lahko nekateri učenci brez ustreznega ocenjevanja znajdejo v slabšem položaju pri računalniškem usposabljanju.

Z vidika razvijalca testa je ustvarjanje prilagodljivega testa zamudno, vendar je bolj učinkovito z vidika učitelja.

Predvsem morajo učenci med prilagoditvenim testiranjem odgovoriti na manj vprašanj kot med rednim testiranjem.

Poleg tega redno testiranje običajno izvaja cela skupina za določen čas, kar nekaterim študentom morda ne ustreza. Učitelj in celotna skupina morajo počakati, da vsi učenci opravijo test, preden lahko nadaljujejo z drugo dejavnostjo. Pri računalniško prilagojenem testiranju lahko študenti opravljajo izpit, kadar koli so pripravljeni, edini pogoj je, da je računalnik na voljo, in jim ni treba čakati, da je celotna skupina pripravljena na opravljanje testa ali da ga celotna skupina opravi. . Z učiteljevega vidika prilagodljivo testiranje prihrani čas in učitelju ni več treba skrbeti za ustvarjanje testov za skupino, če je CAT sposoben pokriti zajeto snov. Poleg tega učitelj prihrani čas pri preverjanju nalog, saj se test točkuje računalniško. Druge ugodnosti Računalniško prilagodljivo testiranje ima tudi nekaj dodatnih prednosti. Pri računalniškem prilagodljivem testiranju

visoki ravni

varnost, saj seznama vprašanj ni več mogoče ukrasti, goljufanje pri sosedih pa ni donosno, saj je večina testnih vprašanj individualnih za vsakogar. Poleg tega je mogoče z uporabo CAT zbrati druge vrste podatkov, na primer količino časa, ki je potreben za odgovor na posamezno vprašanje, ali število sprememb, ki se izvedejo za študente med opravljanjem testa. ZAKLJUČEK

Sodobne raziskave

1. Bennett, R. E. (1999). Uporaba nove tehnologije za izboljšanje ocenjevanja. RR99-6. Princeton, NJ: Izobraževalna služba za testiranje. 2. Lord, F. M. (1980). Uporaba teorije odziva na postavke za praktične probleme testiranja. Hillsdale, NJ: sodelavci Lawrencea Erlbauma. 3. Meijer, R. R. in Nerling, M. L. (1999). Računalniško prilagojeno testiranje: Pregled in uvod. Uporabljeno psihološko merjenje, 23(3), 187-194. 4. O'Neill, K. (1995). Uspešnost preizkušancev s posebnimi potrebami na računalniških testih akademskih spretnosti. Prispevek, predstavljen v Ameriškem izobraževalnem raziskovalnem združenju, San Francisco, april 1995. 5. Papanastasiou, E. C. (2001). „Postopek preureditve“ za izvajanje prilagoditvenih testov, kadar so dovoljene možnosti pregleda. (Doktorska disertacija, Michigan Državna univerza

, 2001).