Create your own awesome maps

Even on the go

with our free apps for iPhone, iPad and Android

Get Started

Already have an account?
Log In

Redesigning a Learning and Assessment Environment: The Influence On Students' Perceptions of Assessment Demands And Their Learning Strategies (Segers, Nijhuis & Gijselaers, 2006) by Mind Map: Redesigning a Learning and
Assessment Environment: The
Influence On Students
0.0 stars - reviews range from 0 to 5

Redesigning a Learning and Assessment Environment: The Influence On Students' Perceptions of Assessment Demands And Their Learning Strategies (Segers, Nijhuis & Gijselaers, 2006)

04. Resultaten

Alleen de 'paired cases' worden meegewogen

Studenten die zowel de eerste als de laatste sessie hebben bijgewoond en dus alle testen hebben ingevuld.

hoofddoel analyse resultaten

het verkennen van de relaties tussen intentionele leerstrategieen van studenten, hun percepties van de assessment-eisen en de daadwerkelijke strategieen die ze hebben toegepast.

1. Studenten in de ABL module adopteren een meer diep leren strategie en minder een oppervlakte leren strategie dan studenten in de PBL module.

2. Er waren geen verschillen tussen deze twee groepen als het gaat om intentionele leerstrategieen en hun percepties van de assessment-eisen

3. Voor de ABL en de PBL module is er een duidelijke positieve correlatie tussen de intentionele leerstrategie, de daadwerkelijk toegepaste leerstrategie en hun perceptie van de assessment eisen

Studenten die van plan zijn om oppervlakte leren strategieën toe te passen, zien ook de assessment eisen als 'oppervlakkig' en zullen deze strategieën dan ook toepassen.

4. Ondanks een sterke correlatie tussen daadwerkelijk toegepaste diep leren strategie en de 'diepe' percepties van de assessment eisen van studenten, bestaat er een zwakkere associatie tussen de intentionele diep leren strategie en de de diepere percepties van de assessment.

5. Correlatie met de daadwerkelijk toegepaste oppervlakte leren leerstrategie en oppervlakte benadering van de assessment eisen is zeer laag tot verwaarloosbaar.

00. Abstract

doel

Onderzoek had als doel om te bepalen of studenten in een herontworpen cursus..., 1. verschillende percepties hadden over de eisen van toetsing, 2. of ze hun leerstrategieen zouden aanpassen richting diep leren

resultaat

original assignment-based (ABL) en problem-based (PBL), tegen de verwachtingen in ontwikkelde de studenten MEER dieper leren en MINDER oppervlakte leren strategieen

geen verschillende percepties in eisen van toetsing gemeten

studenten die hun intenties uitspreken om een bepaalde leerstrategie toe te passen, zien de toetseisen in dat licht en passen ook daadwerkelijk een gerelateerde leerstrategie toe.

01. Introduction

In veranderende samenleving meer behoefte aan kritische, probleemoplossende, zelf-regulerende competenties

kritiek hoger onderwijs dat deze onvoldoende wordt ontwikkeld

het ontbreek de studenten vaak aan de kwaliteiten die samenhangen met een diep leren benadering., de vaardigheid om een professionele situatie te benaderen en daar actie op te ondernemen, het begrijpen van de structurele complexiteit van de taak, het begrijpen van de rationale achter de feiten, het betekenisvol maken van de taak

assessment methodiek

een hele belangrijke contextuele variabele die de leerstrategie van de student beinvloed, studenten kunnen schakelen tussen oppervlakte- en diepte benaderingen (leren) om aan te sluiten bij de methode van toetsing, Biggs' presage-process-product systems model of teaching and learning': 3P-model, 3P-model, 1. presage, factoren als voorkennis. committment e.d gecombineerd met de onderwijscontext, 2. process, instructie- en leeractiviteiten, 3. product, leeruitkomsten, Studenten reageren verschillend op onderwijs- en instructiecontext afhankelijk van hun perceptie van deze context en de vereisten., "backwash-effect" of "pre-assessment effect", Bij interpretatie van de assessment taak passen studenten bewust of onbewust hun leerstrategie of benadering aan, met als doel de taak te kunnen oplossen., mede van invloed op 'cue-seeking' students, perceptie assessment-taak, perceptie = passieve verwerving en reproductie, oppervlakkige leerbenadering met lage orde denkstrategieen, perceptie = actieve verwerving gericht op begrip, integratie en toepassing van de kennis, diep leren met hoge orde denkstrategieen, "hidden curriculum", "The hidden curriculum, which largely depended on students' interpretation of what the assessment system valued and required, in practice replaced the stated curriculum" (p.224), Niet veel onderzoek met empirisch bewijs voor de relatie tussen de intentionele studie- en leerbenaderingen van studenten, hun perceptie van de eisen van nieuwe vormen van assessment en hun eigenlijke leerstrategieen., onderzoek gaat vaak voorbij aan de leeromgeving waar assessment een onderdeel van is., Biggs (1996): constructive alignment, Assessment kan alleen het leren bevorderen en sturen als er sprake is van constructive alignment tussen leren, instructie en assessment.

02. Students' Perception of the Assessment Demands and their Study Approaches

Vier studies in afgelopen decennia die empirisch bewijs hebben aangedragen voor de relatie tussen de percepties van studenten wat betreft de vereisten van de assessment en hun leerstrategieen

1. Tang (1994), doel, doel was om de gewoonlijke manier van leren door studenten en voorbereidingsstrategieen voor de assessments te vergelijken in de sitiuatie van korte essay-vragen en (hoger orde denkvaardigheden) cursus-opdrachten, resultaten, studenten die een oppervlakkige benadering hebben passen meer lager orde strategieen toe tijdens het studeren voor het assessment, studenten die een dieper leren benadering hebben, passen hogere orde strategie toe, studenten met dieper leren benadering passen zich aan aan lagere orde eisen van het assessment., de nieuwe vorm van assessment was voor studenten een nieuwe ervaring, ze konden niet vertrouwen op hun gewoonlijke manier van leren, hogere orde strategie wordt toegepast afhankelijk van intrinsieke en extrinsieke motivatie

2. Scouller (1996), doel, het onderzoeken van leerstrategieen van studenten (diep of oppervlakkig) en hun percepties van de intellectuele vaardigheden die worden getoetst (lager of hoger orde) binnen twee assessment contexten binnen dezelfde module, een essay en een korte antwoord toets., resultaten, De methode van assessment beïnvloedt sterk de wijze waarop de studenten leren en zich voorbereiden op de assessment taak, essay, studenten passen diep leren strategie toe, kort antwoord toets, studenten passen oppervlakkig leren strategie toe, Vergeleken met Tang (1994), studenten hadden wel eerder ervaring met de verschillende typen van assessment, inclusief de essay, en konden dus handelen op basis van parate, gewoonlijke strategieen

3. Sambell et al. (1997), doel, Breder perspectief in onderzoek naar het effect van assessment door te kijken naar verschillende vormen van assessment en naar verschillende manieren om invloed uit te oefenen op het leren van studenten., resultaten, studenten reageren negatief op wat zij zien als traditioneel toetsen, en passen bewust lager orde leerstrategieen toe., Bij nieuwe vormen van assessment voelen studenten zich uitgedaagd en passen hoger orde strategieen toe., student criteria voor assessment om een positief effect te hebben op leren, 1. Authenticiteit, 2. De vereisten moeten redelijk zijn, 3. De mate waarin de assessment taak daadwerkelijk de complexe vaardigheden meet, tegenover het blind vertrouwen op geheugen en reproductie van feiten, Er is waarschijnlijk een verschil tussen wat studenten vinden over dat hun leren wordt versterkt door de context van de alternatieve wijze van assessment en hun echte leergedrag.

4. Segers et al. (2001), doel, Het meten van de validiteit van de 'OverAll Test', instrument 'Overall Test', gebaseerd op casus, vereist van studenten toepassen van kennis als een hulpmiddel om in nieuwe, authentieke casussen probleemsituaties te herkennen en beschrijven, te analyseren, op te lossen en daarover te evalueren., in de context van probleemgestuurd leren curriculum, resultaten, hoewel studenten en docenten de relevantie van de test beschrijven en de doelen van de test onderschrijven, geven ze diverse redenen aan waarom dit instrument ze niet in de richting van het diep leren, mismatch tussen de instructie benadering (PBL) en hun perceptie van de eigenlijke implementatie van deze benadering, Het is niet de assessment die problematisch is, maar de alignment van de instructie, het leerproces van de studenten en het assessment zoals het wordt gezien door de studenten en docenten.

Doel van onderzoek

Dit onderzoek bouwt verder op het theoretisch- en conceptueel kader van de besproken onderzoeken

Verder verkennen van de condities voor assessment om het leerproces te sturen door het effect van de implementatie van een specifiek assessment instrumen, nl. de OverAll Test, te onderzoeken, expliciete aandacht voor de alignment, herontwerp van de leeromgeving

Hoofdvraag, In welke mate zetten studenten meer diep-leren strategieen in in de herontworpen module dan in de originele module?, Twee variabelen worden meegenomen, de intentionele studie- en leerstrategieen als een indicator van hun gewoonlijke leerstrategie en aanpak, de percepties van studenten over de vereisten van de assessment taak, Twee deelvragen, 1. Verschillen studenten in de herontworpen module met die van studenten in de originele module op terrein van de intentionele studie- en leerstrategieen en percepties van de vereisten van de assessments, 2. Is er een relatie tussen de leerstrategieen die de studenten van plan zijn in te zetten, hun perceptie van de vereisten van de assessment taak en de leerstrategieen die ze daadwerkelijk inzetten?

03. Method

Deelnemers

twee opeenvolgende cohorten 2e jaars studenten, module International Business Strategy, 1e cohort, assignment-based, n = 406, 2e cohort, problem-based, herontwerp, n = 312, minder studenten vanwege instroomlimiet

Module International Business Strategy

verplichte cursus begin jaar twee International Business Program

studenten hebben in eerste jaar al ervaring opgedaan met verschillende instructiebenaderingen, van assignment-based naar meer problem-based, ook ervaring met verschillende assessment taken, performance-based assessment, OverAll Tests, Knowledge Test

opzet module 'assignment based', studenten werkten in kleine tutorial groepjes aan taken die 'assignments' werden genoemd, een set vragen die door behulp van het boek beantwoord moesten worden, twee studenten verzorgden een presentatie van de relevante hoofdstukken en hun antwoorden van de vragen, daarna ruimte voor discussie

mismatches module 'assignment based', module werd vergeleken met de instructie principes verkregen uit de constructivistische proposities van Savery & Duffy, 1. Begrip ligt in onze interactie met de omgeving, 2. Cognitieve conflicten of verwondering is de stimulus van leren en bepaalt de organisatie en karakter van wat er geleerd wordt., 3. Kennis ontwikkeld zich door sociale onderhandeling en door de evaluatie van het aantoonbare begrip van het individu., 1. De taken hebben het format van assignments in plaats van omschrijvingen van een aantal gebeurtenissen (problemen) die geanalyseerd dienen te worden., de assignments stimuleren de studenten niet om meerdere representaties van een probleem te ontwikkelen, ook niet om een probleem diep te analyseren door verschillende perspectieven tegen elkaar af te zetten., er wordt geen eigenaarschap ontwikkeld, 2. Er is vrij weinig relevante bronnen te bestuderen, studenten worden niet uitgenodigd om verschillende bronnen met elkaar te vergelijken, er wordt geen eigenaarschap ontwikkeld, niet over het probleem of het proces van probleem oplossen, de studenten worden niet uitgedaagd om ideeen te testen tegen alternatieve standpunten en contexten, 3. De cursus bestaat uit kleine, losse taken die losjes verband houden met elkaar, 4. Door het geven van de presentaties schoten de mede-studenten in een (mogelijk) passieve houding, 5. Het assessment (en daar werd het cijfer op gebaseerd) had een zwaartepunt bij het reproduceren van kennis, versterkt het oppervlakkige leren in plaats van diep leren

opzet herontwerp, module problem-based, 1. De problemen die gepresenteerd werden aan de studenten waren in de context van een bestaand bedrijf., 2. Studenten worden gevraagd zelf het probleem te definieren, eigen leerdoelen formuleren, startpunt voor zelfstudie student, 3. Geen literatuurreferenties en aantal mogelijke bronnen is uitgebreid, stimuleren van meer verscheidenheid in zoeken naar informatie en het uitdagen van de studenten om hun ideeen te testen tegenover alternatieve standpunten, 4. Stimuleren van actieve participatie van alle groepsleden door vervangen van presentaties met groepsdiscussie, "problem-analysis using the seven-jump learning procedure" (fig. 4, p. 231), 5. Implementeren van de OverAll Test, constructive alignment, vragen worden geformuleerd die vereisen dat studenten hun kennis en vaardigheden als een instrument inzetten om een probleem te beschrijven, te analyseren, op te lossen en daarover te evalueren.

Instrumenten

Assessment Perception Questionnaire (Scouller & Prosser, 1994), Meet de percepties van studenten over het cognitieve niveau dat gemeten wordt door de assessment-taken., Schaal 1 = lager orde oppervlakte leren vaardigheden, Schaal 2 = hoger orde vaardigheden over diep leren

Study Process Questionnaire (Biggs, 1987), meet de toegepaste leerstrategieen, 1. Oppervlakte leren, motief, strategie, 2. Diep leren, motief, strategie, 3. Prestatiegericht, organisatie van tijd en werkplek om het hoogste cijfer te behalen, ongeacht of het interessant is. Dit is meer een persoonlijke karktertrek van de student., voor dit onderzoek hebben ze de SPQ aangepast, kan toegepast worden om de resultaten van innovaties gericht op diep leren te meten.

Procedure

De vragenlijsten zijn afgenomen in de tutorial groepen.

De SPQ is twee keer afgenomen, Aan het begin van de module werden de leerstrategieen gemeten die de studenten van plan waren om in te zetten., Er wordt aangenomen dat dit hun gewoonlijke leerstrategie representeert, omdat studenten met name hun antwoorden op eerdere ervaringen baseerden en niet beïnvloed worden door kennis over de module ., In de laatste sessie voor het assessment werd aan studenten gevraagd om uiteindelijk ingezette leerstrategieen aan te geven.

Vervolgens werd de APQ afgenomen, niet duidelijk voor of na assessment

Methode van analyse

t-test, analyse verschil tussen de intentionele en de daadwerkelijke leerstrategieen van de studenten, APQ in beide condities (origineel en herontwerp), t-test gebruik je om te toetsen of het gemiddelde van twee groepen statistisch verschillen

correlationele analyse, correlaties worden berekend van de scores op de afzonderlijke uitspraken met de totale score op de schaal, de item-totaal correlatie, correlatie is een empirische relatie tussen twee variabelen, 1. Veranderingen in de ene worden geassocieerd met verandering in de andere, 2. Specifieke eigenschappen van de ene variabele worden geassocieerd met de specifieke eigenschappen van de andere

05. Discussion and conclusion

Waarom zetten studenten in de PBL module meer oppervlakte leren strategieen in dan de studenten in de ABL module?

1. Andere contextuele elementen die de ervaringen van de studenten karakteriseren hebben de studenten in een oppervlakkige benadering gedwongen (Thomson and Falchikov, 1998), study orchestration, studiebenadering die wordt aangenomen door de individuele student of groep studenten, onder invloed van de context, studiebenaderingen worden beinvloed door het kwalitatieve niveau van perceptie van het individu van kernelementen in de leeromgeving, bijv. uit Segers et al. (2001): er wordt een overvol programma ervaren, er is geen ruimte om diep leren strategie toe te passen, dus gebruiken we een oppervlakkiger benadering.

2. Er vanuit gaande dat studenten de benodigde strategieen tot hun beschikking hebben organiseren hun studie om de taak voor elkaar te krijgen (Tang, 1994), in de afwezigheid van deze strategieen, studenten moeten dan vertrouwen op de aanwezige strategieen, of nieuwe adopteren. Ook in de PBL conditie kan het dus zijn dat studenten dat niet doen en lagere orde leerstrategieen toepassen.

Waarom was er geen verschil in de percepties van de assessment eisen tussen de studenten in de PBL-module en de studenten van de ABL-modue?

Waarom hebben de studenten in de PBL module geen 'dieper leren' perceptie van deze assesment eisen?, Kan verklaart worden doordat studenten het concept 'begrip' verschillend interpreteren, Studenten met een oppervlakkige leerbenadering zouden niet kunnen differentieren tussen de concepten 'begrip', 'terughalen' en 'feitelijk terughalen'., Dit zijn concepten die in de APQ-vragenlijst gebruikt worden en dus misschien niet goed worden begrepen. Daar is in dit onderzoek echter geen argument voor aan te wijzen.

Je moet voorzichtig zijn in het interpreteren van de patronen in termen van causaal verband en het inzetten van strategieen door studenten.

06. Implications for Educational Practice

De bevindingen wijzen er op dat ondanks dat assessment het leren stuurt, het mechanisme veel complexer is dan gedacht.

Hoe kun je als docent, terwijl je assessment taken meer richting dieper leren brengt, je studenten ondersteunen in het aanpassen van hun leerstrategieen?

1. De docent moet de assessment eisen zo duidelijk mogelijk communiceren, zodat studenten een zo juist mogelijke perceptie van de eisen krijgen en daar vervolgens op kunnen antwoorden., Maak ze onderdeel van het debat., Houd rekening met het feit dat dat studenten ervaring hebben met assessment taken die met name gericht zijn het reproduceren van kennis, en deze ervaringen vormen de basis van het inzetten van studie strategieën en zijn van invloed op de perceptie die zij hebben over toekomstige assessment eisen., Besteed meer aandacht aan formatieve assessment: om het leren te bevorderen, ook op het niveau van leerstrategieen.

2. Doordat er een associatie is tussen de percepties van studenten van de assessment eisen en hun daadwerkelijk ingezette leerstrategieen, wordt er gesuggereerd dat docenten en curriculum ontwerpers rekening moeten houden met hoe studenten kernelementen in hun leeromgeving percipiëren., "It is not the constructive alignment as designed but as perceived that impacts upon students' learning" (p. 238)

3. Het betreft een innovatie, daar kan wat verzet tegen zijn waardoor er de neiging ontstaat terug te vallen op de gewoonlijke aanpak. Geef studenten tijd en om de veranderingen volledig te begrijpen.