Cyn cofrestru ar y cwrs Peirianneg Uwch newydd, rydym yn profi darpar fyfyrwyr i bennu lefel eu parodrwydd a deall beth yn union sydd angen iddynt ei gynnig i baratoi ar gyfer y cwrs. Ond mae cyfyng-gyngor yn codi: ar y naill law, rhaid inni brofi gwybodaeth mewn Gwyddor Data, ar y llaw arall, ni allwn drefnu arholiad 4 awr llawn.
I ddatrys y broblem hon, rydym wedi defnyddio pencadlys TestDev yn y tîm datblygu cwrs Gwyddor Data (ac mae'n edrych fel mai dim ond y dechrau yw hwn). Rydym yn cyflwyno rhestr i chi o 10 perygl a wynebir wrth ddatblygu profion i asesu gwybodaeth. Gobeithio y bydd byd dysgu ar-lein ychydig yn well ar ôl hyn.
Rhaca 1: Methu â diffinio nodau profi yn glir
Er mwyn diffinio nodau'n gywir a chreu prawf a fydd yn eu cymryd i ystyriaeth, yn ystod y cam cynllunio mae'n rhaid i ni ateb sawl cwestiwn:
- Beth ydyn ni'n ei wirio mewn gwirionedd?
- Ym mha amgylchedd y bydd y profion yn cael eu cynnal a pha fecaneg a ddefnyddir? Beth yw'r cyfyngiadau yn yr amgylchedd hwn? Bydd yr un pwynt hwn yn caniatáu ichi ddeall y gofynion technegol ar gyfer y ddyfais y cynhelir y profion arni, a hefyd ar gyfer y cynnwys (os cymerir y prawf o ffonau, dylai'r lluniau fod yn ddarllenadwy hyd yn oed ar sgrin fach, dylai fod yn bosibl eu helaethu, etc.).
- Pa mor hir fydd y prawf yn ei gymryd? Mae angen i chi feddwl am yr amodau y bydd y defnyddiwr yn sefyll y prawf oddi tanynt. A allai fod sefyllfa lle mae angen iddo dorri ar draws y broses brofi ac yna parhau eto?
- A fydd adborth? Sut ydyn ni'n ei ffurfio a'i gyflwyno? Beth sydd angen i chi ei dderbyn? A oes oedi rhwng cynnal prawf ac adborth?
Yn ein hachos ni, ar ôl ateb y cwestiynau hyn, fe wnaethom ddiffinio'r rhestr ganlynol o nodau ar gyfer y prawf:
- Dylai'r prawf ddangos a yw darpar fyfyrwyr yn barod i ddilyn y cwrs ac a oes ganddynt ddigon o wybodaeth a sgiliau.
- Dylai'r prawf roi deunydd i ni ar gyfer adborth, nodi'r pwnc y gwnaeth myfyrwyr gamgymeriad ynddo, fel y gallant wella eu gwybodaeth. Byddwn yn dweud wrthych sut i'w gyfansoddi isod.
Rake 2: Methiant i lunio manylebau technegol ar gyfer yr awdur prawf arbenigol
Er mwyn cyfansoddi eitemau prawf, mae'n bwysig iawn cynnwys arbenigwr yn y maes y mae gwybodaeth yn cael ei phrofi ynddo. Ac ar gyfer arbenigwr, yn ei dro, mae angen manyleb dechnegol gymwys (disgrifiad), sy'n cynnwys pynciau'r prawf, y wybodaeth/sgiliau sy'n cael eu profi a'u lefel.
Ni fydd arbenigwr yn gwneud manylebau technegol o'r fath drosto'i hun, oherwydd ei swydd yw meddwl am dasgau, nid strwythur y prawf. Ar ben hynny, ychydig o bobl sy'n datblygu profion yn broffesiynol, hyd yn oed yn y broses addysgu. Dysgir hyn mewn arbenigedd ar wahân - seicometrig.
Os ydych chi am ddod yn gyfarwydd â seicometrig yn gyflym, yna yn Rwsia mae yna i bawb sydd â diddordeb. Ar gyfer astudiaeth fanylach, mae gan y Sefydliad Addysg ac ysgol i raddedigion.
Wrth baratoi'r manylebau technegol, rydym yn casglu disgrifiad manwl o'r prawf ar gyfer yr arbenigwr (neu well, ynghyd ag ef): pynciau tasgau, math o dasgau, eu rhif.
Sut i ddewis y math o dasgau: ar ôl penderfynu ar y pynciau, rydym yn penderfynu pa dasgau all brofi hyn orau? Opsiynau clasurol: tasg benagored, tasg dewis lluosog neu un dewis, paru, ac ati (peidiwch ag anghofio am gyfyngiadau technegol yr amgylchedd profi!). Ar ôl pennu a nodi'r math o dasgau, mae gennym fanyleb dechnegol barod ar gyfer yr arbenigwr. Gallwch ei alw'n fanyleb prawf.
Rhaca 3: Ddim yn cynnwys arbenigwr mewn datblygu profion
Wrth drochi arbenigwr mewn datblygu profion, mae'n bwysig iawn nid yn unig nodi iddo "gwmpas y gwaith", ond ei gynnwys yn y weithdrefn ddatblygu ei hun.
Sut i wneud gweithio gydag arbenigwr mor effeithiol â phosibl:
- Gosodwch ef ymlaen llaw a threulio peth amser yn siarad am wyddoniaeth datblygiad prawf a seicometrig.
- Canolbwyntiwch sylw'r gwerthuswr ar greu offeryn asesu dilys a dibynadwy, nid rhestr o gwestiynau.
- Eglurwch fod ei waith yn cynnwys cyfnod paratoi, nid yn unig datblygiad y tasgau eu hunain.
Efallai y bydd rhai arbenigwyr (oherwydd eu natur) yn gweld hyn fel prawf o'u gwaith eu hunain, ac rydym yn esbonio iddynt, hyd yn oed os ydym yn creu tasgau rhagorol, efallai na fyddant yn gweddu i'r nodau profi penodol.
Er mwyn gwneud i'r broses fynd yn gyflym, rydym yn paratoi tabl o ymdriniaeth pwnc (gwybodaeth a sgiliau) gyda'r arbenigwr, sy'n rhan o fanyleb y prawf. Y tabl hwn sy'n ein galluogi i weithio allan y cwestiynau'n gywir a phenderfynu ar yr hyn y byddwn yn ei fesur. Ym mhob achos penodol gellir ei lunio ychydig yn wahanol. Ein tasg yw gwirio pa mor dda y mae person yn deall gwybodaeth a sgiliau cyrsiau sylfaenol, blaenorol er mwyn deall pa mor barod ydyw i astudio ar gwrs newydd.
Rhaca 4: Meddwl mai’r arbenigwr “sy’n gwybod orau”
Yn gwybod y pwnc yn well. Ond nid yw bob amser yn esbonio'n glir. Mae'n bwysig iawn gwirio geiriad yr aseiniadau. Ysgrifennwch gyfarwyddiadau clir, er enghraifft, “Dewiswch 1 opsiwn cywir.” Mewn 90% o achosion, mae arbenigwyr yn paratoi cwestiynau mewn ffordd y maen nhw eu hunain yn ei deall. Ac mae hynny'n iawn. Ond cyn trosglwyddo'r prawf i'r rhai a fydd yn ei gymryd, mae angen gwirio a chribo popeth fel bod y bobl sy'n sefyll y prawf yn deall yn union beth sy'n ofynnol ganddynt ac nad ydynt yn gwneud camgymeriadau dim ond oherwydd y gallent gamddehongli testun y dasg.
Er mwyn osgoi dehongli tasgau ddwywaith, rydym yn cynnal "labordai gwybyddol." Gofynnwn i bobl o'r gynulleidfa darged sefyll y prawf, gan ddweud eu barn yn uchel a'i recordio'n fanwl. Mewn “labordai gwybyddol” gallwch “ddal” cwestiynau aneglur, geiriad gwael, a chael yr adborth cyntaf ar y prawf.
Rhaca 5: Anwybyddu amser gweithredu'r prawf
modd coegni: ymlaen
Wrth gwrs, ein prawf ni yw'r gorau, mae pawb yn breuddwydio am ei basio! Ie, pob un o'r 4 awr.
modd coegni: off
Pan fydd rhestr o bopeth y gellir ei wirio, y prif beth yw peidio â'i wneud (ar yr olwg gyntaf mae'n swnio'n rhyfedd, onid yw?). Mae angen i chi dorri'n ddidrugaredd, gan nodi gwybodaeth a sgiliau allweddol gydag arbenigwr (ie, gellir profi nifer o sgiliau yn y prawf hefyd). Edrychwn ar y math o dasgau ac amcangyfrif yr amser cwblhau targed: os yw popeth yn dal i fod yn fwy na therfynau rhesymol, rydym yn ei dorri!
Er mwyn lleihau'r cyfaint, gallwch hefyd roi cynnig (yn ofalus) ar brofi dwy sgil mewn un dasg. Yn yr achos hwn, mae'n anodd deall pam y gwnaeth y person gamgymeriad, ond os caiff ei wneud yn gywir, gellir ystyried y ddau sgil. Mae’n bwysig gwneud yn siŵr bod y 2 sgil hyn yn cyfateb i’r un maes gwybodaeth.
Rhaca 6: Ddim yn meddwl drwy'r system sgorio
Yn aml, wrth lunio profion asesu, maent yn defnyddio'r system sgorio glasurol, er enghraifft, 1 pwynt ar gyfer tasgau hawdd a 2 bwynt ar gyfer rhai anodd. Ond nid yw'n gyffredinol. Ni fydd dim ond swm y pwyntiau sy'n seiliedig ar ganlyniadau'r profion yn dweud llawer wrthym: ni wyddom ar gyfer pa dasgau y derbyniwyd y pwyntiau hyn a dim ond nifer y tasgau cywir y gallwn eu pennu. Mae angen i ni ddeall yn union pa sgiliau y mae'r rhai sy'n cymryd prawf yn eu dangos. Yn ogystal, rydym am roi adborth iddynt ar ba bynciau sydd angen eu gwella.
Wedi’r cyfan, rydym yn cynnal prawf a fydd yn rhannu pobl yn rhai sy’n barod a’r rhai nad ydynt yn barod i gwblhau’r rhaglen; byddwn yn cynghori rhai i baratoi ar gyfer y cwrs trwy hyfforddiant am ddim. Mae'n bwysig i ni fod y grŵp hwn yn cynnwys dim ond y rhai sydd wir ei angen ac sy'n barod ar ei gyfer.
Yr hyn a wnawn yn ein sefyllfa: rydym yn pennu o fewn y gweithgor o ddatblygwyr prawf pa grwpiau o bobl y mae angen eu nodi (er enghraifft, yn barod i ddysgu, yn rhannol barod) ac yn ffurfio tabl o nodweddion grwpiau o'r fath, gan nodi pa sgiliau a gwybodaeth yn berthnasol i'r grŵp o hyfforddiant parod i ddysgu. Fel hyn, gallwch chi lunio “anhawster” tasgau ar gyfer profion o'r fath.
Rhaca 7: Gwerthuso canlyniadau yn awtomatig yn unig
Wrth gwrs, dylai asesu fod mor wrthrychol â phosibl, felly mae rhai o ddeunyddiau’r myfyrwyr yn cael eu hasesu’n awtomatig, “wrth allweddi” – gan gymharu â’r atebion cywir. Hyd yn oed os nad oes system brofi arbennig, mae yna ddigon o atebion rhad ac am ddim. Ac os ydych chi'n deall egwyddorion ysgrifennu sgriptiau, yna gallwch chi wneud beth bynnag rydych chi ei eisiau gyda ffurflenni Google a chanlyniadau mewn tablau. Os yw rhai o'r tasgau yn cael eu gwirio gan arbenigwyr, yna mae angen i ni feddwl am roi atebion i'r arbenigwyr, heb wybodaeth am y rhai sy'n cymryd y prawf. A meddyliwch am sut i integreiddio canlyniadau profion arbenigol yn yr asesiad terfynol.
I ddechrau, roeddem am wneud sawl tasg penagored gyda chod, lle mae arbenigwyr yn gwerthuso atebion yn seiliedig ar feini prawf a ffurfiwyd ymlaen llaw, a gwnaethom hyd yn oed baratoi system sy'n allforio atebion unigol gan gyfranogwyr y prawf i dabl arbennig ar gyfer arbenigwyr, ac yna'n mewnforio'r canlyniadau i mewn. tabl gyda chyfrifiadau asesu. Ond ar ôl trafod gyda chynrychiolwyr y gynulleidfa darged, rheolwr cynnyrch a dylunydd addysgol, roeddem yn teimlo y byddai cynnal cyfweliad technegol gydag adborth arbenigol ar unwaith a thrafod y cod, yn ogystal â materion unigol, yn llawer mwy effeithiol a defnyddiol i'r cyfranogwyr eu hunain. .
Nawr mae'r arbenigwr yn gwirio cwblhau'r prawf, gan egluro rhai cwestiynau. I wneud hyn, rydym wedi paratoi canllaw o gwestiynau a meini prawf asesu ar gyfer cyfweliad technegol. Cyn y cyfweliad technegol, mae'r arholwr yn derbyn map o atebion y sawl a gymerodd y prawf i'w helpu i ddewis cwestiynau i'w gofyn.
Rhaca 8: Peidiwch ag egluro canlyniadau profion
Mae rhoi adborth i gyfranogwyr yn fater ar wahân. Mae angen i ni nid yn unig hysbysu am sgôr y prawf, ond hefyd darparu dealltwriaeth o ganlyniadau'r profion.
Gall fod:
- Tasgau lle gwnaeth y cyfranogwr gamgymeriad ac a gwblhaodd yn gywir.
- Pynciau lle gwnaeth y cyfranogwr gamgymeriadau.
- Ei safle ymhlith y rhai sy'n sefyll yr arholiad.
- Disgrifiad o lefel y cyfranogwr, yn unol, er enghraifft, â’r disgrifiad o’r lefel arbenigol (yn seiliedig ar y disgrifiad o swyddi gwag).
Yn ystod lansiad peilot ein prawf, i'r rhai a oedd am gofrestru yn y rhaglen, ynghyd â'r canlyniadau, fe wnaethom ddangos rhestr o bynciau yr oedd angen eu gwella. Ond yn sicr nid yw hyn yn ddelfrydol, byddwn yn gwella ac yn darparu adborth gwell.
Rhaca 9: Peidiwch â thrafod y prawf gyda datblygwyr
Efallai mai’r rhaca craffaf, sy’n arbennig o annymunol i gamu ymlaen, yw anfon y prawf, y disgrifiad a’r raddfa sgorio at y datblygwyr “fel y mae”.
Beth yn union sydd angen ei drafod:
- Ymddangosiad y cwestiynau, y strwythur, lleoliad y graffeg, sut olwg sydd ar y dewis o'r ateb cywir.
- Sut mae'r sgôr yn cael ei gyfrifo (os oes angen), a oes unrhyw amodau ychwanegol.
- Sut mae adborth yn cael ei gynhyrchu, ble i gael testunau, a oes blociau ychwanegol a gynhyrchir yn awtomatig.
- Pa wybodaeth ychwanegol sydd angen i chi ei chasglu ac ar ba bwynt (yr un cysylltiadau).
Er mwyn osgoi camddealltwriaeth, rydym yn gofyn i'n datblygwyr godio 2 neu 3 o gwestiynau gwahanol fel y gallant weld sut olwg sydd arnynt cyn codio'r prawf ei hun.
Rake 10: Heb brofi, lanlwythwch yn uniongyrchol i'r cynhyrchiad
3 gwaith, bois, dylai'r prawf gael ei wirio 3 gwaith gan wahanol bobl, neu'n well eto, 3 gwaith yr un Cafwyd y gwir hwn gyda gwaed, chwys a phicseli o linellau cod.
Mae ein prawf yn gwirio'r triawd canlynol:
- Cynnyrch - yn gwirio'r prawf ar gyfer perfformiad, ymddangosiad, mecaneg.
- Datblygwr prawf - yn gwirio testun y tasgau, eu trefn, ffurf o weithio gyda'r prawf, mathau o dasgau, atebion cywir, darllenadwyedd a gwylio graffeg arferol.
- Mae awdur y tasgau (arbenigwr) yn gwirio'r prawf am ffyddlondeb o safle arbenigol.
Enghraifft o arfer: dim ond ar y trydydd rhediad, gwelodd awdur y tasgau fod 1 dasg yn aros yn yr hen fersiwn o'r geiriad. Roedd yr holl rai blaenorol hefyd yn rheoli'n weithredol. Ond pan gafodd y prawf ei godio, roedd yn edrych yn wahanol i'r hyn a ddychmygwyd yn wreiddiol. Mae'n debygol iawn y bydd yn rhaid cywiro rhywbeth. Mae angen cymryd hyn i ystyriaeth.
Cyfanswm
Gan osgoi'r holl “gribinio” hyn yn ofalus, fe wnaethon ni greu un arbennig , i brofi gwybodaeth ymgeiswyr. Gall unrhyw un ei brofi wrth i ni baratoi'r deunydd nesaf, lle byddwn yn dweud wrthych beth ddigwyddodd y tu mewn i'r bot, a beth y trawsnewidiodd y cyfan iddo yn ddiweddarach.
Gallwch gael proffesiwn y mae galw mawr amdano o'r dechrau neu Lefel Up o ran sgiliau a chyflog trwy ddilyn cyrsiau ar-lein SkillFactory:
- (12 wythnos)
- (20 wythnos)
- (20 wythnos)
- (12 mis)
Mwy o gyrsiau
- (12 mis)
- (14 wythnos)
- (5 wythnos)
- (18 mis)
- (6 mis)
- (12 mis)
- (8 mis)
- (9 mis)
- (12 mis)
- (18 mis)
- (18 mis)
- (12 mis)
- (9 mis)
- (7 mis)
Ffynhonnell: hab.com