Prawf Arwyddocâd Ystadegol
Mewn ymchwil meintiol, un o'r cwestiynau mwyaf cyffredin yw: a yw'r gwahaniaethau neu'r perthnasoedd a welwyd yn y data yn wirioneddol "real," neu a ydynt yn gyd-ddigwyddiad a achosir gan amrywiad ar hap? I ateb hyn, mae ymchwilwyr yn defnyddio profion arwyddocâd ystadegol. Mae'r profion hyn yn helpu i benderfynu a yw'r canlyniadau a geir o sampl yn ddigon cryf i'w cyffredinoli i'r boblogaeth, yn seiliedig ar fframwaith tebygolrwydd penodol. Er y gall y derminoleg swnio'n dechnegol, mae'r cysyniad sylfaenol yn syml: rydym yn cymharu'r hyn a welwn â'r hyn a fyddai wedi digwydd pe na bai unrhyw effaith.
Diffiniad a Phwrpas
Mae prawf arwyddocâd ystadegol yn weithdrefn ffurfiol a ddefnyddir i asesu'r dystiolaeth o ddata ar gyfer datganiad (damcaniaeth) am boblogaeth. Ei brif bwrpas yw pennu a yw effaith—er enghraifft, y gwahaniaeth rhwng cymedrau dau grŵp, y gydberthynas rhwng dau newidyn, neu effaith triniaeth—yn ddigon mawr a chyson i fod yn annhebygol o ddigwydd trwy siawns.
Yn ymarferol, nid yw profion arwyddocâd yn "profi" bod damcaniaeth yn wir, ond yn hytrach yn darparu mesur o ba mor gryf y mae'r data yn gwrthod rhagdybiaeth benodol. Dyma lle mae'n bwysig deall bod ystadegau'n gweithredu o fewn parth o ansicrwydd. Nid oes sicrwydd llwyr, ond yn hytrach rhywfaint o hyder a gefnogir gan y data.
Rhagdybiaeth Nwl a Rhagdybiaeth Amgen
Yn gyffredinol, mae profion arwyddocâd yn cael eu hadeiladu ar ddau ddatganiad:
1. Rhagdybiaeth nwl (H₀): yn nodi nad oes gwahaniaeth, dim perthynas, nac unrhyw ddylanwad. Er enghraifft: “Mae gradd gyfartalog dosbarth A yr un fath â dosbarth B,” neu “Nid oes unrhyw berthynas rhwng oriau astudio a sgoriau arholiad.”
2. Rhagdybiaeth amgen (H₁ neu Hₐ): yn datgan bod gwahaniaeth, perthynas, neu ddylanwad. Er enghraifft: “Mae gradd gyfartalog dosbarth A yn wahanol i ddosbarth B,” neu “Mae perthynas rhwng oriau astudio a sgoriau arholiad.”
Mae profion arwyddocâd yn gweithredu ar y dybiaeth gychwynnol bod H₀ yn wir. Yna, caiff y data ei ddadansoddi i weld a yw'r canlyniadau'n hynod brin os yw H₀ yn wir. Os ydyn nhw'n brin, rydym yn tueddu i wrthod H₀.
Y gwerth p (gwerth-p) a'i ystyr
Y cysyniad canolog mewn profi arwyddocâd yw'r gwerth-p. Yn syml, y gwerth-p yw'r tebygolrwydd o gael canlyniad sydd o leiaf mor eithafol â'r hyn a welwyd yn y data, gan dybio bod y rhagdybiaeth nwl yn wir.
– Os yw p yn fach, mae'n golygu nad yw'r canlyniadau a welwyd yn digwydd yn aml pan fydd H₀ yn wir, felly mae gennym reswm i wrthod H₀.
– Os yw p yn fawr, mae'n golygu bod y canlyniadau a arsylwyd yn dal yn debygol o ddigwydd os yw H₀ yn wir, felly nid oes gennym ddigon o dystiolaeth i wrthod H₀.
Fodd bynnag, mae'r gwerth-p yn aml yn cael ei gamddeall. Nid yw'r gwerth-p yn cynrychioli'r tebygolrwydd bod H₀ yn wir neu'n gau. Nid yw'n fesur o faint yr effaith chwaith. Mae'r gwerth-p yn syml yn dangos cryfder y dystiolaeth yn erbyn H₀ o fewn fframwaith penodol.
Lefel Arwyddocâd (α)
I wneud penderfyniad, mae ymchwilwyr yn gosod lefel arwyddocâd, a ddynodir gan α (alffa). Gwerthoedd a ddefnyddir yn gyffredin yw 0,05 (5%) neu 0,01 (1%). Y rheol yw:
– Os yw p ≤ α, dywedir bod y canlyniadau'n ystadegol arwyddocaol, a gwrthodir H₀.
– Os yw p > α, nid yw'r canlyniad yn arwyddocaol, ac ni chaiff H₀ ei wrthod.
Nid penderfyniad technegol yn unig yw dewis α, ond mae hefyd yn ystyried cyd-destun. Er enghraifft, mewn ymchwil feddygol sy'n ymwneud â diogelwch cleifion, gallai ymchwilwyr ddewis α (0,01) mwy llym i leihau'r risg o gasgliadau anghywir.
Gwallau Math I a Math II
Gan fod profion ystadegol yn cynnwys gwneud penderfyniadau dan ansicrwydd, mae yna bob amser y potensial am wall:
1. Gwall Math I (positif ffug): gwrthod H₀ pan fo H₀ yn wir. Rheolir y tebygolrwydd gan α.
2. Gwall Math II (negatif ffug): methu â gwrthod H₀ pan fo H₁ yn wir. Dynodir y tebygolrwydd gan β (beta); gelwir y gwrthdro yn bŵer, sef 1 − β.
Mewn cyd-destunau byd go iawn, gall y ddau fath o gamgymeriadau gael canlyniadau sylweddol. Er enghraifft, gall tybio bod cyffur yn effeithiol pan nad yw (Math I) fod yn niweidiol, tra gall tybio bod cyffur yn aneffeithiol pan mae'n effeithiol mewn gwirionedd (Math II) arwain at golli cyfleoedd therapiwtig.
Mathau Cyffredin o Brofion Arwyddocâd
Mae yna lawer o brofion arwyddocâd, ac mae'r dewis yn dibynnu ar y pwrpas, y math o ddata, a'r rhagdybiaethau sy'n cael eu bodloni. Dyma rai o'r rhai a ddefnyddir amlaf:
– Prawf-T: yn cymharu cymedrau dau grŵp (e.e., arbrofol vs. rheolydd). Mae fersiynau prawf-t annibynnol a pharu.
– ANOVA: yn cymharu cyfartaledd mwy na dau grŵp (e.e. tri dull dysgu).
– Prawf chi-sgwâr: yn profi'r berthynas rhwng newidynnau categoraidd (e.e. rhyw a dewis prif bwnc).
– Cydberthynas Pearson/Spearman: yn profi'r berthynas rhwng dau newidyn rhifiadol (Pearson ar gyfer data normal, Spearman ar gyfer data trefnol/annormal).
– Atchweliad llinol/logistig: yn profi dylanwad un neu fwy o newidynnau rhagfynegol ar y newidyn canlyniad.
Mae gan bob prawf dybiaethau, fel normalrwydd, unffurfiaeth amrywiant, neu annibyniaeth y data. Gall torri'r dybiaethau hyn arwain at ganlyniadau prawf camarweiniol, felly mae diagnosis data a phrofion rhagofyniad yn hanfodol.
Arwyddocâd Ystadegol vs Arwyddocâd Ymarferol
Un feirniadaeth o brofion arwyddocâd yw bod ymchwilwyr yn canolbwyntio gormod ar a yw'n "arwyddocaol" neu'n "ddibwys" heb ystyried ei oblygiadau ymarferol. Gyda samplau mawr iawn, gall gwahaniaethau bach fod yn ystadegol arwyddocaol, er mai prin y gellir sylwi ar eu heffaith. I'r gwrthwyneb, gyda samplau bach, gall effeithiau sydd mewn gwirionedd yn eithaf pwysig fethu â chyrraedd arwyddocâd oherwydd pŵer annigonol.
Felly, dylai profion arwyddocâd bob amser fod yng nghwmni:
– Meintiau effaith fel d Cohen, eta-sgwâr, neu gymhareb siawns.
– Cyfwng hyder i ddangos yr ystod o werthoedd paramedr rhesymol.
Mae'r cyfuniad o werth-p, maint yr effaith, a'r cyfwng hyder yn rhoi darlun mwy cyflawn: nid yn unig "a oes effaith ai peidio," ond "pa mor fawr yw'r effaith a pha mor sicr allwn ni fod am yr amcangyfrif hwnnw."
Camau Cyffredinol ar gyfer Cynnal Prawf Arwyddocâd
Yn gyffredinol, y weithdrefn yw:
1. Fformwleiddiwch H₀ a H₁ yn ôl y cwestiynau ymchwil.
2. Penderfynwch α (e.e. 0,05).
3. Dewiswch y prawf cywir yn ôl y math o ddata a dyluniad yr ymchwil.
4. Gwiriwch dybiaethau'r prawf (normalrwydd, amrywiant, annibyniaeth, ac ati).
5. Cyfrifwch ystadegau'r prawf a chael y gwerth-p.
6. Cymharwch y gwerth-p ag α a thynnwch gasgliadau.
7. Adroddwch y canlyniadau'n llawn, gan gynnwys meintiau effeithiau a chyfyngau hyder lle bo modd.
Mae adrodd da hefyd yn cynnwys cyd-destun, megis nodweddion sampl, dulliau mesur, a rhagfarn bosibl.
Cau
Mae profion arwyddocâd ystadegol yn offer pwysig ar gyfer asesu a yw canfyddiadau data yn debygol o adlewyrchu amodau'r boblogaeth neu a ydynt yn ganlyniad amrywiad ar hap yn unig. Fodd bynnag, nid y profion hyn yw'r unig ddyfarnwr gwirionedd gwyddonol. Rhaid deall y gwerth-p yn fanwl gywir, ynghyd â maint yr effaith, y cyfwng hyder, ac asesiad cyd-destunol o berthnasedd y canlyniadau.
Pan gânt eu defnyddio'n gywir, mae profion arwyddocâd yn helpu i wneud ymchwil yn fwy gwrthrychol ac atebol. I'r gwrthwyneb, os cânt eu defnyddio'n fecanyddol heb ddeall eu rhagdybiaethau a'u cyfyngiadau, gallant arwain at gasgliadau anghywir. Felly, mae dealltwriaeth gysyniadol, dehongliad meddylgar ac adrodd tryloyw yn allweddol i ddefnyddio profion arwyddocâd i gefnogi penderfyniadau sy'n seiliedig ar ddata.