Arolwg Cenedlaethol Cymru: adroddiad ansawdd, Ionawr 2021 ymlaen
Mae'r adroddiad hwn yn dangos sut mae'r arolwg yn cadw at ddiffiniad y System Ystadegol Ewropeaidd o ansawdd ac yn darparu crynodeb o'r dulliau gweithredu a ddefnyddiwyd i gasglu'r allbwn.
Efallai na fydd y ffeil hon yn gyfan gwbl hygyrch.
Ar y dudalen hon
Cyflwyniad a methodoleg yr arolwg
Mae Arolwg Cenedlaethol Cymru yn arolwg sylweddol sy'n cael ei gynnal dros y ffôn drwy sampl ar hap gan gynnwys pobl ledled Cymru. Caiff y cyfeiriadau eu samplo ar hap, ac anfonir gwahoddiadau drwy’r post, yn gofyn am ddarparu rhif ffôn ar gyfer pob cyfeiriad. Gellid darparu’r rhifau ffôn drwy borth ar-lein, llinell ymholiadau ffôn, neu'n uniongyrchol i rif ffôn symudol y cyfwelydd ar gyfer yr achos hwnnw.
Yna, mae’r cyfwelydd yn ffonio’r rhif a ddarparwyd ar gyfer y cyfeiriad, yn cael gwybod sawl oedolyn sy’n byw yno, ac yn dewis un ar hap (y person sy’n dathlu ei ben-blwydd nesaf) i gymryd rhan yn yr arolwg. Os na chaiff rhif ei ddarparu ar gyfer y cyfeiriad, yna bydd y cyfwelydd yn ymweld â’r cyfeiriad, mewn ymweliad byr gan gadw pellter cymdeithasol, er mwyn dewis ymatebydd a chasglu rhif ffôn ar gyfer y person hwnnw. Maint y sampl misol a gyrhaeddir yw tua 1,000, ac mae’r gyfradd ymateb tua 40% o’r rhai y gofynnwyd iddynt gymryd rhan [troednodyn 1].
Mae’r arolwg yn para 40 munud ar gyfartaledd ac yn cynnwys pynciau amrywiol. Dechreuodd yr arolwg ar 24 Ebrill 2020, wedi i waith maes wyneb yn wyneb yr Arolwg Cenedlaethol gael ei atal ar 16 Mawrth 2020 oherwydd haint y coronafeirws. Cafodd cyfwelwyr a gynhaliodd yr arolwg wyneb yn wyneb eu hailhyfforddi i gynnal yr arolwg dros y ffôn. Cynigiwyd taleb £15 i ymatebwyr i ddiolch iddynt am gymryd rhan.
O fis Gorffennaf 2021 gofynnwyd i is-sampl o ymatebwyr gwblhau adran ar-lein ar ôl yr adran dros y ffôn. Roedd y rheini nad oeddent yn gallu llenwi’r adran ar-lein yn cael cwblhau adran ychwanegol dros y ffôn yn lle hynny. O fis Ebrill 2022, cafodd y dull hwn ei ymestyn i bob ymatebydd.
Mae’r holiadur ar gael ar ein tudalennau gwe.
Defnyddir y canlyniadau gan Lywodraeth Cymru wrth wneud polisïau a'u monitro, ac maent hefyd yn ffynhonnell wybodaeth werthfawr ar gyfer sefydliadau sector cyhoeddus eraill megis cynghorau lleol a GIG Cymru, sefydliadau gwirfoddol, y byd academaidd, y cyfryngau a'r cyhoedd.
Perthnasedd
Nodwedd |
Manylion |
Yr hyn mae'n ei fesur |
Mae'r arolwg yn cwmpasu ystod eang o bynciau gan gynnwys addysg, ymarfer corff, iechyd, gofal cymdeithasol, defnyddio'r rhyngrwyd, cydlyniant cymunedol, llesiant, cyflogaeth a chyllid. Mae’r pynciau yn newid yn rheolaidd er mwyn diwallu’r newid yn yr anghenion am wybodaeth. Gellir chwilio drwy’r cwestiynau gan ddefnyddio ein dangosydd cwestiynau rhyngweithiol. Mae amrywiol gwestiynau demograffig hefyd wedi'u cynnwys, er mwyn medru dadansoddi'r canlyniadau'n fanwl. Gellir gweld cynnwys a deunyddiau'r arolwg ar dudalennau gwe’r Arolwg Cenedlaethol. Mae hyn yn cynnwys holiaduron a'r llythyr a anfonwyd i bob cartref a ddewiswyd. |
Modd |
Cyfweliad oddeutu 30 munud o hyd dros y ffôn ac adran ar-lein tua 10 munud o hyd. |
Amlder |
Mae gwaith maes yn barhaus; bydd canlyniadau yn cael eu hadrodd nawr yn flynyddol (er enghraifft, cafodd canlyniadau’n seiliedig ar gyfweliadau rhwng mis Ebrill 2022 a mis Mawrth 2023 eu cyhoeddi ym mis Gorffennaf 2023). |
Maint y sampl |
Llwyddir i gyrraedd at sampl o tua 1,000 o ymatebwyr y mis. Gweler adroddiad technegol 2021-22 i gael manylion y sampl o bobl y cysylltwyd â nhw a’r sampl a gyrhaeddir bob mis, gan gynnwys fesul awdurdod lleol. (Ar gyfer 2020 i 2021, mae adroddiadau gwaith maes ar wahân yn darparu manylion cyfweliadau y cysylltwyd â phobl amdanynt a chyfweliadau a gynhaliwyd. |
Cyfnodau ar gael |
Ebrill 2022 i 2023. (Mae canlyniadau blynyddol blaenorol ar gyfer Ebrill 2021 – Mawrth 2022; canlyniadau chwarterol ar gyfer Ionawr – Mawrth 2021; canlyniadau chwarterol a misol ar gyfer Mai – Rhagfyr 2020; a chanlyniadau blynyddol yn seiliedig ar gyfweliadau wyneb yn wyneb, o 2019-20 nôl i 2012-13, hefyd ar gael.) |
Fframwaith y sampl |
Caiff cyfeiriadau eu samplo ar hap o Ffeil Cyfeiriadau Cod Post mân ddefnyddwyr y Post Brenhinol, sy'n rhestr gyfredol o bob cyfeiriad yn y DU (heb gynnwys llety sefydliadol). Caiff y sampl ei lunio gan y Swyddfa Ystadegau Gwladol er mwyn sicrhau nad yw'r ymatebwyr wedi cael eu dewis yn ddiweddar ar gyfer arolygon mawr eraill y llywodraeth, gan gynnwys blynyddoedd blaenorol yr Arolwg Cenedlaethol. Dim ond pobl 16 oed a throsodd sy’n gymwys i gymryd rhan. Ni chaniateir cyfweliadau drwy ddirprwy. |
Cynllun y sampl |
Caiff y sampl ffôn ei drefnu'n haenau yn ôl awdurdod lleol. Mae’r sampl cyfeiriadau yn weddol gymesur â maint poblogaeth awdurdodau lleol, ond mae wedi’i gynllunio i sicrhau lleiafswm maint sampl effeithiol o 250 yn yr awdurdodau lleiaf a 750 ym Mhowys. Mewn cyfeiriadau sy'n cynnwys mwy nag un aelwyd, caiff un aelwyd ei dewis ar hap gan ddefnyddio dull grid Kish. Ym mhob aelwyd a gaiff ei samplu, caiff yr ymatebydd ei ddewis ar hap o blith yr holl oedolion (16+) yn yr aelwyd sy’n cyfrif y cyfeiriad sampl fel prif breswylfa, waeth pa mor hir maent wedi byw yno. Dewisir person ar hap o’r aelwyd gan ddefnyddio’r dull ‘pen-blwydd nesaf’: hynny yw, gofynnir i’r person y mae’r cyfwelydd yn siarad ag ef gyntaf pa oedolyn yn yr aelwyd sy’n cael ei ben-blwydd nesaf; dewisir y person hwnnw i gymryd rhan. Mae’r dull ‘pen-blwydd’ nesaf yn ddull sydd wedi’i ddefnyddio ers amser er mwyn cael sampl derbyniol ar hap mewn arolygon ffôn, gan sicrhau bod cyn lleied â phosibl o wybodaeth am yr aelwyd, a allai fod yn sensitif, yn cael ei chasglu wrth wneud cyswllt gyda’r aelwyd gyntaf. |
Pwysoli |
Caiff canlyniadau eu pwysoli er mwyn i'r tebygolrwydd o ddewisiadau anghyfartal a diffyg ymateb gwahanol grwpiau gael eu cymryd i ystyriaeth, hynny yw sicrhau bod oedran a rhyw'r sampl sy'n ymateb yn cyfateb i boblogaeth Cymru. |
Priodoli |
Dim priodoli. |
Allanolynnau |
Dim hidlo allanolynnau |
Prif ddiben
Prif ddiben yr arolwg yw darparu gwybodaeth ar farn ac ymddygiad pobl ledled Cymru ynghylch nifer o bynciau amrywiol sy'n ymwneud â nhw a’u hardal leol.
Bydd y canlyniadau'n helpu sefydliadau sector cyhoeddus gyda'r canlynol:
- gwneud penderfyniadau ar sail tystiolaeth gadarn
- monitro newidiadau dros amser
- nodi arfer da y gellid ei roi ar waith yn ehangach
- nodi meysydd neu grwpiau a fyddai'n elwa o gael cymorth dwys yn lleol, fel bod modd targedu camau gweithredu mor effeithiol â phosibl
Defnyddwyr a'r defnydd
Comisiynwyd yr arolwg hwn gan Lywodraeth Cymru, Chwaraeon Cymru, Cyfoeth Naturiol Cymru a Chyngor Celfyddydau Cymru, ac mae'n cael ei ddefnyddio ganddynt i helpu i wneud polisïau. Yn ogystal â'r sefydliadau hynny, mae gan yr arolwg amrywiaeth eang o ddefnyddwyr eraill, gan gynnwys:
- awdurdodau lleol ar draws Cymru, GIG Cymru ac Iechyd Cyhoeddus Cymru
- adrannau llywodraethol eraill y DU a sefydliadau llywodraeth leol
- sefydliadau sector cyhoeddus eraill
- academyddion
- y cyfryngau
- aelodau o'r cyhoedd
- sector gwirfoddol, yn enwedig sefydliadau wedi’u lleoli yng Nghymru.
Rhoddir y data diweddaraf yn Archif Data'r DU bob hydref er mwyn sicrhau bod y canlyniadau ar gael yn eang at ddibenion ymchwil. Cysylltir y canlyniadau hefyd gyda setiau data eraill drwy systemau ymchwil diogel, er enghraifft Cyswllt Diogel Gwybodaeth Ddienw (SAIL) ym Mhrifysgol Abertawe. Gall yr ymatebwyr ddewis peidio cysylltu eu canlyniadau os ydynt yn dymuno gwneud hynny.
Cryfderau a chyfyngiadau
Cryfderau
- Sampl a ddewiswyd ar hap, a chyfradd ymateb weddol uchel. Bydd hyn yn helpu i sicrhau bod y canlyniadau yn gynrychioladol o bobl Cymru, gan gynnwys grwpiau anodd eu cyrraedd fel pobl iau. Mae’n golygu nad yw’r sampl yn cael ei wyro o blaid pobl sy’n llai prysur neu sydd â barn benodol y maent yn awyddus i’w mynegi. Mae'r arolwg yn cael ei bwysoli i'w addasu ar gyfer diffyg ymateb, sydd hefyd yn helpu i sicrhau bod y canlyniadau mor gynrychioladol â phosibl.
- Cynhelir y cyntaf o ddwy adran yr arolwg (a’r ail adran os yw hynny’n ofynnol) dros y ffôn, gan alluogi pobl i gymryd rhan nad ydynt yn defnyddio’r rhyngrwyd neu sydd â lefelau llythrennedd is. O’i gymharu ag arolygon papur ac ar-lein mae’r adran dros y ffôn yn helpu i sicrhau bod yr holl gwestiynau perthnasol yn cael eu hateb. Gall hefyd ganiatáu'r sawl sy'n cyfweld i ddarllen y cyfarwyddiadau am y cwestiynau yn uchel, a helpu'r ymatebwyr i ddeall yr hyn sy'n cael ei ofyn (ond heb wyro oddi wrth eiriad y cwestiwn) er mwyn iddynt roi atebion cywir.
- Cynhelir yr ail o ddwy adran yr arolwg ar-lein (neu dros y ffôn os oes angen, e.e. os nad yw’r ymatebydd yn defnyddio’r rhyngrwyd). Mae hyn yn well ar gyfer testunau mwy sensitif neu destunau lle gallai defnyddio cyfwelydd effeithio ar yr ymatebion. Mae hefyd yn dda ar gyfer cyflwyno rhestrau hirach o wybodaeth, a lle bydd eisiau cymharu gydag arolygon ar-lein eraill.
- At ei gilydd, mae’n ymddangos bod y canlyniadau o’r adran dros y ffôn yn gymaradwy â’r rhai a gafwyd wyneb yn wyneb, ond byddwn yn parhau i archwilio hyn ymhellach wrth i’r arolwg fynd rhagddo.
- Mae’n ymddangos bod y dull ffôn yr un mor hygyrch â’r dull wyneb yn wyneb ar gyfer pobl ag amhariad ar eu clyw, o ystyried na wnaeth cyfran yr ymatebwyr a adroddodd am amhariad ar y clyw leihau pan newidiodd y prif ddull i ddull dros y ffôn yn hytrach na dull wyneb yn wyneb. I ymatebwyr a fyddai’n cael anhawster cynnal cyfweliad dros y ffôn oherwydd rhesymau hygyrchedd, cynhelir cyfweliadau wyneb yn wyneb (cyfran fach o’r cyfanswm cyfweliadau).
- Mae'r arolwg yn cwmpasu amrywiaeth eang o bynciau, gan alluogi croes-ddadansoddi rhwng pynciau. Mae amrywiol gwestiynau demograffig hefyd wedi'u cynnwys, er mwyn medru croes-ddadansoddi'n fanwl yn ôl oedran, rhyw, statws cyflogaeth ac ati.
- Lle bynnag y bo'n bosibl, dewisir cwestiynau sydd eisoes wedi cael eu defnyddio mewn fersiynau blwyddyn lawn o’r Arolwg Cenedlaethol ac mewn arolygon mawr eraill. Golyga hyn eu bod eisoes wedi'u profi, ac y gellid cymharu rhai canlyniadau dros gyfnod o amser neu gyda gwledydd eraill. Pan fo angen, caiff cwestiynau eu haddasu (eu cwtogi gan amlaf) i sicrhau eu bod yn gweithio’n dda dros y ffôn neu ar-lein.
- Caiff cwestiynau eu datblygu gan arbenigwyr arolygon, eu hadolygu gan gymheiriaid yn nhîm Arolwg Cenedlaethol y Swyddfa Ystadegau Gwladol, eu hadolygu gan gyfwelwyr profiadol, eu profi’n wybyddol gydag aelodau o’r cyhoedd, a lle y bo’n bosibl, eu treialu gan gyfwelwyr gyda nifer bach o ymatebwyr cyn i’r gwaith maes ddechrau.
- Mae’r canlyniadau ar gael yn fuan ar ôl i’r gwaith maes ddod i ben, o fewn tua 3 mis. Mae nifer fawr o dablau canlyniadau ar gael mewn dangosydd canlyniadau rhyngweithiol.
- Gellir defnyddio cofnodion cysylltiedig (hynny yw, gellir dadansoddi ymatebion i'r arolwg yng nghyd-destun data'r arolwg neu ddata gweinyddol eraill a gedwir am yr ymatebwyr dan sylw).
Chyfyngiadau
- Er bod y cyfraddau ymateb yn uchel am arolwg dros y ffôn, mae cyfran sylweddol o’r unigolion a gafodd eu samplo yn parhau i beidio cymryd rhan. Mae hyn yn debygol o effeithio ar gywirdeb yr amcangyfrifon a gynhyrchir.
- Bydd cyfran o’r ymatebwyr (oddeutu 15%) sy’n cwblhau’r adran gyntaf dros y ffôn yn dewis peidio â chwblhau’r ail adran, ar-lein.
- Nid yw'r arolwg yn cynnwys pobl sy'n byw mewn sefydliadau cymunol (er enghraifft cartrefi gofal, cartrefi troseddwyr ifanc, hostelau a neuaddau myfyrwyr).
- Er y cymerwyd gofal i sicrhau bod y cwestiynau mor hygyrch â phosibl, bydd rhai enghreifftiau o hyd lle nad yw'r ymatebwyr yn ymateb yn gywir, er enghraifft gan nad ydynt wedi deall y cwestiwn yn iawn neu nad ydynt yn gallu neu nad ydynt am roi ateb cywir am ryw reswm. Eto, bydd hyn yn effeithio ar gywirdeb yr amcangyfrifon sy'n cael eu cynhyrchu.
- Mae maint y sampl yn golygu nad yw hi bob amser yn bosibl sicrhau dadansoddiad cadarn ar gyfer ardaloedd llai nac is-grwpiau bach eraill.
Mae nifer o'r cryfderau a'r cyfyngiadau a nodir uchod yn ymwneud â chywirdeb y canlyniadau. Edrychir yn fanylach ar gywirdeb yn yr adran nesaf.
Cywirdeb
Pa mor agos at y canlyniad a amcangyfrifir yw'r gwir werth (anhysbys).
Y prif fygythiad o ran cywirdeb yw gwallau, gan gynnwys gwallau samplu a gwallau heb fod yn rhai samplu.
Gwallau samplu
Mae gwallau samplu yn codi gan fod yr amcangyfrifon wedi'u seilio ar sampl ar hap o'r boblogaeth yn hytrach na'r boblogaeth gyfan. Mae canlyniadau unrhyw sampl unigol ar hap yn debyg o amrywio rhywfaint o gymharu â'r canlyniadau a welid pe bai'r holl boblogaeth yn rhan o'r arolwg (megis cyfrifiad), ac enw’r amrywiad hwn yw gwall samplu. Yn gyffredinol, y lleiaf yw maint y sampl, y mwyaf yw'r gwall samplo posibl.
Ar gyfer sampl ar hap, gellir amcangyfrif gwallau samplu'n ystadegol ar sail y data sy'n cael eu casglu, gan ddefnyddio'r gwall safonol ar gyfer pob newidyn. Gall cynllun yr arolwg effeithio ar y gwallau safonol; a gellid eu defnyddio i gyfrifo cyfyngau hyder er mwyn rhoi syniad mwy greddfol o faint y gwall samplu ar gyfer newidyn penodol. Trafodir y materion hyn yn yr isadrannau canlynol.
Effaith cynllun yr arolwg ar y gwallau safonol
Mae'r arolwg yn cael ei drefnu'n haenau ar lefel awdurdod lleol, gyda gwahanol debygolrwydd o gael eu dewis i bobl yn byw mewn gwahanol awdurdodau lleol. Rydym yn pwysoli er mwyn cywiro'r gwahanol debygolrwydd hwn, yn ogystal (fel nodir uchod) ag er mwyn sicrhau bod y canlyniadau'n adlewyrchu nodweddion poblogaeth (oedran a rhyw) pob awdurdod lleol.
Un o effeithiau'r cynllun cymhleth hwn a phwysoli'r arolwg yw bod y gwallau safonol ar gyfer amcangyfrifon yr arolwg yn gyffredinol uwch na'r gwallau safonol a fyddai'n deillio o sampl syml a ddewiswyd ar hap o'r un maint [troednodyn 2].
Mae'r gymhareb rhwng gwall safonol sampl cymhleth a sampl syml a ddewiswyd ar hap o'r un maint yn cael ei alw'n "deft" (design factor). Os yw gwall safonol amcangyfrif mewn arolwg cymhleth yn cael ei gyfrifo fel pe bai wedi dod drwy arolwg sampl syml a ddewiswyd ar hap, yna gellir lluosi'r gwall safonol gyda'r deft i roi gwir wall safonol yr amcangyfrif, sy’n ystyried y cymhlethdod.
Y gymhareb rhwng amrywiant samplu y sampl cymhleth a sampl syml a ddewiswyd ar hap o'r un maint yw'r 'deff' (design effect - sy'n cyfateb i'r deft wedi ei sgwario). Drwy rannu gwir faint sampl arolwg cymhleth gyda'r deff, ceir y "maint sampl effeithiol". Dyma faint y sampl syml a ddewiswyd ar hap a fyddai wedi rhoi'r un lefel o gywirdeb ag a roddwyd gan gynllun arolwg cymhleth.
Mae’r holl groes-ddadansoddiadau a gynhyrchir gan dîm yr Arolwg Cenedlaethol, er enghraifft mewn bwletinau ac yn y tablau a’r siartiau sydd ar gael yn ein dangosydd canlyniadau, yn ystyried effaith y cynllun ar gyfer pob newidyn.
Cyfwng hyder (‘lwfans ansicrwydd’)
Gan fod yr Arolwg Cenedlaethol wedi’i seilio ar sampl ar hap, gellir defnyddio'r gwallau safonol i gyfrifo cyfyngau hyder, neu ‘lwfansau ansicrwydd’ fel y’u gelwir weithiau, ar gyfer pob amcangyfrif yn yr arolwg. Mae'r cyfyngau hyder ar gyfer pob amcangyfrif yn cynnig ystod lle mae'r 'gwir' werth ar gyfer y boblogaeth yn debyg o syrthio (hynny yw, y ffigur y byddem yn ei gael pe bai'r arolwg yn cwmpasu'r boblogaeth yn gyfan).
Y cyfwng hyder mwyaf cyffredin a ddefnyddir yw'r cyfwng hyder 95%. Pe baem yn cynnal yr arolwg drosodd a throsodd gyda 100 o samplau gwahanol o bobl ac, ar gyfer pob sampl, yn amcangyfrif yr un nodwedd poblogaeth benodol (ee bodlonrwydd mewn bywyd) gyda chyfwng hyder o 95%, byddai’r union amcangyfrif a’r cyfyngau hyder i gyd yn amrywio rywfaint ar gyfer y samplau gwahanol. Ond byddem yn disgwyl i’r cyfyngau hyder ar gyfer tua 95 o’r 100 sampl gynnwys y ‘gwir’ ffigur ar gyfer y boblogaeth.
Po fwyaf yw'r cyfwng hyder, y lleiaf manwl gywir yw'r amcangyfrif.
Cyfrifwyd cyfyngau hyder o 95% ar gyfer amrywiol newidynnau'r Arolwg Cenedlaethol, ac maent yn cael eu cynnwys yn yr adroddiad technegol ar gyfer pob blwyddyn. Addaswyd y cyfyngau hyn i ystyried cynllun yr arolwg, ac maent yn fwy nag y byddent pe bai'r arolwg wedi'i seilio ar sampl syml a ddewiswyd ar hap o’r un maint. Maent yn cyfateb i’r amcanbwynt gan adio neu dynnu tua 1.96* gwall safonol yr amcangyfrif [troednodyn 3].Mae'r cyfyngau hyder hefyd wedi'u cynnwys yn yr holl siartiau a thablau canlyniadau sydd ar gael yn ein dangosydd canlyniadau.
Gellir defnyddio cyfyngau hyder hefyd i helpu i ddweud a oes gwir wahaniaeth rhwng dau grŵp (un nad yw ond yn digwydd yn sgil gwall samplu, hynny yw nodweddion penodol y bobl a wnaeth ddigwydd cymryd rhan yn yr arolwg). Fel canllaw cyffredinol ar gyfer dehongli: wrth gymharu dau grŵp, os yw'r cyfyngau hyder o amgylch yr amcangyfrifon yn gorgyffwrdd gellid rhagdybio nad oes fawr o wahaniaeth ystadegol rhwng yr amcangyfrifon. Nid yw'r dull gweithredu hwn mor drylwyr â phrawf ystadegol ffurfiol, ond mae'n syml, yn cael ei ddefnyddio'n eang ac yn weddol gadarn.
O gymharu â phrawf ffurfiol, sylwch fod cadarnhau a yw dau gyfwng hyder yn gorgyffwrdd yn fwy tebygol o arwain at ganlyniadau negyddol ffug: casgliadau anghywir nad oes gwahaniaeth gwirioneddol pan fo gwahaniaeth mewn gwirionedd. Mae hefyd yn llai tebygol na phrawf ffurfiol o arwain at ganlyniadau cadarnhaol ffug: casgliadau anghywir bod gwahaniaeth pan nad oes gwahaniaeth mewn gwirionedd. Fodd bynnag, mae ymgymryd â sawl cymhariaeth yn cynyddu'r siawns o ddod o hyd i ganlyniadau cadarnhaol ffug. Felly pan fo sawl cymhariaeth yn cael eu gwneud, er enghraifft wrth lunio llawer iawn o dablau canlyniadau sy’n cynnwys cyfyngau hyder, mae natur geidwadol y prawf yn fanteisiol am ei fod yn lleihau (ond nid yn dileu) y siawns o ddod o hyd i ganlyniadau cadarnhaol ffug.
Gwallau heb fod yn rhai samplu
Mae'r “gwallau heb fod yn rhai samplu” yn golygu pob gwahaniaeth sy'n codi rhwng amcangyfrifon yr arolwg a gwir werthoedd y boblogaeth ac eithrio gwahaniaethau yn sgil gwall samplu. Yn wahanol i'r gwallau samplu, mae gwallau eraill yn bresennol mewn cyfrifiadau yn ogystal ag arolygon sampl. Ymysg y mathau eraill hyn o wallau mae: gwallau cwmpas, gwallau diffyg ymateb, gwallau mesur a gwallau prosesu.
Nid yw'n bosibl dileu gwallau heb fod yn rhai samplu yn llwyr, ac nid yw'n bosibl rhoi amcangyfrifon ystadegol o faint gwallau o'r fath. Gwnaed ymdrechion sylweddol i leihau'r gwallau hyn yn yr Arolwg Cenedlaethol. Trafodir rhai o'r camau allweddol sy'n cael eu cymryd yn yr is-adrannau canlynol.
Gwallau mesur: datblygu cwestiynau
Er mwyn lleihau gwallau mesur, defnyddir cwestiynau cyson neu sefydlog yn yr arolwg lle bynnag y bo modd. Caiff cwestiynau newydd eu datblygu gan arbenigwyr arolygon ac mae llawer wedi’u hadolygu gan gymheiriaid allanol, gydag is-set hefyd wedi bod drwy brawf gwybyddol gydag aelodau o’r cyhoedd. Mae adroddiadau ar adolygiadau a phrofion o gwestiynau ar dudalennau gwe yr Arolwg Cenedlaethol.
Diffyg ymateb
Diffyg ymateb (hynny yw unigolion yn cael eu dewis ond ddim yn cymryd rhan yn yr arolwg) yw un o’r elfennau sy’n gyfrifol am wallau heb fod yn rhai samplu. Felly mae cyfraddau ymateb yn ddimensiwn pwysig o ran ansawdd yr arolwg ac yn cael eu monitro'n fanwl.
Y gyfradd ymateb yw’r gyfran o rifau ffôn cymwys a arweiniodd at gyfweliad, ac mae’n cael ei diffinio fel:
Caiff canlyniadau'r arolwg eu pwysoli er mwyn cymryd y diffyg ymateb i ystyriaeth ar draws is-grwpiau poblogaeth o ran oedran a rhyw, hynny yw er mwyn sicrhau bod oedran a rhyw'r sampl sy'n ymateb yn cyfateb i boblogaeth Cymru. Bwriad y cam hwn yw lleihau'r gwallau heb fod yn rhai samplu yn sgil gwahanol gyfraddau o ddiffyg ymateb yn ôl oedran a rhyw.
Atebion coll
Gall atebion fod ar goll am sawl rheswm, gan gynnwys gwrthod neu fethu ateb cwestiwn penodol, ac achosion pan nad yw'r cwestiwn yn berthnasol i'r ymatebydd. Gellir lleihau effaith y rhain drwy beidio â chynnig codau ‘gwrthod ateb’ a ‘ddim yn gwybod’ i ymatebwyr mewn arolwg dros y ffôn (er y bydd y rhain yn cael eu cynnig i ymatebwyr yn yr adran ar-lein, oherwydd rhesymau moesegol). Fel rheol bydd atebion coll yn cael eu hepgor o dablau a dadansoddiadau, ac eithrio pan maent o ddiddordeb arbennig (er enghraifft gall lefel uchel o atebion "Ddim yn gwybod" fod o ddiddordeb gwirioneddol).
Gwallau mesur: gwirio ansawdd cyfweliad
Elfen arall sy'n gallu amharu ar atebion diduedd o bosib yw bod y sawl sy'n cyfweld yn dylanwadu'n systematig ar yr ymatebion mewn rhyw ffordd. Mae’n debygol y bydd ymatebion yn cael eu heffeithio gan briodoldeb cymdeithasol (pan fo'r ateb a roddir yn cael ei effeithio gan yr hyn y mae'r ymatebydd yn ei dybio sy'n dderbyniol neu’n ddymunol yn gymdeithasol). Darperir hyfforddiant helaeth i’r rhai sy'n cyfweld er mwyn lleihau'r effaith hon gymaint â phosibl ac maent hefyd yn cael eu goruchwylio'n agos, gyda chyfran o'r cyfweliadau'n cael eu gwirio drwy reolwyr y cyfwelydd yn gwrando ar recordiad o’r cyfweliadau.
Mae'r holiadur dros y ffôn yn cael ei weinyddu gan ddefnyddio sgript Cyfweliad Ffôn drwy Gymorth Cyfrifiadur (CATI). Mae'r dull gweithredu hwn yn caniatáu i'r cyfwelydd ddarparu rhywfaint o wybodaeth ychwanegol pan fo'n amlwg nad yw'r ymatebydd wedi deall y rheswm dros ofyn y cwestiwn neu ei ystyr. Er mwyn eu helpu i wneud hyn, caiff y rhai sy'n cyfweld wybodaeth gefndir am rai o'r cwestiynau yn y cyfarfodydd briffio a gynhelir cyn dechrau ar y gwaith maes. Mae'r sgript hefyd yn cynnwys gwybodaeth ychwanegol pan fo angen procio neu eglurhad pellach. Serch hynny, mae cyfwelwyr yn cael gwybod ei bod yn hanfodol cyflwyno’r cwestiynau a’r opsiynau ateb yn union fel y maent yn y sgript CATI.
Mae rhai o'r atebion yn cael eu hadlewyrchu yng ngeiriad cwestiynau neu wiriadau dilynol (er enghraifft caiff enwau'r plant a roddir eu crybwyll mewn cwestiynau am ysgolion y plant). Mae hyn yn helpu'r ymatebydd (a'r cyfwelydd) i ddeall y cwestiwn yn gywir.
Ceir amrywiol wiriadau rhesymegol ac awgrymiadau i'r cyfwelydd yn y sgript er mwyn sicrhau bod yr atebion sy'n cael eu darparu'n gyson ac yn realistig. Mae rhai o'r gwiriadau hynny yn 'wiriadau caled': hynny yw, gwiriadau a ddefnyddir mewn achosion lle na allai ateb yr ymatebydd fod yn gyson â’r wybodaeth arall a roddwyd yn flaenorol ganddo. Yn yr achosion hyn mae'n rhaid gofyn y cwestiwn eto, a newid yr ymateb, er mwyn parhau gyda'r cyfweliad. Mae gwiriadau eraill yn 'wiriadau meddal', ar gyfer ymatebion sydd i'w gweld yn annhebygol, ond a allai fod yn gywir. Yn yr achosion hynny, mae'r cyfwelydd yn cael cyfarwyddyd i gadarnhau gyda’r ymatebydd bod yr ymateb yn gywir mewn gwirionedd.
Caiff gwiriadau tebyg eu cynnwys yn adran ar-lein yr arolwg. Gall ymatebwyr gysylltu â’u cyfwelydd neu â llinell ymholiadau’r arolwg os cânt unrhyw anawsterau. Mae gwiriadau yn eu lle i sicrhau bod yr adran ar-lein yn cael ei chwblhau gan yr un person a ddewiswyd i gwblhau’r adran dros y ffôn.
Gwall prosesu: gwirio data
Prif allbynnau'r arolwg yw ffeiliau data SPSS sy'n cael eu darparu bob chwarter. Ar gyfer pob cyfnod o waith maes, darperir dwy brif ffeil ddata:
- set ddata ar gyfer yr aelwyd, yn cynnwys ymatebion i'r grid cyfrifo ac unrhyw wybodaeth a ofynnir i’r ymatebydd am aelodau eraill o’r aelwyd
- set ddata ar gyfer yr ymatebydd, yn cynnwys atebion pob ymatebydd
Mae'r holl setiau data'n cael eu gwirio gan gontractiwr yr arolwg. Yna bydd cyfres o wiriadau ar gynnwys a fformat y setiau data'n cael eu cynnal gan Lywodraeth Cymru ac unrhyw newidiadau yn cael eu gwneud gan y contractiwr cyn i'r setiau data gael eu cymeradwyo.
Amseroldeb a phrydlondeb
Amseroldeb yw'r cyfnod o amser sydd wedi pasio rhwng cyhoeddi'r data a'r cyfnod y mae'r data hwnnw'n cyfeirio ato. Prydlondeb yw'r cyfnod o amser rhwng y dyddiadau cyhoeddi arfaethedig a gwirioneddol.
Caiff canlyniadau eu cyhoeddi oddeutu tri mis ar ôl diwedd cyfnod y gwaith maes. Mae’r cyfnod hwn wedi’i gadw mor fyr â phosibl er mwyn sicrhau bod y canlyniadau’n amserol.
Bydd adroddiadau manylach ar bynciau penodol yn dilyn gan ddibynnu ar anghenion defnyddwyr yr arolwg.
Hygyrchedd ac eglurder
Hygyrchedd yw pa mor hwylus yw hi i ddefnyddwyr gael at y data, gan hefyd adlewyrchu'r fformat(au) y mae'r data ar gael ynddynt a'r wybodaeth ategol sydd ar gael. Eglurder yw ansawdd a digonedd y metadata, delweddau a chyngor ategol.
Cyhoeddiadau
Mae'r holl adroddiadau ar gael i'w lawrlwytho o dudalennau gwe yr Arolwg Cenedlaethol. Lluniwyd tudalennau gwe'r Arolwg Cenedlaethol i fod yn hawdd eu dilyn.
Mae siartiau a thablau canlyniadau manwl ar gael drwy ddangosydd canlyniadau rhyngweithiol. Gan fod cannoedd o newidynnau yn yr arolwg a miloedd lawer o ddadansoddiadau posibl, dim ond is-setiau sydd wedi’u cynnwys yn y dangosydd canlyniadau. Serch hynny, gellir llunio tablau / siartiau pellach yn gyflym pan wneir cais amdanynt.
I gael rhagor o wybodaeth am ganlyniadau'r arolwg, neu os hoffech weld gwahanol ddadansoddiadau o'r canlyniadau, cysylltwch â thîm yr Arolwg Cenedlaethol ar arolygon@llyw.cymru neu ar 0300 025 5050.
Rheoli datgeliad
Rydym yn cymryd gofal i sicrhau nad oes modd adnabod unigolion o'r canlyniadau a gyhoeddir. Rydym yn cadw at y gofynion cyfrinachedd a mynediad at ddata a nodir yn y Cod Ymarfer ar gyfer Ystadegau.
Gofynion iaith
Rydym yn cydymffurfio â safonau’r Gymraeg yn ein holl allbynnau. Mae ein gwefan, ein datganiadau cyntaf, ein dangosydd canlyniadau a’n dangosydd cwestiynau ar gael yn Gymraeg ac yn Saesneg.
Rydym yn ceisio ysgrifennu’n glir, gan ddefnyddio defnyddio ‘Cymraeg Clir’ a Saesneg syml.
Archif Data'r DU
Bydd fersiynau dienw o setiau data’r arolwg (lle bydd rhywfaint o'r wybodaeth wedi'i dileu er mwyn sicrhau cyfrinachedd), ynghyd â dogfennau ategol, yn cael eu rhoi yn Archif Data'r DU yn yr hydref ar ôl diwedd y cyfnod gwaith maes. Gall defnyddwyr cofrestredig gael at y setiau data hyn ar gyfer prosiectau ymchwil penodol.
O bryd i'w gilydd, efallai y bydd ymchwilwyr am ddadansoddi data manylach na'r hyn sydd ar gael drwy'r Archif Data. Dylid cyflwyno ceisiadau am ddata o'r fath i dîm yr Arolwg Cenedlaethol (gweler y manylion cyswllt isod). Caiff y ceisiadau eu hystyried fesul achos, ac mae gweithdrefnau yn eu lle i gadw’r data yn ddiogel ac yn gyfrinachol.
Dulliau gweithredu a diffiniadau
Mae pob cyhoeddiad hefyd yn cynnwys geirfa sy'n disgrifio'r termau cyffredinol sy'n cael eu defnyddio. Mae chwiliwr cwestiynau rhyngweithiol a chopïau o'r holiaduron ar gael ar ein tudalennau gwe.
Cymharedd a chysondeb
I ba raddau y gellir cymharu data dros amser a pharthau.
Drwy gydol bwletinau a datganiadau ystadegol yr Arolwg Cenedlaethol, rydym yn tynnu sylw at gymarebau perthnasol a ffynonellau gwybodaeth nad oes modd eu cymharu'n uniongyrchol ond sy'n rhoi cyd-destun defnyddiol.
Cymharu â gwledydd eraill
Lle bynnag y bo'n bosibl, daw cwestiynau'r arolwg o arolygon a gynhaliwyd yn rhywle arall. Mae hyn yn caniatáu rhywfaint o gymharu ar draws gwledydd (er bod gwahaniaethau o ran cynllun a chyd-destun yn gallu effeithio ar y gallu i gymharu).
Cymharu dros amser
Er bod yr arolwg ffôn / ar-lein yn cynnwys rhai o’r un pynciau â’r arolwg wyneb yn wyneb, mewn rhai achosion gan ddefnyddio’r un cwestiynau neu gwestiynau sydd wedi’u haddasu ychydig, dylid cymryd gofal wrth gymharu canlyniadau dros amser. Gallai’r newid dull effeithio ar y canlyniadau mewn ffyrdd amrywiol. Er enghraifft, gallai gwahanol fathau o bobl fod yn fwy tebygol o gymryd rhan yn y gwahanol ddulliau; neu gallai’r dull effeithio ar sut mae pobl yn ateb cwestiynau [troednodyn 4] . Mae’n debygol o fod yn anos cymharu cwestiynau llai ffeithiol (er enghraifft, ynghylch barn pobl ar wasanaethau cyhoeddus, o’i gymharu â chwestiynau mwy ffeithiol megis a ydynt wedi defnyddio’r gwasanaethau hyn mewn cyfnod amser penodol).
Troednodiadau
[1] Gweler yr adroddiad gwaith maes i gael rhagor o fanylion ynglŷn â’r sampl o bobl y cysylltwyd â nhw a’r sampl a gyrhaeddir bob mis.
[2] Ni chaiff amcangyfrifon yr arolwg (o’u cymharu â’r gwallau safonol a’r cyfyngau hyder ar gyfer yr amcangyfrifon hynny) eu heffeithio gan ddyluniad yr arolwg.
[3] Mae gwerth 1.96 yn amrywio ychydig yn unol â maint y sampl ar gyfer yr amcangyfrif o dan sylw.
[4] (Gweler 'Cymysgu dulliau mewn arolwg cymdeithasol: cyfleoedd a chyfyngiadau ar gyfer Arolwg Cenedlaethol Cymru', adran 3.2.3 i gael adolygiad mwy cyflawn)
Manylion cyswllt
Chris McGowan
Llinell Ymholiadau Cyffredinol
Rhif ffôn: 0300 025 5050
E-bost: arolygon@llyw.cymru
Cyfryngau: 0300 025 8099