Sut i Fesur Priodoliad Mewn Gwerthusiadau Effaith
Awdur: Tom Keyte;
Amser Darllen: 6 munud
Mae hwn yn adnodd agored. Mae croeso i chi ei gopïo a'i addasu. Darllenwch y telerau.
Os hoffech gymorth pellach gyda'ch her ddigidol, trefnwch sesiwn am ddim gyda DigiCymru
Mewn cyfarfod cylch Cymorth a Hyfforddiant Catalyst yn ddiweddar, soniais fy mod wedi gweld diddordeb cynyddol mewn ‘gwerthusiadau effaith’ dros y flwyddyn ddiwethaf. Roeddwn i’n meddwl y byddai’n ddefnyddiol esbonio beth yw gwerthusiad effaith, a beth mae’n ei olygu.
Achos ac effaith – beth achosodd y damwain car?
Yn y llun isod fe welwch gar yn taro polyn lamp. Mae pedwar cam a arweiniodd at y damwain yma ac mae’r stori’n fwy cymhleth nag ar yr olwg gyntaf. Os ydych chi eisiau edrych ar y cliwiau a dyfalu beth ddigwyddodd, gallwch ddod o hyd i’r canlyniadau ar ddiwedd yr erthygl hon.
Wrth geisio deall pam bod y car wedi taro’r polyn, rydym yn datrys achos ac effaith ac yn ceisio llunio stori gywir o’r hyn ddigwyddodd.
Cyfraniad neu briodoliad?
Mae’n debyg yn y sector cymdeithasol. Rydym eisiau datrys achos ac effaith a deall i ba raddau y mae’r gwasanaethau a redir gennym yn arwain at newidiadau yn y gymdeithas (effaith) – pobl a’u cymunedau.
Er enghraifft, rydych chi’n cynnal gweithgaredd sy’n helpu pobl ifanc i gael gwaith. Efallai y byddwch yn mesur bod 68% o’ch cyfranogwyr yn cychwyn cyflogaeth neu addysg hirdymor ystyrlon. Mae’n bwysig gwybod i ba raddau y mae’r canlyniad yma wedi digwydd oherwydd eich gwasanaeth. Mae hyn yn cynorthwyo eich dysgu ac yn eich helpu i roi atebolrwydd i gyllidwyr a rhanddeiliaid.
Gall y termau yma fod yn ddefnyddiol yma:
Cyfraniad – gallwch ddweud eich bod wedi cyfrannu at y newid ond nad ydych yn siŵr i ba raddau, a
Priodoliad – gallwch ddweud yn fwy manwl gywir i ba raddau y cyfrannodd eich gweithgareddau at y newid.
Pam canolbwyntio ar briodoliad?
Yn aml, gall newid cymdeithasol ddigwydd o fewn ecosystem gymhleth. Datblygwyd y map i ddeall yr ystod o ffactorau gwahanol sy’n dylanwadu ar lefelau gordewdra a sut maent yn rhyngweithio. Rydym am ddeall ein rôl benodol yn yr ecosystem hon, fel ein bod yn gwybod a yw ein gweithgareddau’n effeithiol.
Mae hyn yn ymwneud yn fwy â phriodoliad na chyfraniad, fel y mynegir yn y dyfyniad yma:
“Mae dau reswm pam ei bod yn gamgymeriad pwysleisio cyfraniad. Yn gyntaf, fe’i defnyddir yn rhy aml fel cymal dianc. Defnyddir yr ymadrodd “mae angen i ni asesu cyfraniad, nid priodoliad” fel arfer i olygu “Mae rhywbeth da wedi digwydd. Rydym am awgrymu mai ni sydd i ddiolch am hynny, heb geisio gweithio allan yn union sut.” Hyd yn oed os ydych chi’n asesu cyfraniad, mae angen i chi ddeall i ba raddau y gwnaethoch chi gyfrannu, a’r broses y digwyddodd hyn drwyddi. Wrth gwrs, mae’r arbenigwyr cyfraniad yn deall hyn. Yn rhy aml, fodd bynnag, mae eu disgyblion yn defnyddio cyfraniad fel esgus i osgoi gwneud unrhyw feddwl gwirioneddol.” – Aidleap
Gwerthusiadau priodoli ac effaith
Mae gwerthusiadau effaith yn un o lawer o wahanol fathau o werthuso. Mae’r diffiniad hwn o’r Brifysgol Americanaidd yn Washington yn un cyffredin:
“Mae gwerthusiad effaith yn dibynnu ar ddulliau trylwyr i bennu’r newidiadau mewn canlyniadau y gellir eu priodoli i ymyrraeth benodol yn seiliedig ar ddadansoddiad achos ac effaith. Mae angen i werthusiadau effaith ystyried y gwrth ffeithiol – beth fyddai wedi digwydd heb yr ymyrraeth”.
Felly mae gwerthusiadau effaith yn mesur y ddau:
- canlyniadau
- y radd y gellir priodoli’r canlyniadau yma i wasanaeth penodol.
Sut allwn ni gynnal gwerthusiadau effaith?
Gall gwerthusiadau effaith fod y math mwyaf cynhwysfawr a drud o werthusiad. Yn enwedig os ydych chi’n defnyddio Treial Rheoledig Ar Hap (RCT). Efallai eich bod chi wedi clywed am RCTs mewn perthynas â threialon cyffuriau: dewisir un grŵp ar hap i dderbyn y cyffur (y grŵp ymyrraeth neu driniaeth) a chymharir y canlyniadau â grŵp arall a ddewisir ar hap (y grŵp rheoli) sydd ddim yn derbyn yr ymyrraeth.
Defnyddir RCTs hefyd yn y sector cymdeithasol. Mae un grŵp o gyfranogwyr yn cael mynediad i wasanaeth, a’r llall ddim. Mesurir y ddau a chymharir y canlyniadau. Dyma enghraifft o ddull gwrth ffeithiol:
“Mae dull gwrth ffeithiol yn cynnwys datblygu amcangyfrif o’r hyn fyddai wedi digwydd yn absenoldeb rhaglen neu bolisi, a chymharu hyn â’r hyn a welwyd ym mhresenoldeb yr ymyrraeth.” – UNICEF
Ond nid dulliau gwrth ffeithiol yw’r unig ffordd o gynnal gwerthusiadau effaith a mesur priodoli. Nid ydynt yn addas ar gyfer pob sefyllfa na chyllideb chwaith.
Camau llai y gallwch eu cymryd tuag at fesur priodoliad
Mae dewisiadau eraill yn lle Treialon Rheoli Argymhellion (RCTs):
1. Datblygu damcaniaeth newid
Mae datblygu damcaniaeth newid yn fan cychwyn gwych ar gyfer mesur priodoliad. Mae’n nodi eich damcaniaeth o:
- sut mae eich gweithgareddau’n arwain at ganlyniadau
- sut mae’r canlyniadau’n arwain at ei gilydd
- rôl rhanddeiliaid eraill wrth gyflawni’r canlyniadau hynny
Gallwch wedyn chwilio am dystiolaeth ar draws y gadwyn o ganlyniadau i brofi (neu wrthbrofi) eich damcaniaeth.
Yn eu canllawiau ar werthusiadau effaith, mae UNICEF yn disgrifio’r defnydd o ddamcaniaeth newid i archwilio perthnasoedd achosol fel un o’r ffyrdd o gynnal gwerthusiad effaith.
Gellir defnyddio damcaniaethau newid hefyd ar y cyd ag RCT gan ei fod yn egluro’r ddamcaniaeth y bydd yr RCT yn ei phrofi.
2. Diystyru dewisiadau eraill
Darganfod am gynhyrchion a gwasanaethau tebyg. Un cam y gallwch ei gymryd tuag at fesur priodoliad yw deall i ba raddau y mae’r rhai sy’n defnyddio eich gwasanaeth yn defnyddio gwasanaethau tebyg i’ch un chi.
Er enghraifft, os mai chi yw’r unig ddarparwr rhaglenni cyflogaeth i bobl ifanc yn eich ardal, gall fod yn haws priodoli hyn yn ôl i chi. Nodyn: mae hyn yn llawer anoddach gyda chanlyniadau ‘meddalach’ fel cynnydd mewn hyder.
Er enghraifft, gallwch archwilio hyn trwy gwestiwn arolwg i ddefnyddwyr gwasanaeth a/neu ymchwil desg.
I gloi
Gall mesur priodoli fod yn heriol. Ond nid oes angen llawer o amser a chost i gymryd y camau cyntaf tuag ato. A gall eich helpu i ddeall rôl eich gwasanaeth o fewn system ehangach.
Os ydych chi’n gallu dangos eich bod chi’n gwneud ymgais i fesur priodoli (a gallwch chi ddangos eich bod chi’n deall pwysigrwydd priodoli) gall eich helpu i ddenu cyllid.
Atebion i’r hyn a ddigwyddodd i achosi’r damwain car.
Wedi'i gomisiynu gan Catalyst
