Pam mae hyn yn bwysig

Mae timau angen rhifau i lywio. Hebddynt, mae penderfyniadau'n dibynnu ar gof, lleisiau uchel, a phwy bynnag a siaradodd olaf. Gyda'r rhifau anghywir, gall penderfyniadau fod yn waeth na dim: mae tîm sy'n cyfrif tocynnau a gaewyd yn dysgu cau tocynnau'n gyflym, p'un a yw problemau defnyddwyr wedi'u datrys ai peidio. Mae mesur yn bwerus, ac mae'n newid ymddygiad mewn ffyrdd nad yw ei ddylunwyr bob amser yn eu bwriadu.

Mae'r canllaw hwn eisoes wedi defnyddio llawer o fesurau: mesurau cyflawni meddalwedd DORA (gweler Pwnc 3.4 — Galluogi Newid), pedwar mesur llif y Kanban Guide (gweler Pwnc 1.5 — Kanban), dangosyddion ac amcanion lefel gwasanaeth (gweler Pwnc 3.7 — Rheoli Lefelau Gwasanaeth), a llwyth galwadau (gweler Pwnc 3.10 — Monitro a Rheoli Hysbysiadau). Mae'r pwnc hwn yn dod â hwy at ei gilydd, yn ychwanegu gosod nodau gydag amcanion a chanlyniadau allweddol a mesurau boddhad cwsmeriaid, ac yn eu gosod yn erbyn y rhybudd hynaf yn y maes: cyfraith Goodhart.

Mae'r erthygl Wikipedia ar gyfraith Goodhart (yn Saesneg) yn rhoi'r dywediad yn ei ffurf arferol, "When a measure becomes a target, it ceases to be a good measure," ac yn ei briodoli i'r economegydd Prydeinig Charles Goodhart, a ysgrifennodd mewn erthygl yn 1975 ar bolisi ariannol y DU fod unrhyw reoleidd-dra ystadegol a arsylwyd yn tueddu i chwalu unwaith y rhoddir pwysau arno at ddibenion rheoli. Mae'r geiriad arferol yn ddiweddarach, ac mae'r erthygl yn ei briodoli i Keith Hoskin (1996) a phapur Marilyn Strathern yn 1997. Mae gan y pwynt hanes hir mewn gwahanol feysydd, a dyma'r man cychwyn cywir ar gyfer y pwnc hwn.

Cysyniadau craidd

Mesurau, targedau a chyfraith Goodhart

Mae mesur yn disgrifio rhywbeth. Targed yw rhif y disgwylir i rywun ei gyrraedd. Y symud o'r cyntaf i'r ail yw lle mae trafferth yn dechrau. Unwaith y caiff pobl eu gwobrwyo neu eu cosbi am rif, maent yn canfod ffyrdd o symud y rhif nad ydynt yr un peth â gwella'r hyn y mae'n ei ddisgrifio. Mae'r erthygl yn rhoi enghreifftiau o bolisi ariannol, systemau ysgolion a gofal iechyd. Mewn sefydliad gwasanaeth, enghreifftiau hawdd yw: amser i gau tocynnau yn gostwng oherwydd bod tocynnau'n cael eu cau'n gynnar, cyfrifon defnyddio yn codi oherwydd bod newidiadau'n cael eu hollti, ac argaeledd yn ymddangos yn codi oherwydd bod toriadau'n cael eu hailddosbarthu.

Nid osgoi mesur yw'r feddyginiaeth ond mesur yn ofalus:

  • Defnyddiwch sawl mesur sy'n tynnu yn erbyn ei gilydd, fel cyflymder ac ansawdd.
  • Trafodwch y rhifau gyda'r bobl y mae eu gwaith yn cael ei ddisgrifio ganddynt.
  • Peidiwch â chlymu gwobrau unigol neu ddisgyblaeth wrth un rhif.
  • Newidiwch fesurau pan fyddant yn rhoi'r gorau i fod yn addysgiadol.

Mathau o fesur

Math Cwestiwn y mae'n ei ateb Enghreifftiau
Canlyniad A yw defnyddwyr a'r busnes yn well eu byd? Boddhad defnyddwyr, llwyddiant tasg, refeniw, digwyddiadau sy'n niweidio defnyddwyr
Llif Pa mor dda y mae gwaith yn symud? Amser beicio, trwybwn, oed eitem waith, gwaith ar y gweill
Perfformiad cyflawni Pa mor dda y mae newidiadau'n cyrraedd cynhyrchu? Amser arweiniol newid, amlder defnyddio, cyfradd methu newid, amser adfer
Lefel gwasanaeth A yw'r gwasanaeth yn cwrdd ag anghenion defnyddwyr? Argaeledd, hwyrni, cyfradd gwallau yn erbyn amcanion
Iechyd a chynaliadwyedd A all hyn barhau? Llwyth galwadau, llafur diflas, goramser, teimlad staff
Cost Beth mae'n ei gostio fesul uned o werth? Cost fesul trafodyn neu fesul defnyddiwr

Mae set gytbwys yn tynnu o sawl rhes, fel nad yw gwella un yn cael ei brynu ar draul un arall.

Mesurau DORA

Mesurau perfformiad cyflawni meddalwedd DORA yw amser arweiniol newid, amlder defnyddio, amser adfer defnydd a fethodd, cyfradd methu newid, a chyfradd ail-wneud defnydd. Mae canllaw DORA ar y metrigau yn dweud nad cyfaddawdau yw cyflymder a sefydlogrwydd, gan fod y mesurau'n gydberthynol i'r rhan fwyaf o dimau. Mae'n rhybuddio rhag eu gosod fel nodau, dibynnu ar un, cymharu cymwysiadau gwahanol iawn, a chystadlu â thimau eraill, ac yn cynghori gwella yn erbyn eich perfformiad blaenorol eich hun. Mae'r erthygl Wikipedia ar DevOps yn ychwanegu bod rhai arbenigwyr wedi beirniadu methodoleg a metrigau ymchwil DORA, felly triniwch hwy fel cwestiynau defnyddiol â therfynau (gweler Pwnc 5.2 — DevOps).

Mesurau llif

Mae'r Kanban Guide yn diffinio pedwar mesur: gwaith ar y gweill, trwybwn, oed eitem waith ac amser beicio. Mae'n nodi y gall timau eu hailenwi ac y dylent ychwanegu eraill yn ôl yr angen, ac yn dweud mai dim ond pan fyddant yn llywio'r arferion o ddiffinio'r llif gwaith, rheoli eitemau ynddo a'i wella y mae mesurau o bwys. Mae oed eitem waith yn arbennig o ddefnyddiol oherwydd ei fod yn dangos trafferth tra bo amser o hyd i weithredu (gweler Pwnc 5.4 — Rheoli Ffrydiau Gwerth).

Mesurau lefel gwasanaeth

Mae dangosyddion ac amcanion lefel gwasanaeth (gweler Pwnc 3.7 — Rheoli Lefelau Gwasanaeth) yn rhoi'r olwg fwyaf uniongyrchol ar yr hyn y mae defnyddwyr yn ei brofi. Mae'r llyfr SRE yn dadlau dros ychydig o ddangosyddion a ddewisir o'r hyn y mae defnyddwyr yn gofalu amdano, dros ganraddau ac nid cyfartaleddau yn unig, a thros amcanion nad ydynt yn berffeithrwydd. Mae cyllidebau gwallau yn troi'r bwlch yn rheol benderfynu a rennir (gweler Pwnc 5.3 — Peirianneg Dibynadwyedd Safleoedd).

Amcanion a chanlyniadau allweddol

Fframwaith gosod nodau yw amcanion a chanlyniadau allweddol (OKRs). Mae'r erthygl Wikipedia yn disgrifio OKR fel amcan, nod arwyddocaol, concrit, wedi'i ddiffinio'n glir, wedi'i baru â thri i bum canlyniad allweddol, sef meini prawf llwyddiant mesuradwy. Mae'n credydu Andrew Grove â phoblogeiddio'r dull yn Intel yn y 1970au a'i ddogfennu yn High Output Management (1983), a John Doerr â'i ddod i Google yn 1999. Mae'r erthygl yn dweud bod OKRs yn cael eu sgorio o 0.0 i 1.0, bod canlyniadau allweddol uchelgeisiol yn targedu tua 0.7, a bod Doerr yn argymell cyfradd llwyddiant targed o tua 70 y cant, felly dylid ailwerthuso canlyniad allweddol sydd bob amser yn cael ei fodloni. Mae'n cynghori osgoi amcanion busnes-fel-arfer a ffafrio dangosyddion blaenllaw dros rai llusgol.

Mae'r erthygl hefyd yn cofnodi beirniadaeth: mae'r rhan fwyaf o sefydliadau wedi rhoi'r gorau i osod OKRs unigolion, sy'n tueddu i debyg i restrau tasgau ac yn pylu i adolygiadau perfformiad, a gall OKRs aml-lefel greu dull rhaeadr. Nid yw'n rhoi unrhyw dystiolaeth annibynnol o effeithiolrwydd ac mae ganddi dag cynnal a chadw am ddibynnu ar ffynonellau agos at y pwnc. I dimau gwasanaeth, gall OKRs gysylltu canlyniadau (er enghraifft, "mae defnyddwyr yn cwblhau cofrestru heb gymorth") â chanlyniadau allweddol mesuradwy, ar yr amod nad ydynt yn cael eu troi'n dargedau unigol.

Boddhad cwsmeriaid

Mae mesur yr hyn y mae defnyddwyr yn ei feddwl yn anodd ei wneud yn dda. Offeryn cyffredin yw'r sgôr hyrwyddwr net (net promoter score, NPS). Yn ôl Wikipedia, mae'n seiliedig ar un cwestiwn am ba mor debygol yw ymatebwyr o argymell cwmni, cynnyrch neu wasanaeth, gyda hyrwyddwyr yn sgorio 9 neu 10, y rhai goddefol 7 neu 8, a'r gwrthwynebwyr 6 neu is; y sgôr yw canran yr hyrwyddwyr minws canran y gwrthwynebwyr. Poblogeiddiodd Fred Reichheld o Bain & Company ef mewn erthygl yn Harvard Business Review yn 2003. Mae'r erthygl yn cofnodi terfynau: mae ysgolheigion yn cwestiynu a yw'n rhagfynegi twf cwmni'n ddibynadwy, mae angen niferoedd mawr o ymatebion ar un eitem, mae'n dweud ychydig am broblemau penodol, mae gorarolygu yn tynnu cwynion, a gall ei gysylltu â chyflog ystumio ymddygiad, felly argymhellodd Reichheld ddatgysylltu'r ddau. Mae offerynnau eraill yn bodoli, fel sgorau boddhad cwsmeriaid a sgorau ymdrech cwsmeriaid, ond nid yw'r erthygl yn eu trafod.

Beth bynnag fo'r offeryn, gofynnwch gwestiwn byr, caniatewch ateb testun rhydd bob amser, darllenwch y sylwadau, a dilynwch i fyny ar yr hyn a ddysgwch.

Mesur pobl a chynaliadwyedd

Mae mesurau llwyth ac iechyd staff, fel llwyth galwadau, llafur diflas, goramser a theimlad, yn fesurau o gynaliadwyedd y gwasanaeth (gweler Pwnc 5.3 — Peirianneg Dibynadwyedd Safleoedd). Triniwch hwy fel gwybodaeth am y system ac nid fel mesurau o berfformiad unigolion.

Mesur AI ac awtomeiddio

Pan gyflwynir cam awtomataidd neu gam a gynorthwyir gan AI, ychwanegwch fesurau o'i ansawdd: pa mor aml y mae bodau dynol yn ei drechu, pa mor aml y mae'n anghywir, a beth mae'n ei gostio (gweler Pwnc 6.2 — AI mewn Rheoli Gwasanaethau TG).

Terfynau

Mae mesurau'n rhannol. Maent yn hepgor yr hyn sy'n anodd ei gyfrif, fel ymddiriedaeth, crefftwaith a barn. Gallant gamarwain pan fo data'n anghyflawn neu pan fo diffiniadau'n wahanol rhwng timau. Ychydig o dystiolaeth empirig y mae'r erthyglau a ddarllenwyd yma yn ei chynnig ar a yw rhaglenni mesur yn gwella canlyniadau. Triniwch unrhyw raglen fel arbrawf, ac adolygwch hi.

Arferion gorau

  1. Dechreuwch â'r cwestiwn. Gofynnwch pa benderfyniad y byddai mesur yn ei lywio, a phwy fyddai'n gweithredu arno. Os na fyddai neb, peidiwch â'i gasglu.
  2. Dewiswch set fach gytbwys. Dewiswch ychydig o fesurau ar draws canlyniad, llif, cyflawni, lefel gwasanaeth ac iechyd. Gwnewch yn siŵr fod rhai'n tynnu yn erbyn ei gilydd.
  3. Diffiniwch bob mesur yn fanwl gywir. Ysgrifennwch beth sy'n cael ei gyfrif, o ble, a beth sy'n cael ei eithrio. Mae dau dîm sy'n defnyddio'r un gair am bethau gwahanol yn cynhyrchu rhifau na ellir eu cymharu.
  4. Mesurwch fesul gwasanaeth neu dîm, a chymharwch â'i orffennol ei hun. Osgowch raddio timau. Mae DORA yn cynghori gwella yn erbyn eich perfformiad blaenorol eich hun a bod yn ofalus wrth gymharu cymwysiadau gwahanol.
  5. Peidiwch â gwneud un rhif yn darged. Defnyddiwch fesurau fel anogwyr trafodaeth, a gosodwch nodau fel canlyniadau. Pan fo mesur yn darged, gwyliwch am chwarae'r system (gweler cyfraith Goodhart).
  6. Pariwch rifau â straeon. Ar gyfer unrhyw duedd, edrychwch ar ychydig o achosion go iawn. Mae rhifau'n dweud wrthych ble i edrych; mae achosion yn dweud pam.
  7. Edrychwch ar ddosbarthiadau. Defnyddiwch ganraddau ac ystodau, nid cyfartaleddau yn unig, ar gyfer mesurau amser a maint.
  8. Ffafriwch ddangosyddion blaenllaw lle gallwch. Mae mesurau fel oed eitem waith yn dangos trafferth cyn iddi lanio, yn wahanol i fesurau o ganlyniadau'r gorffennol.
  9. Gosodwch nodau gydag amcanion a chanlyniadau allweddol yn ofalus. Os ydych yn defnyddio OKRs, cadwch hwy ar lefel tîm a sefydliad, osgowch amcanion busnes-fel-arfer, a thriniwch ganlyniad sydd bob amser yn cael ei fodloni fel arwydd i anelu'n uwch.
  10. Gofynnwch i ddefnyddwyr, yn fyr ac yn aml. Defnyddiwch gwestiwn byr gyda thestun rhydd, darllenwch y sylwadau, ac ymatebwch. Peidiwch â chlymu sgorau arolygon wrth gyflog unigol.
  11. Gwyliwch gost mesur. Ffafriwch ddata y mae offer yn ei gynhyrchu fel sgil-gynnyrch gwaith. Gollyngwch adrodd â llaw nad oes neb yn ei ddefnyddio.
  12. Adolygwch y mesurau eu hunain. Unwaith neu ddwywaith y flwyddyn, gofynnwch pa fesurau a arweiniodd at benderfyniadau a pha rai na wnaethant, ac ymddeolwch yr olaf.

Cwestiynau i'w trafod gyda'ch tîm

Pa un o'n mesurau sydd wedi arwain at benderfyniad yn y chwe mis diwethaf?

Rhestrwch y mesurau a gofynnwch am benderfyniad sy'n gysylltiedig â phob un. Mae mesurau heb gyswllt yn ymgeiswyr i'w tynnu. Gall yr hwylusydd ofyn pa fesur y mae pobl yn ymddiried leiaf ynddo a pham. Tynnwch neu trwsiwch un.

Beth sy'n digwydd i'n hymddygiad pan fo rhif yn darged?

Gofynnwch am enghraifft ddiweddar lle'r oedd rhif yn darged. Holwch beth wnaeth pobl i'w gyrraedd. Dywediad Goodhart yw'r ffrâm. Gofynnwch sut olwg fyddai ar well mesur neu baru mesurau. Cytunwch ar un newid.

A ydym yn mesur cyflymder ac ansawdd gyda'i gilydd?

Rhestrwch y mesurau cyflymder a'r mesurau ansawdd. Os yw'r rhestrau'n gam, trafodwch yr effaith. Er enghraifft, mae mesur amser cau tocynnau heb gysylltiadau ailadroddus yn gwahodd cau cynnar. Dewiswch baru.

Beth mae defnyddwyr yn ei ddweud wrthym am sut mae pethau'n mynd, a sut ydym yn gofyn?

Edrychwch ar y cwestiynau rydych yn eu gofyn i ddefnyddwyr a pha mor aml. Darllenwch rai o'r atebion testun rhydd yn uchel. Gofynnwch beth newidiodd o'u herwydd. Cytunwch ar gwestiwn byr i roi cynnig arno.

Pa rai o'n mesurau y gellid eu defnyddio i farnu unigolion, a beth ddylem ni ei wneud am hynny?

Nodwch fesurau y gallai pobl eu hofni. Trafodwch y risgiau a chytunwch ar reolau penodol ynghylch yr hyn na ddefnyddir y rhifau ar ei gyfer. Ysgrifennwch hwy.

Pe na allem gadw ond pum mesur, pa rai fyddem ni'n eu cadw?

Gofynnwch i bob person ddewis pump a chymharu. Mae'r gorgyffwrdd yn dangos y craidd; mae'r gwahaniaethau'n dangos anghenion gwahanol. Y canlyniad yw set gychwynnol. Gwiriwch ei bod yn cwmpasu canlyniadau, llif, lefelau gwasanaeth ac iechyd.

Yn ymarferol: enghraifft o ITIL ystwyth

Mae grŵp TG rheilffordd genedlaethol yn rhedeg y systemau y tu ôl i'w gwybodaeth i deithwyr. Mae'r grŵp yn adrodd dangosfwrdd o 40 mesur i'r tîm gweithredol bob mis. Ychydig sy'n darllen y dangosfwrdd, ac mae dau fesur yn dominyddu'r drafodaeth: nifer y digwyddiadau a gaewyd o fewn yr amser targed a nifer y rhyddhadau y chwarter. Mae'r tîm digwyddiadau wedi dysgu cau digwyddiadau'n gyflym ac ailagor rhai newydd am yr un nam, ac mae sawl tîm cyflawni wedi hollti gwaith yn ryddhadau dibwys i fodloni'r cyfrif.

Mae pennaeth y grŵp TG yn gofyn i dîm bach ailadeiladu'r mesurau. Maent yn dechrau trwy ofyn pa benderfyniadau y dylai'r dangosfwrdd eu llywio. Ar gyfer pob gwasanaeth maent yn dewis llond llaw o fesurau: dangosydd ac amcan lefel gwasanaeth sy'n wynebu defnyddwyr, amser arweiniol newid a chyfradd methu newid, oed eitem waith ar gyfer eitemau problemau agored, llwyth galwadau fesul peiriannydd, ac arolwg boddhad un cwestiwn misol o staff gorsafoedd gyda blwch testun rhydd. Ymddeolir yr hen gyfrifon. Mae'r tîm gweithredol yn cytuno na ddefnyddir unrhyw fesur i raddio timau na gosod bonysau unigol, ac mae pennaeth TG yn ysgrifennu hyn fel rheol ar y dangosfwrdd. Gofynnir i dimau osod nodau gwella ar gyfer y gwasanaethau y maent yn berchen arnynt fel amcanion â chanlyniadau allweddol, ar lefel tîm yn unig.

Ar ôl blwyddyn, mae gan y dangosfwrdd ddeuddeg mesur, ac mae'r adolygiad misol wedi dod yn sgwrs am y problemau agored hynaf a'r sylwadau testun rhydd. Mae digwyddiadau ailadroddus yn lleihau, ac mae rhyddhadau'n fwy ystyrlon. Erys rhai anawsterau. Mae'r arolwg boddhad yn cael ychydig o ymatebion gan staff nos, mae amser arweiniol un tîm yn edrych yn wael oherwydd mai dyma'r unig un sy'n cyfrif amser o'r syniad ac nid o'r ymrwymiad, ac mae rheolwr wedi dechrau dyfynnu sgôr yr arolwg mewn adolygiad perfformiad. Mae pennaeth TG yn gofyn i'r tîm alinio diffiniadau, yn atgoffa rheolwyr o'r rheol, ac yn trefnu arolwg byr yn ystod trosglwyddiad sifft nos.

Pedwar persbectif

Timau cynnyrch a chyflawni

Dylai timau cyflawni ddewis mesurau sy'n eu helpu i lywio, cymryd y rhifau o'u hoffer, a'u trafod mewn ôl-drafodaethau. Gwyliwch am fesurau sy'n gwobrwyo hollti gwaith neu guddio methiannau. Rhannwch yr hyn a ddysgwch â thimau eraill.

Timau gwasanaeth a gweithrediadau

Mae timau gweithrediadau'n cario llawer o'r mesurau lefel gwasanaeth ac iechyd. Cadwch ddiffiniadau'n glir a data'n ddibynadwy, cynhwyswch lwyth galwadau a llafur diflas, a chyflwynwch rifau gydag achosion a sylwebaeth. Gwthiwch yn ôl pan ddefnyddir mesur fel targed.

Arweinyddiaeth a llywodraethu

Mae arweinwyr yn llunio'r diwylliant mesur. Dywedwch beth fydd y rhifau'n cael ac na fyddant yn cael eu defnyddio ar ei gyfer, gofynnwch am dueddiadau a straeon ac nid tablau cynghrair, a gwrthwynebwch ychwanegu mesurau ar gyfer pob pryder newydd. Adolygwch y set gyfan o bryd i'w gilydd.

Cwsmeriaid a defnyddwyr

Mae cwsmeriaid a defnyddwyr yn ffynhonnell mesurau ac yn bynciau iddynt. Atebwch arolygon byr pan allwch, a dywedwch beth sy'n bwysig. Gofynnwch i ddarparwyr beth maent yn ei fesur am eich profiad a beth maent wedi'i wneud â'r canlyniadau.

Dulliau methu cyffredin

  • Mesurau fel targedau. Daw chwarae'r system yn sgil hynny. Yn lle hynny, defnyddiwch fesurau ar gyfer trafodaeth a gosodwch nodau fel canlyniadau.
  • Un rhif. Mae un mesur yn ystumio ymddygiad. Yn lle hynny, defnyddiwch set gytbwys sy'n tynnu yn ei herbyn ei hun.
  • Diffiniadau anghyson. Mae timau'n cyfrif yn wahanol. Yn lle hynny, diffiniwch bob mesur a'i ffynhonnell.
  • Tablau cynghrair. Mae timau'n cystadlu ac yn cuddio problemau. Yn lle hynny, cymharwch bob tîm â'i hanes ei hun.
  • Cyfartaleddau yn unig. Cuddir cynffonnau hir. Yn lle hynny, edrychwch ar ddosbarthiadau a chanraddau.
  • Mesur yr hyn sy'n hawdd. Mae rhifau cyfleus yn disodli rhai pwysig. Yn lle hynny, dechreuwch o benderfyniadau a chanlyniadau defnyddwyr.
  • OKRs unigol fel rhestrau tasgau. Daw nodau'n adolygiadau perfformiad. Yn lle hynny, cadwch OKRs ar lefel tîm a sefydliad.
  • Blinder arolygon a chysylltiadau cyflog. Mae defnyddwyr yn rhoi'r gorau i ateb, neu caiff sgorau eu trin. Yn lle hynny, cadwch arolygon yn fyr ac wedi'u datgysylltu oddi wrth gyflog.

Model aeddfedrwydd

Dimensiwn Cychwyn Datblygu Safoni Rheoli Cydlynu
Dewis a diffiniad Mae mesurau'n ad hoc Mae rhai timau'n diffinio ychydig o fesurau Defnyddir set gytbwys gyda diffiniadau clir fesul gwasanaeth Adolygir y set am ddefnyddioldeb a bylchau Alinir mesurau ar draws timau, cyflenwyr a chwsmeriaid
Defnydd mewn penderfyniadau Adroddir rhifau ond anaml y'u defnyddir Mae rhai timau'n eu trafod mewn adolygiadau Mae mesurau'n bwydo penderfyniadau a gwelliant rheolaidd Olrheinir a dysgir o benderfyniadau sy'n gysylltiedig â mesurau Mae mesurau'n arwain penderfyniadau ar draws y sefydliad
Gwarchod rhag chwarae'r system Gosodir targedau ar rifau unigol Rhywfaint o ymwybyddiaeth o ystumio Ysgrifennir a dilynir rheolau ar sut y gellir defnyddio mesurau Monitrir arwyddion chwarae'r system ac addasir mesurau Rhennir diwylliant mesur ar draws y sefydliad
Mesurau defnyddwyr ac iechyd Ychydig o ddata defnyddwyr neu staff Rhai arolygon neu ddata llwyth Mae arolygon defnyddwyr byr a mesurau cynaliadwyedd yn rheolaidd Mae canlyniadau'n arwain at weithredu wedi'i gynllunio ac fe'u gwirir Mae lleisiau defnyddwyr a staff yn llunio blaenoriaethau ar draws gwasanaethau

Rhestr wirio

  • Mae gan bob mesur rydym yn ei adrodd benderfyniad a nodir y mae'n ei lywio.
  • Rydym yn defnyddio set fach gytbwys sy'n cynnwys mesurau canlyniad, llif, lefel gwasanaeth, cyflawni ac iechyd.
  • Mae gan bob mesur ddiffiniad ysgrifenedig a ffynhonnell.
  • Cymharir timau â'u hanes eu hunain, nid eu graddio.
  • Rydym wedi ysgrifennu'r hyn na ddefnyddir mesurau ar ei gyfer.
  • Mae mesurau amser yn dangos dosbarthiadau neu ganraddau.
  • Gofynnir cwestiwn byr i ddefnyddwyr yn rheolaidd gyda lle i sylwadau, a darllenir yr atebion.
  • Os ydym yn defnyddio OKRs, maent ar lefel tîm neu sefydliad ac nid yn dargedau unigol.
  • Cymerir data o offer fel sgil-gynnyrch gwaith lle bo'n bosibl.
  • Rydym yn adolygu'r mesurau eu hunain o leiaf unwaith y flwyddyn.

Anogwyr AI

Pwrpas: dewis set gytbwys o fesurau ar gyfer gwasanaeth.

Helpwch fi i ddewis set fach gytbwys o fesurau ar gyfer [gwasanaeth].

Beth mae'r gwasanaeth yn ei wneud a phwy sy'n ei ddefnyddio: [disgrifiwch].
Penderfyniadau y mae angen i'r tîm a'i berchennog eu gwneud yn y chwarter nesaf: [rhestrwch].
Data sydd gennym eisoes: [rhestrwch offer a chofnodion].
Mesurau rydym yn eu hadrodd ar hyn o bryd: [rhestrwch].

Cynigiwch bump i wyth mesur ar draws canlyniad, llif, perfformiad cyflawni, lefel gwasanaeth ac iechyd (er enghraifft oed eitem waith, amser arweiniol newid, dangosydd argaeledd, llwyth galwadau, a chwestiwn boddhad byr). Ar gyfer pob un, dywedwch pa benderfyniad y mae'n ei lywio, pa ddata sydd ei angen arno, ac un ffordd y gellid chwarae'r system gydag ef. Peidiwch â gosod targedau. Gofynnwch gwestiynau eglurhaol yn gyntaf, marciwch ragdybiaethau, a rhestrwch yr hyn nad ydych yn siŵr ohono.

Pwrpas: canfod sut y gellid chwarae'r system gyda mesur.

Dyma fesur a ddefnyddiwn a sut y caiff ei ddefnyddio: [disgrifiwch y mesur, ei ddiffiniad, a phwy sy'n ei weld neu'n cael ei wobrwyo amdano].

Rhestrwch ffyrdd y gallai pobl newid eu hymddygiad i wella'r rhif heb wella'r gwaith sylfaenol, gan ddefnyddio'r disgrifiad yn unig. Awgrymwch fesur pâr a fyddai'n datgelu pob ystumio a chwestiwn i'w ofyn i'r tîm. Peidiwch â chyhuddo neb. Rhestrwch yr hyn nad ydych yn siŵr ohono.

Pwrpas: ysgrifennu OKRs ar gyfer tîm gwasanaeth heb eu troi'n dasgau.

Helpwch fi i ddrafftio OKRs ar gyfer [tîm] ar gyfer y chwarter nesaf.

Cyd-destun: [disgrifiwch y gwasanaeth a'r brif broblem y mae defnyddwyr yn ei hwynebu].
Canlyniadau rydym eu heisiau i ddefnyddwyr: [rhestrwch].
Mesurau rydym eisoes yn eu casglu: [rhestrwch].
Risgiau a welsom gyda nodau yn y gorffennol: [er enghraifft, chwarae'r system neu restrau tasgau].

Drafftiwch ddau neu dri amcan, pob un â thri i bum canlyniad allweddol sy'n ganlyniadau mesuradwy (nid tasgau), gan ddefnyddio mesurau y gallwn eu casglu yn unig, a gadewch werthoedd targed fel [i'w cytuno gyda'r tîm]. Ar gyfer pob canlyniad allweddol, enwch y ffynhonnell ddata ac ystumio posibl. Peidiwch â gosod OKRs unigol. Gofynnwch gwestiynau eglurhaol yn gyntaf, a rhestrwch yr hyn nad ydych yn siŵr ohono.

Pwrpas: dadansoddi sylwadau testun rhydd arolwg.

Dyma sylwadau testun rhydd o'n harolwg defnyddwyr diweddaraf: [gludwch sylwadau dienw].

Grwpiwch y sylwadau yn themâu yn seiliedig ar yr hyn y maent yn ei ddweud yn unig. Ar gyfer pob thema, rhowch enw, nifer y sylwadau o'm rhestr, dwy ddyfyniad byr enghreifftiol, a chwestiwn i'r tîm. Amlygwch themâu sy'n ymddangos mewn sylwadau cadarnhaol a negyddol. Peidiwch â dod i gasgliadau am ddemograffeg na theimlad y tu hwnt i'r testun. Os yw'r sampl yn fach, dywedwch hynny. Rhestrwch yr hyn nad ydych yn siŵr ohono.

Sgiliau AI

  • software-engineering-metrics: defnyddiwch i ddewis a dehongli mesurau perfformiad cyflawni a gwasanaeth.
  • key-risk-indicators: defnyddiwch i ddewis mesurau rhybudd cynnar ar gyfer risgiau i wasanaeth.
  • survey-design: defnyddiwch i ddylunio arolygon byr o ddefnyddwyr a staff sy'n cynhyrchu atebion defnyddiadwy.
  • getting-feedback: defnyddiwch i gasglu ac ymateb i adborth gan ddefnyddwyr a chydweithwyr.
  • feature-prioritization: defnyddiwch i gysylltu mesurau canlyniadau â'r hyn y mae'r tîm yn gweithio arno nesaf.

(Mae'r sgiliau eu hunain wedi'u hysgrifennu yn Saesneg.)

Prif ffynonellau

  • DORA's software delivery performance metrics (dora.dev): diffiniadau o'r pum mesur a rhybuddion am eu defnyddio.
  • Goodhart's law (Wikipedia): tarddiad a geiriad y dywediad bod mesur a ddefnyddir fel targed yn peidio â bod yn fesur da.
  • Objectives and key results (Wikipedia): y fframwaith, ei darddiad, sgorio a beirniadaethau.
  • Net promoter score (Wikipedia): y diffiniad, defnyddiau a beirniadaethau un mesur boddhad.

Mae'r ffynonellau hyn yn Saesneg.

Cyfeiriadau

  1. DORA's software delivery performance metrics — DORA, dora.dev — https://dora.dev/guides/dora-metrics-four-keys/
  2. Goodhart's law — Wikipedia — https://en.wikipedia.org/wiki/Goodhart%27s_law
  3. Objectives and key results — Wikipedia — https://en.wikipedia.org/wiki/Objectives_and_key_results
  4. Net promoter score — Wikipedia — https://en.wikipedia.org/wiki/Net_promoter_score
  5. The Kanban Guide — John Coleman, Daniel Vacanti, and contributors, kanbanguides.org — https://kanbanguides.org/english/
  6. Service Level Objectives — Google SRE book, sre.google — https://sre.google/sre-book/service-level-objectives/
  7. DevOps — Wikipedia — https://en.wikipedia.org/wiki/DevOps
  8. Performance indicator — Wikipedia — https://en.wikipedia.org/wiki/Performance_indicator
  9. Customer satisfaction — Wikipedia — https://en.wikipedia.org/wiki/Customer_satisfaction