Categories
Geen onderdeel van een categorie Hoe doe je onderzoek?

Hoe je wetten maakt die mensen kunnen (en niet alleen kennen)

Op 20 mei hield de Academie voor Wetgeving een discussiebijeenkomst: hoe betrek je het doenvermogen van burgers bij het maken van wetten en regels. Jean de Koning (analist) en ik vertelden hoe we dit bij DUO aanpakten. Met Jean maakte ik in maart 2019 al de eerste schetsen hiervoor en daar schreef ik dit blog over. Dit was het begin voor de estafette van wet naar loket wat later debegripvolleambtenaar.nl werd. En Jean zit natuurlijk zelf in de Begripvolle Ambtenaren reeks.

We brachten vier vragen in en waren benieuwd naar de ervaringen van anderen hierbij. In dit blog een samenvatting van onze info en de tips, reacties en dilemma’s die we terugkregen. Voor mij zaten er ook een paar eye-openers in en ik bewaar en deel ze graag op dit blog.

Wat is de definitie van ‘burgerperspectief’?

Doenvermogen is een woord dat eigenlijk helemaal niet bestaat. Het is de tegenhanger van denkvermogen en het doel van de Wetenschappelijke Raad voor het Regeringsbeleid (die de term bedacht) is om beleidsmakers aan te sporen niet uit te gaan van excellent cognitief vermogen van burgers. Maar om ook rekening te houden met meer praktische vermogens zoals het maken van een plan, in actie komen, volhouden en omgaan met verleiding.

Naast denkvermogen is ‘doenvermogen’ minstens zo belangrijk om aan de hoge eisen van de participatiesamenleving te kunnen voldoen. De overheid verwacht van burgers steeds vaker dat ze zelfredzaam zijn op het gebied van gezondheid, persoonlijke financiën en de arbeidsmarkt. Maar weten is nog geen doen.

De WRR in Weten is nog geen doen.

Jean trapte de presentatie af door het niet alleen over doenvermogen te hebben, maar over burgerperspectief. Voor ons zijn die twee termen bijna inwisselbaar omdat je voor het perspectief van burgers niet alleen moet kijken naar wat mensen vinden, maar ook naar wat ze doen. Iemands mening staat soms haaks op gedrag. Dat zagen we bijvoorbeeld bij studenten in dit onderzoek naar lenen en schuld.

Of het briefstemmen dat afgelopen verkiezingen werd geïntroduceerd. Veel oudere stemmers dachten dat ze goed stemden, maar bleken fouten te maken bij het terugsturen van hun stembiljet. Veel stemmen waren ongeldig, schreef de NOS. Hoe had dit voorkomen kunnen worden? Door bij het maken van zo’n proces en het aanpassen van de kieswet al het burgerperspectief te betrekken, bijvoorbeeld door:

  • een klantreis te maken (overzicht van het proces vanuit het perspectief en context van de stemmer)
  • de hele gang van zaken te prototypen (uitproberen)

Hoe zien anderen het burgerperspectief?

  • Iemand van EZK vertelde over de MKB-toets. Ondernemers in een panel geven aan of nieuwe wetten en regels werkbaar zijn. En ze kijken of nieuwe wetten niet leiden tot nieuwe problemen.
  • Iemand van SZW noemde het moeilijk om samen met burgers voorspellend naar regelgeving te kijken. Je moet dan (als burger of beleidsmaker) iets zeggen over hoe je het in de toekomst ervaart. Eigenlijk wil je het gewoon experimenteren, maar je kunt moeilijk voor een kleine groep alvast een wet in laten gaan.
  • Vanuit BZK reageerde iemand dat juist bij de kieswet dat regelmatig gebeurd. Het nieuwe stembiljet voor stemmers in het buitenland is uitvoerig getest via de Tijdelijke Verkiezingswet. Welk biljet werkt het beste en wat leren we van dit proces? Maar zoiets kost tijd…
  • Zo’n experimentenwet is nog niet zo simpel, reageerde een ander. Hij wees op het kritische advies van de Raad van State op de Experimentenwet Rechtspleging in 2019.
  • Weer een ander: als iets politiek actueel wordt, heb je zoveel tijd trouwens niet. Dan moet het nu direct opgelost worden en is er geen ruimte voor eerst een onderzoek of experiment.

Over die laatste opmerking dacht ik ’s avonds nog wat na. In het verleden hoopte ik weleens dat mijn onderzoeken politiek relevant zouden worden, dan krijgt het vast momentum, dacht ik. Maar misschien bereik je juist meer als je onder de radar extra tijd en moeite in iets kunt stoppen, het daardoor meer aandacht kunt geven dan wanneer het snel moet, en je oplossing dan beter wordt. Dan heb je meer ruimte om op lange termijn te investeren in een groep burgers en een oplossing.

Wanneer betrek je burgers en hun perspectief?

Ik leidde deze vraag in met de estafette van wet naar loket, uit De Begripvolle Ambtenaar. Waar in deze estafette betrek je het burgerperspectief? Wie in je organisatie moet dit doen? Nou, kort antwoord: in elke stap en iedereen. Maar dat ziet er elke keer anders uit. En hoe doe je dat dan?

De estafette van wet naar loket uit De Begripvolle Ambtenaar

Ik gaf twee voorbeelden. In de zomer van 2019 deed ik een doenvermogentoets voor de nieuwe Wet Inburgering. Bij elke wet wordt uitvoerende organisaties gevraagd om een uitvoeringstoets: welke effecten heeft de nieuwe wet op systemen en processen? In deze toets werd expliciet gevraagd om ook te kijken naar het doenvermogen van inburgeraars. We hadden amper 6 weken en gelukkig had ik 2 jaar eerder onderzoek gedaan met vluchtelingen en alles waar ze mee te maken krijgen bij hun inburgering. Dat onderzoek kon ik mooi gebruiken. Lag dat niet op de plank, dan was het lastig geweest.

Bij de nieuwe wet Meer ruimte voor nieuwe scholen pakten we het anders aan. Al ver voor de uitvoeringstoets werkten we samen met beleidsmedewerkers van het ministerie van OCW om ideeën uit de wet te prototypen en te testen met initiatiefnemers van een nieuw schoolconcept. We ontdekten dat een onze aannames niet overeen kwamen met het beeld dat initiatiefnemers van zichzelf hadden. Wij dachten dat ze als privé-persoon begonnen met het idee voor een school en veel later in het proces zakelijk aan de slag gingen. In de memorie van toelichting stond daarom dat ze eerst via hun persoonlijke DigiD met DUO een start konden maken om later een zakelijk bestuursaccount met kvk-inschrijving te gebruiken. We maakten een dummy versie van dit hele proces inclusief alle brieven die je tussentijds zou krijgen.

De initiatiefnemers wilden helemaal niet hun persoonlijke DigiD gebruiken, ben je mal! Die omschakeling kon uit de wet en hoefden we niet te bouwen. In de estafette van wet naar loket zat ik als gebruikersonderzoeker relatief op het eind. Maar bij deze wet werd ik aan het begin gevraagd om mijn werk te doen. Super! Zo maak je de cirkel rond. Dat zouden we veel vaker moeten doen.

Wat vonden de anderen?

  • Een wet heeft voor burgers de vorm van een brief die je thuis op de mat krijgt. Of een website die je bezoekt. Daarom is dat een perfecte manier om je wet al uit te testen, begon iemand direct.
  • Een ander vulde aan dat het niet alleen eenmalig moet gebeuren, maar dat we 1 jaar na de invoering nog eens moeten kijken hoe burgers zo’n proces ervaren. Is het waar wat we toen dachten bij het maken van de wet?
  • Iemand van het UWV vertelde hoe ze soms 3 beleidsvarianten opstellen en vergelijken qua lasten voor burgers. Dan kunnen ze beter onderbouwen waarvoor ze kiezen op het eind. En zij ging nog even door: niet alleen een uitvoeringstoets, maar ook een invoeringstoets.

Zo ontstaat al snel een loop. Continu onderzoeken wat het perspectief van burgers is, iets bedenken, dat testen, het verder maken, bijstellen, weer onderzoeken. Dit is de bekende feedbackloop en die kan op meerdere momenten in de estafette van wet naar loket. Hij ziet er misschien net wat anders uit op een andere plek in het proces, maar dat is prima.

De estafette van wet naar loket met feedbackloop

Zo zou je ook bij nieuwe wetgeving de signalen over de bestaande wet mee kunnen nemen. Of de signalen van de huidige wet de aanleiding laten zijn om wetgeving aan te passen. Dan heb je de feedloop helemaal rond.

  • Hoe doe je dat? Om 1 casus, ga je niet een wet veranderen. Het is lastig om een signaal op waarde te schatten. Is dit 1 probleem of iets structureels?
  • Van belangenorganisaties krijg je ook vaak signalen, maar gaan die ook over het doenvermogen van burgers, of zijn die politiek? Hoe schat je dat in?

Dat is een mooie brug naar de derde vraag die Jean weer inleidde:

Vertegenwoordigen belangenorganisaties het burgerperspectief?

De Landelijke Studentenvakbond, het Interstedelijk Studenten Overleg, het Laks, de Jongeren Organisatie van het Beroepsonderwijs… ze geven DUO en het ministerie van OCW regelmatig advies. En DUO heeft zelf een jongerenraad ingericht dat met eigen adviezen komt. Er zijn bestuursadviesgroepen van scholen, ketennetwerkdagen, decanenkringen, ik kan nog wel even doorgaan…

Hun input is heel waardevol, maar in hoeverre kunnen deze experts en belangengroepen goed adviseren over het doenvermogen van hun achterban? Jean maakte een verschil tussen belang en perspectief. Belang als in: visie op, waarde hechten aan, mening over. Perspectief als in: vanuit dit gezichtspunt, eigen ervaring met, context van. Beide zijn nodig als input, maar zeker niet hetzelfde.

Voorbeeld: bij het maken van een nieuw systeem voor bekostigingsinformatie zaten we jaren geleden in een zaaltje op een mbo-school met bestuurders en afgevaardigden. Zij dachten mee over de eisen aan dit nieuwe systeem en daarmee het nieuwe gedigitaliseerde proces. We wilden ook graag met de ‘echte gebruikers’ van het nieuwe systeem praten: hun medewerkers op de controlafdeling. ‘Hoezo was dat nodig? Wij zeggen nu toch hoe het moet worden?” Maar toen ik een dag meeliep op een aantal controlafdelingen was de werkelijkheid toch anders. Concreter. “Dit veldje is wel handig, die niet. Oh, ja, voor dat draak van een proces hadden ze in de praktijk een work-around bedacht met Excel.”

Wie heeft dit bedacht? – Dat is toch helemaal niet handig!

Belang en perspectief moet je combineren. Doenvermogen valt in het hokje ‘perspectief’. Dat ontdek je pas als je naast iemand gaat staan die persoonlijk te maken krijgt met een wet. Uiteraard kun je dat prima organiseren samen met een belangenorganisatie, zoals bij het maken van de CoronaMelder app.

Reacties van de groep

  • Iemand van de SVB trapte af. Hun cliëntenraad vertegenwoordigt alle cliënten, maar als persoon zijn ze niet altijd representatief. Hun eigen ervaringen als client zijn niet per se de ervaringen van iedere client en dat maakt adviezen soms troebel. Medewerkers praten alsnog zelf met andere cliënten.
  • Een ander: wanneer weet je genoeg? Wanneer heb je alle invalshoeken en alle vertegenwoordigers genoeg geborgd, en hoe doe je dat? Bijvoorbeeld als je een nieuw stelsel wilt vormgeven?
  • Het vraagt een aanvullende manier van onderzoeken, begon een ander. We moeten kijken naar gedrag en dat vervolgens breder meten, bijvoorbeeld met enquetes: wordt het probleem breder beleefd?
  • De persoon van de SVB ging verder: bij de PGB wilden we de ervaring van zorgmedewerkers meenemen op die manier, maar de respons was veel te laag. De vragenlijst heeft daardoor zo lang uit moeten staan, dat duurt veel te lang. Helemaal als je dan een acuut politiek signaal krijgt, dat maakt snel reageren ingewikkeld.
  • Iemand van SZW: het gaat om de rode draden. Je wilt signalen ophalen en patronen ontdekken. Bij de herziening van de Participatiewet wil je de hardheden in deze wet zien en het effect daarvan op mensen. Dat kun je doen met een signaleringsteam die een goede feedbackloop inricht.

Praktisch: hoe maak je het burgerperspectief een onderdeel van het werkproces?

Van de goede initiatieven moeten we standaarden maken zodat collega’s en teams hier makkelijk mee kunnen werken. De WRR heeft een handige toolkit ontwikkeld die je kunt gebruiken, maar dat moet je dan wel doen.

Bij DUO willen we dat burgeronderzoek niet toevallig gebeurt, maar structureel een plek heeft in de estafette van wet naar loket. Onze hele strategie kun je in deze blog en de bijbehorende infographic bekijken: de structuur van onderzoek.

Ik lichtte er twee dingen uit. Als eerste onze onderzoeksmethoden. Combineer verschillende methoden om steeds een vollediger antwoord op vragen te krijgen. Kwalitatieve signalen valideer je bij een grotere groep. Je kijkt niet alleen naar wat iemand zegt, (subjectief), maar ook naar wat iemand doet (objectief). Praktische voorbeelden van onderzoeksmethoden? Dit blog staat er vol mee.

De onderzoeksmethoden van DUO, uit de infographic ‘De structuur van onderzoe

En ons onderzoeksarchief. Ik werd gevraagd bij de doenvermogentoets van de Wet Inburgering omdat ik Eva, de accountmanager verantwoordelijk voor de uitvoeringstoets, de week ervoor toevallig trof in de bus naar de sportdag van OCW. Wat een mazzel.

Liever wil je dat accountmanagers en alle collega’s sowieso toegang hebben tot inzichten uit onderzoek. Daarom documenteren we burgeronderzoek gelaagd, centraal en verhalend in het onderzoeksarchief. Iedereen kan het gebruiken en iedereen kan bijdragen. In deze blog leg ik uit hoe deze manier van documenteren werkt. Zo ziet het onderzoeksarchief er uit:

Een snelle demo van het Onderzoeksarchief van DUO

De laatste reacties

  • Het ziet er goed uit, maar in de praktijk… voor je iedereen mee hebt? Nou, verzuchtte ik, dat herken ik ook wel hoor. Het vraagt een lange adem en persoon voor persoon, maar je moet gewoon beginnen.
  • Kunnen de inzichten openbaar gedeeld worden? Waarom niet? Het ministerie van AZ maakt voor het onderzoek naar life events ook al gebruik van zo’n onderzoeksarchief. Onderzoek kunnen we delen met elkaar, we werken voor veel dezelfde burgers.

’s Avonds mailde ik nog wat heen en weer met Jean hierover. Wat erop tegen is… het wordt zo snel politiek. Als ons inzicht in het doenvermogen van burgers open wordt (wat ik toejuich!), dan kan iedereen erbij. De Tweede Kamer is bijvoorbeeld ook een schakel in de feedbackloop. Stel dat zij iets opduikelen in onze onderzoeksarchieven dat ineens acuut een politiek issue wordt…

Wetgeving is sowieso een loop. Je start nooit greenfield, maar hebt altijd te maken met iets dat er al is. Stel: we zouden onze inzichten over studenten en schuld delen. Supergoed, want de politiek wil bezig met een nieuwe wet. Alleen dat betekent ook de facto kritiek op de oude wet, de uitvoering en de uitkomsten daarvan. Dan moet onze minister misschien wel in het bankje. Toch maar niet openbaar dan, terwijl er heus niet zulke schokkende dingen instaan die niet al bekend zijn. Het vraagt een constructieve houding van iedere partij in de feedbackloop om niet alleen te willen scoren of juist te risicomijdend te zijn, maar om duurzame wetgeving te maken die goed zijn voor mensen. Hoe ondersteun je dat zo goed mogelijk?

Zo op de mail ’s avonds maakten Jean en ik nog een lijstje. Van tegenpolen die elkaar afstoten en aantrekken, verschillend zijn, maar nooit zonder elkaar kunnen. Samen moeten we dansen.

BeleidUitvoering
WettekstCode
BelangPerspectief/ ervaring
MeningGedrag
WensUitkomst
TheoriePraktijk
InktWerkelijkheid
Categories
Geen onderdeel van een categorie Hoe doe je onderzoek? Werken met beeld

Mensgericht ontwerpen bij de overheid, een praktische gids

Overheidsdiensten die goed zijn voor mensen, hoe maak je die? Door te beginnen bij de mens: de persoon die de dienst gaat gebruiken. In dit blog een voorzet hoe we deze manier van werken opschalen bij DUO zodat iedereen mensgericht beleid en uitvoering kan ontwerpen.

Gisteren publiceerde de Tijdelijke Commissie Uitvoeringsorganisaties hun onderzoeksresultaten: klem tussen balie en beleid. Ik keek er met smart naar uit. Naar dezelfde problemen heb ik ook onderzoek gedaan. Ik schreef de essays over De Begripvolle Ambtenaar erover en verwees in de zomer al naar hen.

Hun eerste aanbeveling is dezelfde als de mijne, leuk! Praat met de burger (en de uitvoering). Een begripvolle ambtenaar ontwerpt samen met de burger. Mooi gezegd, maar hoe doe je dat dan?

De wet kennen én kunnen

We hebben soms de neiging bij de overheid om uit te gaan van een burger bij wie de juiste kennis automatisch leidt tot het juiste gedrag. Dat klopt niet. Het meeste gedrag van mensen komt juist voort uit het onbewuste. Dit schrijft de Wetenschappelijke Raad voor het Regeringsbeleid in haar rapport: ‘Weten is nog geen doen. Een realistisch perspectief op redzaamheid’. 

De WRR maakt onderscheid tussen denkvermogen en doenvermogen. Als de burger iets lijkt na te laten, dan hoeft dat zeker geen onwil te zijn. Het kan ook dat hij het simpelweg niet kan doen. Sommige mensen hebben nu eenmaal meer moeite met de informatiesamenleving dan anderen. Daarom moeten wij kijken naar het totaal aan keuzes, verleidingen en acties dat iemand heeft te verstouwen. 

Dat doe je door je diensten mensgericht te ontwerpen. Kijk niet alleen naar de business wensen, waaronder de wettelijke kaders, of naar de techniek. Begin liever bij de mens. 

Overheidsdiensten die goed zijn voor mensen:

  • helpen de burger zijn doel te bereiken
  • bieden informatie taakgericht, gelaagd en stapsgewijs aan
  • maken ongewenste keuzes beperkt mogelijk
  • dringen afleiding en verleiding terug

Voorbeeld: het is voor de gemiddelde student niet handig om geen aanvullende beurs te krijgen, maar door te veel keuzevrijheid in Mijn DUO komt het wel voor. 

Daarom moeten we constant onze processen en communicatiemiddelen bij de overheid evalueren. Steeds moeten we ons afvragen: kan er nog iets weg? Mensen hoeven onze processen niet te begrijpen, dat is veel te veel gevraagd. Het is onze taak om een proces constant te verbeteren en de complexiteit voor de burger zo minimaal mogelijk te maken. De burger moet de wet niet alleen kennen, hij moet ’m vooral ook kúnnen.

Dit is een taak voor elke ambtenaar

In mijn onderzoek naar begrip bij de overheid foto-interviewde ik allerlei collega’s die samen in een lange estafette van wet naar loket werken. Dit deed ik omdat iedere ambtenaar een stempel drukt op wat er bedacht en gemaakt wordt. Een wet wordt niet vanzelf omgezet in computercode. Een medewerker aan de balie weet niet vanzelf wat ze wel en niet moet zeggen, daar zijn werkinstructies voor. De uitvoering van de overheid, ook al is hij nog zo geautomatiseerd, is mensenwerk.

Dat betekent dat je de menselijke maat niet kunt delegeren naar de klantenservice van de overheid. Iedere ambtenaar moet mensgericht aan de bak.

Hoe doe je dit?

Dat zijn we afgelopen jaar gaan uitwerken bij DUO. Als je mijn blog al een tijd volgt, herinner je je misschien nog het foto-interview met Jean, de bedrijfsanalist. Hij is een van de aanjagers om mensgericht ontwerpen hoog op de agenda te krijgen. Niet alleen bij teams die applicaties maken voor digitale diensten, maar ook bij collega-analisten die processen ontwerpen en accountmanagers en beleidsmedewerkers die adviseren over (nieuw) beleid en de impact daarvan op de uitvoering en de burger.

Mensgericht ontwerpen, een workshop

Mijn collega Suzanne Smit heeft een workshop ontworpen die je digitaal met allerlei collega’s kunt doen. Deze workshop vertelt de basis van mensgericht ontwerpen. Je kunt het (ingevulde) template hier bekijken.

Theorie wisselt ze af met praktische opdrachten. Na deze workshop heb je helder wie je doelgroep is, wat zijn doel is en welke taken hij bij jou heeft te doen. Dat is de basis van het bedenken van een dienst. Ze geeft voorbeelden en legt uit hoe je vervolgens kunt onderzoeken hoe je doelgroep jouw dienst en je organisatie écht ervaart.

Dezelfde workshopopzet heb ik gebruikt toen ik vorige week een gastcollege gaf bij 33 studenten van de Hogeschool Rotterdam over design thinking. Wat is jouw ervaring met DUO? Wat moeten medewerkers van DUO over jou weten om diensten te maken die goed zijn voor jou?

De workshop kan dus 2 kanten op. Voor collega’s om kennis te maken met methoden en je kunt de methoden direct in de praktijk brengen. Hier zie je dezelfde oefening naast elkaar: met collega’s en met studenten.

Deze workshop is een perfecte start om te beginnen met mensgericht ontwerpen. We begonnen ooit met een fysieke variant op kantoor, de empathiethermometer noemden we hem toen. Na deze start heb je meer nodig. Daarom begonnen we vorig jaar te experimenteren met teams coachen. Maar voor echte verandering moet je het groots aanpakken.

Bij DUO maken meer dan 40 ontwikkelteams alle applicaties die samen de (digitale) dienstverlening van DUO vormen. Er zijn meerdere belteams die burgers en zakelijke gebruikers te woord staan. Er zijn tig beleidsmedewerkers, adviseurs en nog veel meer collega’s verspreid over allerlei directies. Samen zijn we met bijna 3000 mensen.

Beleid vertalen in diensten die goed zijn voor mensen kan prima. Collega’s die dat moeten doen, moeten dan wel weten hoe, en toegang hebben tot de methoden waarmee het kan. Heel DUO dus. Deze workshop maakten we daarom zo dat iedereen hem kan begrijpen en geven.

En daarom maken we ook…

Het Handboek Diensten

Dit Handboek laat zien welke kwaliteit we nastreven in onze dienstverlening voor burgers en zakelijke gebruikers. Het zorgt voor consistentie in de ervaring van onze doelgroep. Het geeft richting hoe je diensten maakt die goed zijn voor mensen.

Het Handboek heeft drie delen:

  • standaard diensten waar ieder team bij DUO bij aan kan sluiten. We maken zaken niet dubbel, maar gebruiken wat er is. Bijvoorbeeld als je een portaalfunctionaliteit of het versturen van post in je dienst nodig hebt.
  • heldere kaders en richtlijnen die ervoor zorgen dat al onze diensten goed zijn. Een voorbeeld van zo’n kader is UNO, ons design systeem.
  • methoden om zelf mensgericht te onderzoeken en te ontwerpen. Om de methoden toe te passen, kun je een coach inschakelen.

We zijn nog in de experimenteerfase en gaan de komende tijd onderzoeken wat collega’s nodig hebben in een handboek. We breiden hem steeds uit. Het Handboek Diensten is nu (nog) alleen beschikbaar voor DUO-medewerkers. Daarom hier een aantal screenshots.

Zo’n handboek past trouwens perfect bij de aanbeveling van de WRR om aan de slag te gaan met doenvermogen. In september publiceerden zij een gids hoe je praktisch je eigen diensten kunt toetsen op doenvermogen.

Ik kan me voorstellen dat in navolging van hen meer overheidsorganisaties hiermee aan de slag zijn. Ik ben dus heel benieuwd naar die ervaringen. Hoe lukt het jullie om het praktisch te maken en je organisatie mee te nemen in de ontwikkeling naar meer menselijke maat bij de dienstverlening van de overheid?

Categories
Geen onderdeel van een categorie Hoe doe je onderzoek? Werken met beeld

De structuur van onderzoek – Blogverjaardag

Deze blog bestaat vijf jaar! In 2017 begon ik met bloggen over mijn werk als onderzoeker bij DUO. Eerst heel basic, bijvoorbeeld over een test die ik deed of een bezoekje aan een ander bedrijf (in mijn eerste blog schreef ik over een test bij Blendle op kantoor haha).

De ene blog leidde tot de ander. Van onderzoeksmethoden toepassen, experimenten om gebruikers te betrekken (ook de mislukkingen!) tot aan de strategische beslissingen welke rol onderzoek hoort de spelen in de organisatie.

Een feestslinger van blogs

Naast een enorme stroom aan leuke blogjes, bouwden we vooral aan een onderzoeksstrategie voor DUO, geïnspireerd door het ResearchOps framework. Onze strategie is continu in beweging, we werken er elke dag mee.

Deze research strategie visualiseerde ik deze week in Miro. Bekijk het bord direct en struin zelf door onze strategie en ontwikkeling.

The why, what, how

Op dit bord zijn 3 cirkels, dat zijn natuurlijk die cirkels van Simon Sinek. Elke activiteit kun je herleiden naar het waarom: DUO maakt digitale diensten die goed zijn voor mensen.

Dat lukt als alle medewerkers in de estafette van wet naar loket bij DUO betrokken zijn en inzicht hebben in de ervaring van de burger of zakelijke gebruiker.

In deze visuele strategie vind je de volgende onderwerpen die ons helpen ons doel te bereiken:

  • de rol van onderzoekers en een onderzoekscultuur in je organisatie
  • hoe je onderzoek goed, veilig en schaalbaar organiseert
  • de kwaliteit, vernieuwing en standaardisering van onderzoeksmethoden
  • je onderzoeksinzichten vastleggen en delen met impact

Waar het handig is, heb ik direct ook wat uitleg bijgedaan. Bijvoorbeeld bij het stuk over onderzoek delen: hoe deel je het dan? En waarom zo?

Of bij het stuk over onderzoeksmethoden. Van de verschillende soorten onderzoek maakte ik ook direct een overzicht waarvoor een methode dient.

Laatste dan. Vorig jaar begonnen we met teams coachen in mensgericht ontwerpen. Dit betekende dat we groter moesten denken. Hoe kunnen we heel DUO helpen om te willen, weten, kunnen en doen? Hop, direct ook onze coachingsstrategie erbij.

Het gaat lukken!

Dit grote plaatje is de reden dat ik blog. Ik vind het belangrijk dat er bij de overheid iets nieuws ontstaat, namelijk dat we de burger belangrijker gaan vinden dan onszelf.

Toen ik begon met bloggen, wilde ik vooral zelf leren. Ik was nieuw bij de overheid en ik had altijd geblogd over wat me bezig hield. Wat ik leerde als onderzoeker, schreef ik op. In het begin had ik 3 bezoekers per maand. Prima, laat mij maar lekker klooien in mijn hoekje op het internet.

Nu zijn het er een stuk meer dan drie. En ik leer nog steeds zoveel. Ik maak jullie enthousiast, en jullie mij. Samen leren we hoe het kan: een overheid die luistert, die echt wel wil en het beter maakt voor de burger. Het gaat lukken, het is al bezig!

De ontwikkeling bij DUO staat zo op een rij, of nou ja, in een rondje dan. Het meest bijzondere van de afgelopen 5 jaar? Dat onderzoek mijn discipline lang en breed oversteeg. Veel collega’s bij DUO raakten enthousiast over de relatie die we met burgers hebben. Daarom is het goed dat we als onderzoeksteam de vraag voor klussen allang niet meer aankunnen. Laten we het allemaal maar samen doen. Onderzoek doen, luisteren naar de burger, daar moet iedereen van zijn.

Bedankt voor 5 jaar lezen (vooral die 3 vanaf het begin). Hartjes.

Bekijk het bord ‘De structuur van Onderzoek’ en klik er ook overzichtelijk door naar alle blogs per thema.

Categories
Een begripvolle toekomst Geen onderdeel van een categorie Hoe doe je onderzoek?

Op naar een nieuwe structuur voor maatwerk

In de krant wordt er geschreeuwd om menselijkheid: een overheid die begripvol is. Er komen zoveel verhalen los na eerst de toeslagen- en later de boodschappenaffaire.

Er moet meer maatwerk komen, lees ik telkens. Maar dat is niet de oplossing. Tenminste… niet als maatwerk betekent ‘om het systeem heen werken’. Dan is het lapwerk. Verander liever de structuur van het systeem.

In dit blog een pleidooi voor een nieuwe structuur voor maatwerk. Niet (alleen) de work-arounds door individuele lieve ambtenaren, maar juist een begripvolle overheid, in het DNA van het systeem.

Dit ga je lezen:

  • Puzzelaar Patrick, een voorbeeld
  • Buiten de scope van je organisatie denken
  • Maatwerk kan een standaard zijn
  • Soorten maatwerk: proactief en reactief
  • Een stap verder: overheidsbreed
  • Dit vraag een nieuwe structuur
  • De eerste praktische stappen

Dit blog schreef ik met hulp (en inzage van stukken over de Maatwerkplaatsen) van Maartje Kemme, senior beleidsmedewerker Maatwerk bij het Ministerie van Sociale Zaken en Maureen Hermeling, strategisch adviseur dienstverlening van de BAR-Organisatie. De tekeningen over de maatwerkplaats komen uit deze video, gemaakt door Bord & Stift.


Puzzelaar Patrick

Bij het loket Geldzaken van de Gemeente Den Haag werkt Patrick. Hij is casemanager voor inwoners die bij het loket aankloppen voor hulp bij geldzaken. In ons interview pakt hij willekeurig de bovenste case van de stapel als voorbeeld. Meneer N.

Meneer N. kreeg 3 jaar geleden gezondheidsklachten waardoor hij niet meer kon werken. Hij verloor zijn baan en klopte aan bij het UWV voor een WIA-uitkering. Dat was een stuk minder dan zijn eerdere loon en zijn huur werd steeds moeilijker op te brengen. Hij vroeg huurtoeslag aan, maar daarvoor moest hij eigenlijk eerst huurverlaging bij de Woningstichting aanvragen. Dat kan, maar je moet wel de formulieren in de juiste volgorde opsturen naar juiste organisaties.

Lang verhaal kort: na 3 jaar was meneer N. het overzicht volledig kwijt, had hij schulden en zat hij tegenover Patrick zijn geldzaken door te nemen. Patrick zocht alles voor hem uit. Belde met de Belastingdienst, regelde de huurverlaging met de Woningstichting en zorgde ervoor dat N. huurtoeslag én overzicht kreeg.

In een vorige blog bracht ik een maand uit mijn eigen leven in kaart, nu probeerden we de drie jaar voor meneer N uit te tekenen. We vroegen aan Patrick wat er nog meer speelde. Waren dit de enige overheidsloketten waar hij vanwege gezondheids- of financiële problemen iets moest regelen?

Ja, goede vraag… dat wist Patrick ook niet zo 1-2-3. Was zijn vrouw niet ook aan het inburgeren…? ‘Kijk,’ dacht ik, ‘en ik tekende een lijntje naar DUO met een – mogelijke – inburgeringsschuld van zo’n €10.000 voor taallessen.

Als je met Patrick praat, is het verleidelijk om te denken dat we meer Patricks nodig hebben. Hij is een rots in de branding voor mensen als N. en zorgt ervoor dat problemen niet uit de hand lopen. Je kunt met Patrick gewoon een afspraak maken, een kop koffie drinken en je verhaal doen. Patrick is een fijne gast, hij luistert tenminste naar je en zegt geen nee, zoals een computerscherm.

Maar zelfs Patrick heeft geen overzicht op je hele relatie met de overheid. En ook voor Patrick is het zoeken naar de juiste puzzelstukjes.

Een stukje uit het overzicht van meneer N. Met het gele stuk hielp Patrick.

Toen we die tekening zo voor ons zagen, dachten we: we hebben niet meer Patricks nodig, we moeten die puzzel aanpakken. Die puzzelstukjes buitelen over elkaar heen en als je ergens de verkeerde indrukt, trekt de hele puzzel krom. Dat moeten we aanpakken.


Buiten onze scope

Ik werk zelf als design researcher nu zo’n 7 jaar bij de overheid. Ik weet hoe we die puzzelstukjes maken. Ik maak ze ook.

Als je bij een overheidsorganisatie werkt, zelfs als je je werk probeert te doen vanuit het perspectief van de burger, hou je je toch altijd aan de grenzen van je eigen organisatie. Bij DUO deed ik bijvoorbeeld onderzoek naar inburgeren. Ik kwam bij mensen thuis en bedacht hoe wij de website voor deze doelgroep beter kunnen maken. Alleen… hoe ze vóór ons met de IND te maken hebben, of het voorinburgeringstraject in het asielzoekerscentrum? Ja… daar gaan wij niet over. Dat valt buiten onze scope. Dus hoeveel zin had het om daar onderzoek naar te doen?

Dus adviseerde ik ook alleen over ons eigen puzzelstukje. En niet over de hele puzzel. Die moest de inburgeraar zelf maar leggen. En of ons puzzelstukje paste in zijn puzzel… ja, dat kon ik ook niet zien.

Maar mijn collega’s die zo’n inburgeraar aan de telefoon spreken, krijgen wel vragen over de hele puzzel. Zij proberen die zo goed mogelijk te beantwoorden. Dat zijn de Patricks in onze organisatie. Fijne mensen die proberen om maatwerk te leveren.

Het is niet eerlijk naar meneer N. toe én het is niet eerlijk naar Patrick toe, dat we ze dwingen om die moeilijke puzzels zelf te maken. Het is namelijk helemaal niet goed om zo allerlei precedenten te scheppen. Het leidt tot oncontroleerbare willekeur en een grillige overheid. Je moet het maar net treffen, welke ambtenaar je case oppakt. Daarnaast is het voor ambtenaren ook een continue zware mentale belasting om vanuit empathie en hardheidsclausules te werk te gaan, in plaats vanuit heldere inclusieve kaders en standaarden die rekening houden met menselijkheid en uitgaan van een begripvolle relatie tussen overheid en burger.

Hier schreef ik eerder essays over. Over de rol van begrip bij de overheid en de systeem-level-bureaucratie. En over de worsteling met eigen menselijkheid als welwillende ambtenaar.

Want dat laatste kan gewoon.

Maatwerk kan een standaard zijn

Bij meer menselijkheid bij de overheid denken we vaak aan een extra balie bij de ingang, meer capaciteit bij de telefonie of dat we meer uitzonderingen kunnen maken, buiten de computer om. Maar menselijke maat kun je ook in het systeem ontwerpen. Juist in het systeem.

Als we bij het perspectief van de mens beginnen, kunnen we elk stokje van de estafette van wet naar loket samen met burgers ontwerpen. Hoe willen we dat de begripvolle verbinding is? En welke impact heeft ‘mijn stokje’ op die verbinding? 

Daarvoor hebben we een andere structuur in het systeem nodig.

K‍ijk, zo kan maatwerk schematisch eruit zien door de bril van de burger:

Verschillende niveau’s van maatwerk

Alle dienstverlening van de overheid zou de burger als maatwerk moeten ervaren. Maatwerk kan prima ‘in bulk’ worden georganiseerd. Diensten kunnen prima op maat aanvoelen, ook als dat voor iedereen gelijk is. Er zijn daarnaast aanvullende diensten die niet iedereen gebruiken die het extra op maat maken. Bijvoorbeeld bellen met iemand van een serviceloket. Als dat ook niet genoeg is voor je unieke situatie, is er specifiek maatwerk nodig. Ongelijke gevallen behandelen we in gelijke mate ongelijk.

Daar wordt het interessant.

Dit unieke maatwerk kan proactief en reactief

Proactief maatwerk is in het hier en nu, tussen 1 burger en 1 overheidsloket. Dat kan een digitaal loket zijn dat goed ontworpen is, helder uitlegt en taken gebruiksvriendelijk en op maat aanbiedt. Het kan ook een ambtenaar zijn die met jou je situatie doorneemt en een oplossing zoekt en regelt. Bijvoorbeeld Patrick. Dit is maatwerk in de dienst.

Reactief maatwerk gaat verder. Dit is het signaal uit de dienst meenemen en daarmee de dienstverlening beter maken. Dit is niet eenmalig fixen, maar ervan leren.

Komen dit soort situaties vaker voor? Wat maken anderen mee als ze een fout maken bij het aanvragen van huurtoeslag? Welke stress stapelt zich op bij mensen die door gezondheidsproblemen hun werk kwijtraken? In welke andere problemen komen zij? Wat kunnen wij als organisatie anders doen om dit te voorkomen of sneller op te lossen? Dit is maatwerk in de dienstverlening.

Overheidsorganisaties hebben een structuur nodig om dit te faciliteren.

Bij de SVB en het UWV noemen ze deze structuur een maatwerkplaats. Een afspraak om in de organisatie vanuit al die verschillende estafetterollen samen te werken en die praktijksignalen te herkennen, onderzoeken en op te volgen. Ze denken als ontwerpers en proberen te onderzoeken ‘hoe het wel kan’. Daarmee veranderen ze de standaarden in hun dienstverlening zodat het de volgende keer wél op maat is voor burgers.

Zij merken dat er minder bezwaar- en beroepsprocedures zijn. Er zijn nu ook andere manieren om als burger verandering te vragen. De organisatie luistert naar hen, zonder dat ze per se in bezwaar hoeven om gehoord te worden. En de regeldruk voor burgers wordt minder; het is makkelijker puzzelen.

Dit kan nog een stap verder

Vaak overstijgen dilemma’s de organisatie en gaat het om de hele puzzel waarbij de puzzelstukjes niet in elkaar passen. Zo’n maatwerkplaats kun je ook overheidsbreed doen. Ambtenaren uit meerdere organisaties (van de kastjes en de muren, zeg maar) kunnen als ontwerpers samen werken. Ze kunnen samen de problemen onderzoeken en oplossingen ontwerpen. Het is makkelijk om politiek-maatschappelijke aspecten te betrekken, omdat je toch al overheidsbreed werkt. Je ziet hoe het ene puzzelstukje zich tot de ander verhoudt.

In het inburgeringsonderzoek had ik zo bijvoorbeeld mijn inzichten over vertraging van taallessen en culture clashes kunnen delen met mijn collega’s van de IND en het COA. Ik had van hen kunnen leren en daardoor meer inzicht gekregen in het probleem. We hadden samen oplossingen kunnen prototypen en testen. Samen hadden we makkelijker het ministerie kunnen betrekken want onze case had gestaan als een huis. Sterker nog: beleidsmedewerkers van het ministerie hadden allang meegeholpen in onze maatwerkplaats.

Maar dat deed ik niet, want ik was maar alleen. Ondanks mijn goede bedoelingen had ik niet de structuur om zo te werken. Ik had geen idee waar ik moest beginnen. Ik kende niemand bij de IND. Zelfs binnen DUO hadden we toen niet zo’n maatwerkplaatsstructuur. Mijn opdracht was om de website beter te maken en niet om inburgeraars te helpen inburgeren.


Een infrastructuur voor menselijke maat opzetten

Ik schrijf hier natuurlijk niet over iets nieuws. Veel organisaties zijn al met allerlei initiatieven voor ‘de menselijke maat’ bezig. Bij DUO zijn we bijvoorbeeld sinds mijn inburgeringsonderzoek begonnen met kijken hoe we onderzoeksinzichten centraal kunnen delen binnen de organisatie. Overal bij de overheid poppen er clubjes op om de burger centraal te zetten, direct duidelijk te zijn, met design thinking te experimenteren en de dienstverlening te verbeteren. Allemaal belangrijk en nodig.

Maar nog nergens hebben we het zo structureel aangepakt door er een nieuwe infrastructuur van te maken. Door het DNA van het systeem te veranderen. Dat is de kern, en dat moeten we aanpakken. Anders blijven we maar puzzelstukjes schaven.

Het betekent dat we allemaal ons werk anders moeten gaan doen. Dat we moeten beginnen bij het perspectief van de burger, en niet dat van de huidige wetgeving. Die kunnen we immers veranderen.

Nog nergens zetten we samenwerkingen op die zo gestructureerd beleid en uitvoering combineren. Nog nergens zijn we echt als organisaties verantwoordelijkheid aan het nemen voor elkaars puzzelstukjes. Nog nergens is de politiek niet leidend, en wel de feedback van de burger.

Dat moeten we wel gaan doen.

Het is tijd om dit praktisch te maken

De eerste stappen die we kunnen nemen:

  1. Organisaties moeten burgeronderzoekers aannemen als ze die niet al hebben. Deze onderzoekers werken centraal in de organisatie en wisselen hun onderzoek open met andere organisaties uit. Mens Centraal is al bezig om overheidsbreed zo’n onderzoekscommunity op te zetten. Dit onderzoek moet worden aangevuld met onderzoeken van toezichthouders en wetenschappers, zoals de Nationale Ombudsman, het WRR en meer.
  2. Organisaties maken de afspraak en investeren in methodieken die medewerkers helpen om multi-disciplinair als ontwerpers te werken. Bijvoorbeeld hoe je na een signaal uit de dienst dit verder kunt onderzoeken. Hoe je vanuit nieuwe denkkaders oplossingen kunt bedenken en toetsen. Lekker praktisch.
  3. Leiders en managers geven hun medewerkers de ruimte om ‘een begripvolle ambtenaar’ te zijn. Om moreel leiderschap en initiatief te tonen om op te komen voor de burger. Dit vraagt moed en kwetsbaarheid.
  4. Organisaties richten een maatwerkplaats in. Een fijne projectmanager die goed kan organiseren en verbinden zorgt ervoor dat medewerkers elkaar weten te vinden en samen kunnen werken. Er komt geld en tijd voor dit soort samenwerkingen. In deze maatwerkplaatsen kunnen burgeronderzoekers en ontwerpers samenwerken met technici en juristen. Ook de Patricks en meneer N’s mogen actief meedoen.
  5. Organisaties leggen een archief aan met ‘casusprudentie’, casuïstiek waarvan we kunnen leren, en ook dit wordt open gedeeld met andere organisaties.
  6. Wanneer in zo’n maatwerkplaats een puzzelstukje van een andere organisatie gevonden wordt (en dat gebeurt al snel), wordt er actief contact gezocht met die organisatie. Zij hebben als het goed is ook een zo’n nieuwe structuur die dit soort samenwerking faciliteert, dus je kunt zo aanschuiven.
  7. Wanneer het nodig is, schaalt de maatwerkplaats op en wordt deze overheidsbreed. Medewerkers uit de uitvoering kunnen zo makkelijk samen met medewerkers van een verantwoordelijk ministerie aan de slag. Ze gebruiken dezelfde infrastructuur van punt 1 tot en met 6.

Maatwerk wordt zo geen maatwerk meer, maar de nieuwe structuur van het systeem.

Categories
Hoe doe je onderzoek? Werken met beeld

Je onderzoek goed documenteren

Al langer wil ik schrijven over het documenteren van onderzoek. Oef, denk je nu, never mind, dat is geen sexy onderwerp. Wel belangrijk, dus in deze blog laat ik heel concreet zien hoe je onderzoeksresultaten goed kunt vastleggen. Ik werk voor de publieke zaak als ambtenaar, dus kan ik net zo goed mijn geheimen prijsgeven 🙂

Eerder schreef ik waarom goede documentatie belangrijk is. Als je open wilt werken, is het een must dat je documentatie op orde is. Bij DUO komt het elk jaar terug in onze goede research voornemens. En het is belangrijk als je als organisatie niet op onderbuikgevoelens, maar op basis van inzicht in je gebruiker beslissingen wilt maken.

Wat is goede documentatie?

Voor het vastleggen van de je onderzoek gelden dezelfde regels als voor elke informatie. Het moet:

  • toegankelijk: iedereen in je organisatie kan erbij (en als je open werkt ook iedereen daarbuiten)
  • vindbaar: de inzichten zijn doorzoekbaar en de informatie bereikt de juiste mensen
  • begrijpelijk: genoeg context voor iedere lezer, ook als je nieuw bent in het team
  • bruikbaar: heldere conclusies en aanbevelingen die je kunt inzetten en ze zijn goed onderbouwd

Het meeste onderzoek bij organisaties gaat hand in hand met ontwikkel- of beleidsteams die er vervolgens mee aan de slag gaan. Dat betekent dat je in korte iteraties werkt. Het makkelijkst is om elke stap direct te documenteren. Je onderzoeksdossier groeit vanzelf wel mee. Ik doe dat in 4 stappen:

  1. Ik begin met de onderzoeksvraag. Dit is meestal ook de aanleiding van het onderzoek.
  2. Ik schrijf en laat zien hoe ik het aangepakt heb. Wat is de methode, wie waren betrokken?
  3. Wat heb ik geleerd? Op basis waarvan?
  4. Hoe ga ik verder?

Het werkt het beste als al het onderzoek bij elkaar is en niet verspreidt over afdelingsschijven. Verschillende teams werken soms voor dezelfde gebruiker. Staat alles bij elkaar, kunnen ze makkelijk elkaars inzichten gebruiken. En als iets een eerder onderzoek tegenspreekt, zie je dat ook. Zo leer je als organisatie (zonder eindeloos te hoeven vergaderen, heuj!). Ik schreef hier eerder deze blog over: Alles wat we weten over de klant, weten we allemaal.

Van audio naar kladjes naar blog naar essay

Een voorbeeld. Bij de portretserie De begripvolle Ambtenaar pakte ik het ook zo aan. Ik begon met een interview. Dat nam ik op in audio en foto’s. Later luisterde ik alles terug en schreef ik soms 10 A4tjes vol. Ik heb hier ook weleens Happyscribe voor gebruikt, maar schrijven op papier werkt voor mij fijner. In mijn klad markeerde ik de belangrijkste punten die ik leerde. Daar zocht ik eventueel extra context bij (desk research). Ik vatte alles samen in een blog met aanbevelingen voor mezelf hoe ik verder kon gaan in het onderzoek. Na 17 interviews vatte ik alle inzichten samen in essays over De Begripvolle Ambtenaar.

Van ruwe data naar wijsheid

Wanneer ik een onderzoeksmoment documenteer vertel ik niet alleen wat ik ontdekte, ik laat het ook zien. Ik geef voorbeelden en onderbouw conclusies met quotes, in tekst of audio, en beeldmateriaal.

Je moet het niet geloven omdat ik iets schrijf, maar om het bewijs dat er bij zit.

Bij mijn interview met Henk als begripvolle ambtenaar zag dit proces er zo uit (uit de ‘achter-de-schermen-video die Aljan Scholtens maakte):

Van Henk heb ik mijn kladjes niet meer, maar van Johan als begripvolle ambtenaar nog wel. Speciaal voor jullie ook die op de blog.

Nog een voorbeeld: CoronaMelder

In de zomer liep ik mee met medewerkers van de GGD in hun werk om het coronavirus te bestrijden. Ik mocht geen opnames maken, dus ik typte met elk gesprek live mee. Op mijn laptop maakte ik mapjes met een documentje per bezoek, of soms per persoon die ik sprak.

Na het bezoek ging ik daar nog eens goed doorheen. Eerst om alle typos van het snelle typen recht te zetten. Daarna om patronen te ontdekken die ik onderstreepte. Verschillende onderwerpen gaf ik een eigen kleur. Per onderwerp werkte ik het uit in een inzicht. Die inzichten, samen met de context van het onderzoek en de observaties waarop dat gebaseerd was, deelden we op Github.

Over welke thema’s gingen de interviews? Wat zag ik tijdens het meelopen? Hoe werkten medewerkers met alle systemen en met elkaar? Kwam iets regelmatig terug, hoe dan?

Bij het meeluisteren met een bron- en contactonderzoeker zag dat er bijvoorbeeld zo uit. Groen gehighlight gaat over hoe de maatregelen verteld worden, oranje hoe mensen daar op reageren, geel hoe contacten in kaart gebracht worden en blauw gaat over de systemen die gebruikt worden. Vooral groene en oranje informatie vonden we belangrijk bij het maken van de melding die CoronaMelder via je telefoon stuurt. Ter vergelijking: hier het gedocumenteerde onderzoek van die dag.

Het gaat niet alleen om wat mensen zeggen, maar ook om wat je ziet, wat mensen doen en wat er om je heen gebeurd tijdens een onderzoeksmoment. In een van mijn eerste bezoeken vertelden verschillende medewerkers dat ze steeds weer anders moeten werken. “Bij elke persconferentie wordt er weer een verandering aangekondigd en moeten wij ons werk weer anders doen.” In de gangen zag ik flip-overs met steeds de nieuwe aanpak, de oude vellen lagen op de grond in de hoek. Deze meeloopdag leidde vervolgens tot dit inzicht ‘Het proces verandert elke week‘.

In al deze documentatie kun je precies zien hoe ik van ‘wat zag ik‘ naar ‘wat weet ik nu‘ naar ‘next step‘ ga. Bij CoronaMelder zijn alle onderzoeken en inzichten gepubliceerd op Github, en doorzoekbaar in Sticktail (het programma waar de onderzoekers in werken). Op die manier is het hele onderzoeksdossier bij elkaar en groeit onze wijsheid als team en als organisatie naarmate we meer onderzoek doen ‘vanzelf’.

Wat wel en wat niet vastleggen

Er zijn natuurlijk grenzen aan welke informatie je bewaart, hoe je dat doet en hoelang. Denk hierbij aan

  • informatie over personen. Sowieso vraag je toestemming voor het onderzoek, maar je hoeft meestal niet in je documentatie te vertellen over wie het precies gaat. Soms is beeldmateriaal fijn, vraag hier dan extra toestemming voor dat het gedeeld mag worden. (Ik stuur het meestal ook op: ‘kijk, zo heb ik het gebruikt in het verslag’).
  • informatie die niet relevant is of verouderd.
  • informatie die niet gedeeld mag worden. Dit is vooral belangrijk als je open werkt. Waar ligt de knip en wat mag niet ‘naar buiten’? Overleg hierover en bespreek wie dit bepaalt en op welke voorwaarden.

En zorg ervoor dat je informatie makkelijk te vinden is. Ik gebruikt op dit blog categorieën en tags. Bij DUO werken we net als bij CoronaMelder met Sticktail die ook op basis van tags het zoeken in al je onderzoek makkelijk maakt. Geef documenten en mapjes goede namen die iedereen kan begrijpen (en niet alleen jij). Zo raak je nooit het overzicht kwijt.

Documenteren zal nooit helemaal sexy worden, maar zo kom je hopelijk een heel eind. Succes!

Categories
(On)begrepen burgers Hoe doe je onderzoek?

Een dubbele test met de CoronaMelderapp

Je ziek melden in de app en je contacten waarschuwen kan alleen samen met een GGD-medewerker. Dit doe je door je GGD-sleutel die in de app staat aan de GGD-medewerker te geven. Die vult deze sleutel samen met je 1e ziektedag in het app-portaal in. Dan kun je je codes delen vanuit de app. De GGD zet als het ware met de sleutel de deur open zodat je codes naar de centrale server kunnen. Andere app-gebruikers kunnen de ‘besmette’ codes op de centrale server vergelijken met de codes die zij op hun telefoon ontvangen hebben. Is daar een match, dan krijgen zij een bericht dat ze in contact zijn geweest met iemand die het coronavirus heeft. 

Hallo, met de GGD. Ik bel u omdat u een test hebt gedaan. U hebt het coronavirus onder de leden. […] Heeft u de app? En wilt u anderen waarschuwen via de app? Zullen we dat samen doen?

Anja, GGD Utrecht

Deze ziek-melden-flow testten we 15 juli in een dubbeltest met een app-gebruiker en een GGD-medewerker. In dit blog de opzet van deze test en wat we leerden.

Op 2 locaties tegelijk: hoe werkt dat?

Het klinkt simpel, de een in Amsterdam, de ander in Utrecht. Logistiek was dit voor ons nog wel even een puzzel. In Amsterdam zijn een aantal app-gebruikers die de app testen. Halverwege hun test worden ze gebeld door een GGD-medewerker die in Utrecht meedoet met de test. Samen gaan ze door het scenario heen. In Amsterdam wordt de app getest, op een GGD-locatie het app-portaal voor de GGD’s. We testen dus 2 applicaties tegelijk, en eigenlijk gaat het vooral om de interactie tussen die 2 applicaties via de GGD-medewerker en de (zogenaamde) patiënt.

Elke woensdag testen Job en Lia (onderzoekers) sowieso al de app met allerlei gebruikers in het onderzoekslab in Amsterdam. Die tijden stonden vast. Voor de GGD-test maakte ik een rooster eromheen. Maar… de GGD-medewerkers hadden wel iets meer voorbereidingstijd nodig dan de app-gebruiker. Samen met Emiel (ontwerper) gaf ik Anja, die bij de GGD Utrecht als bron- en contactonderzoeksvraagbaak werkt, eerst een uitgebreide uitleg over de app, wat ‘ie doet en hoe hij samengaat met de GGD. We gingen het app-portaal door, en beantwoordden alle vragen die Anja had.

Emiel en ik leggen Anja uit hoe de app werkt

Wij konden in Utrecht op afstand meekijken met de test in Amsterdam. Dat was een beetje vals spelen, want straks in het echt kan de GGD niet meekijken bij de patiënt thuis. Wanneer de gebruiker in Amsterdam op de helft van de test was, belden wij met ‘de uitslag van de coronatest’. En natuurlijk met de vraag of de ‘patiënt’ zich ziek wilde melden in de app om daarmee anderen te waarschuwen.

Na de lunch schoof een collega van Anja aan. Zij kreeg een korte introductie van Anja hoe alles werkte, keek een gesprek mee en nam het toen over. In het echt zijn de makers van de app er ook niet bij, en moeten medewerkers het aan elkaar uitleggen.

5 uit 5 geslaagd

Het lukte alle vijf gebruikers in Amsterdam om samen met de GGD-medewerker zich ziek te melden in de app en daarmee anderen te waarschuwen dat ze in contact waren geweest met iemand die later corona blijkt te hebben. Anja en haar collega vonden het app-portaal soepel werken. Dat is top!

Maar er zijn ook dingen die beter kunnen. Dit is wat we leerden:

  • Het op luidspreker zetten en openen van de app verliep soms moeizaam. De GGD-medewerker kon niet zien waar iemand was in de app en had niet goed door of de telefoon wel of niet op speaker stond. In de volgende versie van het app-portaal maakten we een extra reminder voor de GGD-medewerker om de app-gebruiker hiermee te helpen.
  • Nog niet iedere app-gebruiker snapte wat hij nou precies gedaan had, toen het telefoontje klaar was. De GGD-medewerker vond het heel belangrijk (en dat is het ook) dat de patiënt goed wist waar hij toestemming voor had gegeven. Aan het eind van de dag keken we samen met de GGD terug naar de testen. Conclusie: de GGD-medewerkers willen specifieke informatie over hoe de app werkt en wat er precies gebeurt. Dan kunnen ze dit ook goed vertellen aan de patiënt.
  • Het ’train de trainer’-idee wat we bij Anja en haar collega van de GGD toepaste, werkte goed. Alleen… Anja had nog te weinig materiaal om haar collega goed uit te leggen wat de app deed. Nu was het vooral praktisch: meekijken. Je kon merken dat Anja veel uitgebreider wist wat ze moest doen en hoe alles werkte dan haar collega. Goede uitleg en introductiemateriaal maken is een must. Een dag later mailde Anja mij hier nog eens over (waar ik het overigens geheel mee eens ben):

Ik zat nog wat na te mijmeren over gisteren en dan met name de vraag welke scholing nodig zou zijn. Ik denk dat een goede e-learning met een website waar FAQ’s zijn opgenomen echt een heel goede optie zou zijn, mits de e-learning tot stand komt in samenwerking met medewerkers die het BCO zelf kennen/doen zodat het goed aansluit bij de werkelijkheid op de werkvloer.

Anja, GGD Utrecht

Van de dag is ook een kort filmpje gemaakt, met een glansrol voor Anja die vertelt hoe ze de test heeft ervaren:

Samenvatting van de testdag

Ben je benieuwd naar al het onderzoek en hoe we dit toepassen bij het maken van de app en het app-portaal? Alles staat openbaar op Github. De onderzoeksverslagen met alle inzichten van het app-portaal vind je hier:

Komende vrijdag (24 juli) en volgende week woensdag (29 juli) staan er weer testen op de planning bij een GGD.

Categories
Hoe doe je onderzoek?

Een corona-app die eerder en meer mensen waarschuwt

Wanneer je een bezoek brengt aan een GGD is de kans groot dat je ze ziet hangen: grote vellen papier met getekende stambomen. Bovenaan de bron van de besmetting, de eerste persoon die besmet is of het bedrijf waar iedereen aan verbonden is. Met lijntjes worden de contacten in kaart gebracht, sommigen ook met een positieve testuitslag op het coronavirus. Deze vellen papier geven overzicht. De bedoeling is natuurlijk dat de stamboom niet groeit. Dat de verspreiding van het coronavirus stopt, bij elk van die personen op de stamboom.

Sinds mei loop ik mee met het bron- en contactonderzoek van de GGD. Dit doe ik om te onderzoeken hoe een corona-app kan helpen bij de bestrijding van het coronavirus. Samen met medewerkers van de GGD kijk ik hoe hun werkprocessen in elkaar zitten. Hoe zij mensen aan de telefoon te woord staan en hoe mensen reageren. Wat betekent een app voor dit werkproces?

B: “Goedemorgen, u spreekt met B van de GGD. Komt het gelegen dat ik u even bel?” P: “Ja.” B: “Ik bel u met de uitslag van uw test. Die is positief, dat betekent dat u het coronavirus heeft.” P: “…” B: “Schrikt u daarvan?” P: “Ja, nee… nee… oh… werkelijk?”

Gesprek tussen GGD-medewerker B en patiënt

In de vorige blog schreef ik hoe we de corona-app testen met allerlei soorten gebruikers. In dit blog praat ik je bij over wat ik leerde tijdens het meelopen bij de GGD en wat dit betekent voor de corona-app.

Bron- en contactonderzoek

Ik begon te onderzoeken wat dit bron- en contactonderzoek (BCO) eigenlijk is. Wanneer iemand besmet is met het coronavirus wordt iedereen met wie hij de dagen ervoor in contact is geweest in kaart gebracht. Zij worden benaderd en gevraagd om extra op te letten en soms zelfs in quarantaine te gaan, aan de hand van hoeveel risico iemand loopt. Het RIVM heeft hiervoor landelijke richtlijnen gemaakt die de GGD’s toepassen.

Ik maakte een overzicht van de richtlijnen van het RIVM en het proces om dit uit te voeren. Communityleden van Code for NL hielpen mee en plaatsten er allemaal vragen bij die ik kon uitzoeken.

Het overzicht van de richtlijnen van het RIVM met onderzoeksvragen.

A: “Als jij die brieven voor iedereen klaar zet, gaan C en ik vast bellen. Misschien moeten we die mevrouw zo ook nog even bellen?” B: “Ja, als de mail wil dan.” B: “Ik hoop dat jullie mijn handschrift kunnen lezen, heb echt zo snel geschreven al die nummers net.”

Overleg tussen GGD-medewerkers

Ik leerde Henri ter Hofte kennen die als onderzoeker bij het Windesheim in Zwolle al sinds 2015 onderzoek deed naar apps die ingezet kunnen worden bij een pandemie. Ineens was zijn science fiction onderzoek werkelijkheid. Hij stuurde me deze video door, die goed uitlegt hoe bepaalde maatregelen effect hebben en welke rol een app kan spelen.

De simulatie van een epidemie en het effect van enkele maatregelen hierop

Maar een app staat niet op zichzelf. Die is deel van een groter geheel van alle maatregelen en moeite die we nemen. In Nederland zijn er 25 GGD’s die in hun regio de coronatesten en het speurwerk van mogelijke besmettingen in kaart brengen. Elke GGD doet dit net even anders, maar de grote lijn komt overeen.

Op bezoek bij de GGD

Bij de eerste GGD die ik bezocht, was het toevallig die dag rustig. Ik had ruim de tijd allerlei collega’s te spreken. Het was half mei, Nederland was net over de piek heen. Bij de GGD was de druk goed voelbaar. Dit is niet een gewoon onderzoek, realiseerde ik me. Alles verandert continu. In het onderzoeksverslag van die week schreef ik:

“De insteek van de meeloopdag bij de GGD is om in kaart te brengen hoe het proces van testen en bron-en contactonderzoek is. Na het tweede interview viel het me (onderzoeker) steeds meer op dat processen door elkaar heenliepen. Het verandert elke week. Dus welk proces wil je horen, vroegen medewerkers mij. Een app moet passen bij het BCO, maar van welk werkproces moeten we uitgaan bij het maken van de app?”

In de weken erna sprak ik meer testcoördinatoren en BCO-medewerkers, planners, teamleiders, artsen en informatiemanagers. De een was ervaren en vanaf het begin van de coronacrisis betrokken bij de grote opschaling, de ander was net op die dag begonnen en kreeg een training.

Ik luisterde gesprekken mee. Ik hoorde patiënten reageren op hun testuitslag, verdrietig worden en hun best doen om zich te herinneren met wie ze allemaal in contact waren geweest. De muren van de kantoren hingen vol met flip-over-vellen waar getekende stambomen op stonden, werkinstructies met het nieuwe beleid van die week en wegwijzers naar nieuw geïmproviseerde afdelingen.

B: “Ja, maar die klanten zijn nauwe contacten. Die moeten ook allemaal in quarantaine.” A: “Haar klanten. De andere klanten zijn categorie 3. Dit moeten we met de leidinggevende bespreken, hoe we dat met die klanten gaan doen.” B: “Pff…” A: “Ik heb eigenlijk nog nooit zo’n grote casus gedaan.” B: “Ja, het is echt een speurtocht he.”

Overleg tussen GGD-medewerkers

Ik zag BCO’ers multitasken: begripvol reageren, goed doorvragen, de vragenlijst afvinken en checken of ze alles hadden, meeschrijven op een kladblok en tegelijkertijd met de muis meerdere applicaties op het scherm bedienen. Na het gesprek overlegden ze met collega’s en met de arts: in welke risicocategorie vallen deze contacten? De richtlijnen van het RIVM zijn duidelijk, maar niet altijd 1-2-3 op mensen te plakken. Bron- en contactonderzoek kost veel tijd en is maatwerk.

Alle GGD’s hebben een werkinstructie waarin stap voor stap staat wat je moet doen, zeggen, vragen en moet vastleggen. Sommige werkinstructies zijn meer dan 35 bladzijdes. Bij handmatig bron- en contactonderzoek moet je al deze stappen uit de werkinstructie 1 voor 1 nemen. De gesprekken met de patiënt duren soms lang. De patiënt wordt moe, emotioneel en wil pauze. Soms herinnert de patiënt zich niet alles. Missen er telefoonnummers van contacten, namen, of wil de patiënt iets niet vertellen. En soms neemt iemand domweg de telefoon niet op.

“Ik ben nu niet op de zaak dus ik kan niet in het systeem kijken. Kun je me over een uur terugbellen?”

Leidinggevende van patiënt bij wie de contacten bekend zijn

De doorlooptijd van het virus

Een patiënt had op zaterdag voor het eerst ziekteverschijnselen. Vanaf zondag bleef ze thuis. Donderdag was ze volgens de richtlijnen al besmettelijk, dit is altijd de eerste ziektedag min 2 dagen. Op maandag liet ze zich testen en op woensdag kwam de uitslag. Woensdagochtend startte het contactonderzoek. Daar was ik bij toen ik meeliep bij het inwerken van nieuwe BCO’ers bij een GGD.

Van de contacten die in quarantaine moesten, waren twee op donderdag in contact geweest met haar en namen hun telefoon niet op. De dag erna werden ze nog eens gebeld, maar dat is dus al een week later. Die week hadden ze eigenlijk al in quarantaine moeten zijn.

De doorlooptijd van het virus

A: “Ja, u kunt in de 2 weken klachten ontwikkelen. U moet echt alert zijn en als u klachten hebt ons bellen. En we gaan u tussendoor ook bellen. En verder… ja, overleg het ook even met uw leidinggevende. En het advies is ook om geen bezoek te ontvangen en zoveel mogelijk thuis te blijven.” K: “Wacht… ik moet het even…” A: “Ja, ik overval u een beetje he.” K: “Ja…”

Gesprek tussen GGD-medewerker en contact die in quarantaine moet

Terwijl ik elke week bij een GGD meeliep en steeds meer leerde over de uitdagingen van bron- en contactonderzoek, bracht ik samen met collega’s van het app-team in kaart hoe de app dit zou kunnen aanvullen. Let wel: de werkprocessen van de GGD’s veranderden nog steeds regelmatig. Wat we bedachten, moest dus flexibel zijn. Ook wanneer er misschien een nieuwe uitbraak komt van het virus, en weer van alles op de kop gaat.

Dat de app meer mensen zou kunnen waarschuwen, wisten we. Vooral de mensen die je niet kent of je niet meer kunt herinneren, levert winst op. De meneer in de trein, iemand op een feest waar je naast staat te dansen, degene die aan het tafeltje achter je zit in het restaurant. Maar zou de app ook kunnen helpen door deze mensen sneller te waarschuwen?

Fragment van tekeningen om de app een plek in het proces te geven

Op de tijdlijn van het virus tekenden we allerlei scenario’s hoe we de app in het proces een plek konden geven. Deze ideeën bespraken we met de GGD. De teststraat viel bijvoorbeeld af. Die moest zo efficiënt mogelijk en daar kon geen gehannes met zeg, QR-codes bij. Uiteindelijk kozen we om bij het uitslaggesprek dat de GGD-medewerker met de patiënt voert een extra stap toe te voegen. In de app kun je je dan ziek melden, maar alleen samen met iemand van de GGD.

Je ziek melden in de app

Door de app stuurt je telefoon willekeurige codes naar telefoons van andere app-gebruikers. De ander weet niet dat hij de codes van jou heeft gehad en ook niet waar dit was. Wanneer je ziekt bent, kun je jouw codes uploaden naar een centrale server. Andere app-gebruikers kunnen op die centrale server checken of daar besmette codes staan die overeen komen met codes die zij op hun telefoon hebben ontvangen. Wanneer er een match is, krijgt die app-gebruiker een bericht. In deze video wordt dit uitgelegd.

Hoe de CoronaMelder-app werkt

Die codes uploaden kan alleen als een GGD-medewerker de deur naar die centrale server voor je openzet. De sleutel voor die deur staat in je app. In het gesprek met de GGD lees je de sleutelcode op en de GGD-medewerker voert hem in in een webapplicatie. Hiermee gaat de deur open en kunnen jouw codes de server bereiken. Deel je je codes vanuit de app, maar geef je niet de sleutel aan de GGD, dan staan je codes dus voor een dichte deur en kunnen ze de centrale server niet bereiken.

De webapplicatie waarmee de GGD de deur kan openen, testen we komende woensdag in een dubbeltest: in ons onderzoekslab in Amsterdam zijn er 6 app-gebruikers die de app testen en ik ben bij een GGD om samen met BCO’ers de webapplicatie voor de GGD te testen. Ze bellen elkaar en samen gaan ze proberen of het hen lukt om de codes van de patiënt te delen met de centrale server en zo anderen te waarschuwen.

Spannend. Ik ben heel benieuwd hoe dat zal gaan. 🙂


Wil je alle inzichten uit het onderzoek teruglezen, en de adviezen die ik op basis van dit onderzoek heb gegeven? Via linkjes in deze blog kom je er ook, maar hier al mijn onderzoeken op een rij:

Categories
(On)begrepen burgers Hoe doe je onderzoek?

Een app voor Simone

“Ik zou graag willen dat ik het ook begreep.” Simone zat samen met haar collega-ervaringsdeskundigen Jolanda en Betsie aan de tafel bij MEE in Rotterdam. Ze vroeg of ik Hugo de Jonge kende en hem kon vragen om wat langzamer te praten. “De persconferentie gaat veel te snel. Hij gebruikt moeilijke woorden. Soms gaat het over mij. Toen de dagbesteding weer openging, dat gaat over mij, maar ik begrijp niet wat hij over mij zegt.”

Simone had het over ‘ons soort mensen’. Dat ze er graag bij willen horen. De regels ook willen snappen. En de app ook willen gebruiken. Want daarvoor had ik met haar afgesproken. Ze ging de corona-app testen.

Sinds half mei werk ik als onderzoeker mee aan de corona-app. Vanaf dag 1 doen we (met een researchteam van 5) elke week gebruikerstesten. Ik loop mee met het contactonderzoek van de GGD en afgelopen week testte ik de app met mensen die laaggeletterd zijn, mensen uit met een lage sociaal economische status en mensen met een licht verstandelijke beperking. Een van hen is Simone die zo vurig pleitte om gehoord te worden.

In dit blog deel ik twee voorbeelden uit het onderzoek (want dat is allemaal openbaar) en vertel ik hoe we daarmee ontwerpkeuzes maken. Want dat is zo makkelijk nog niet.

Positief? Dat is niet positief!

Op maandag zat ik samen met Tobias van Geijn, copywriter, voor het scherm. We videobelden met 4 taalambassadeurs van Stichting ABC. Deze mensen waren vroeger laaggeletterd, maar kunnen inmiddels redelijk lezen en schrijven. We zagen ze struikelen over moeilijke woorden, anoniem bijvoorbeeld, moe worden van lange teksten en nadenken wat ze nu eigenlijk gelezen hebben en moeten doen.

Van Ab leerde ik wat struikelwoorden zijn. Dat zijn echt niet alleen moeilijke woorden, meestal meer dan 3 lettergrepen. Als je moe bent, struikel je bijvoorbeeld sneller. Hij vroeg ook waarom het eigenlijk positief is, als je corona hebt. Want dat is toch helemaal niet positief?

Screenshots uit de app versie 7.1

Goed zijn in taal is 1 ding, maar medische taal is een taal op zich. In de corona-app hebben we daar ook mee te maken. Hoeveel gezondheidsvaardigheden heeft iemand? Of hoe goed spreek je medische taal? Zeggen we covid-19, coronavirus, of ‘gewoon’ corona? Gaan we voor medisch juist of begrijpelijk? Ben je positief getest, wat bedoelen we daar dan mee? En hoe leggen we dat uit in de app? 

Volgens Pharos heeft ongeveer 1 op de 3 Nederlanders beperkte gezondsheidsvaardigheden. Zij kunnen moeilijk hun klachten uitleggen, brieven en bijsluiters lezen en medische adviezen begrijpen en toepassen. In de app kiezen we nu om te zeggen ‘U bent getest en hebt corona.’ We gaan er zoveel mogelijk vanuit dat iemand geen medische taal ‘spreekt’.

De corona-app en angst

In de Code-for-NL-slackcommunity denken en maken 300+ ontwerpers met ons mee. Een van hen is Anouschka Scholten. Zij stelde een terechte vraag:

Kan de overheid (juist ook via de app) niet meer verantwoordelijkheid nemen voor de situatie waarin mensen zich nu ook psychisch bevinden? Het coronavirus en de maatregelen van afzondering heeft veel mensen angstig gemaak. Ze zijn en blijven onzeker, het heeft een flinke knauw gegeven die nog wel even doorwerkt (en waar sceptici en kwakzalvers nu helaas op inspelen, dat maakt het nog erger). Ook veel jong volwassenen, zeker niet alleen maar mensen die bang zijn voor hun gezondheid, leven nu met angstgevoelens. Ook vind ik het eigenlijk nogal onethisch om mensen die positief zijn getest of een melding hebben gekregen, daarna alleen de instructies te geven om de test aan te vragen of om in quarantaine te gaan. Zo worden ze best wel aan hun lot overgelaten, dat kan beter toch?

Ik nam het mee naar het gesprek dat ik dinsdag had met wijkbewoners in Arnhem. Samen met Sanne van der Hagen organiseerde ik een groepstest in de Geitenkamp in Arnhem in het Buurthuis. De participanten kenden elkaar en zijn buren. Ze voelden zich de afgelopen maanden heel eenzaam. Veel waren angstig en verloren soms zelfs de zin in het leven. En dan is een app die je op elk moment kan vertellen ‘of je Corona hebt’, misschien wel lastig. 

Lidy was een van hen. Zij was bang dat ze dan de hele dag zou kijken ‘of ze al corona had’.

“Als ik nu al denk: ik moet niet luisteren (naar het nieuws) want dan word ik er helemaal naar van en psychisch zwaar. Als je dan zo’n app hebt, en je gaat het nog intensiever gebruiken, dan word ik helemaal gestoord.”

Bij het bericht dat je risico loopt, zou ze direct in paniek raken, zei ze.

Screenshots uit de app versie 7.1

Hoe kunnen we mensen als Lidy helpen? Op korte termijn wil ze graag zo min mogelijk confrontatie met het virus. Maar het virus heeft veel impact op haar leven en gemoed. Zou de app haar, in plaats van bang te maken, juist kunnen helpen om op lange termijn wat regie terug te krijgen? Hoe moet de app dan werken? Hoe moeten de teksten dan zijn?

De innovatieparadox

Na afloop van het gesprek in Arnhem vertelde Sanne me over de innovatieparadox. Innovatieve hulpmiddelen zijn het meest relevant voor de meest kwetsbare mensen. Maar juist voor die mensen is het vaak niet bruikbaar.

Een grote ontwerpuitdaging van de corona-app is daarom: hoe kunnen we de app zo maken dat Simone en Lidy hem kunnen gebruiken? En er niet bang van worden?

Een buurvrouw van Lidy vroeg trouwens of ze de test-app mocht houden. “Maar hij werkt nog niet”, zei ik. “Dat is niet erg”, zei ze. “Het is zo fijn dat alle info zo handig op een rij staat. Dat heb ik nog niet eerder zo gehad. En dat telefoonnummer voor een test werkt wel toch?” Ik knikte. “Zeker.” “Mooi”, zei ze. En ze bewaarde de Figma-link van het testprototype in haar favorieten. 🙂

Jolanda test de app (Foto door Liesbeth van den Nieuwenhuizen)

Wekelijks testen

Alles wat we maken en onderzoeken staat op Github. Maar ik hoor ook van veel mensen dat ze Github moeilijk vinden. Daarom hier ook al het onderzoek op een rij.

Het is best een lijst. We krijgen veel hulp van allerlei belangenorganisaties waardoor we dit hoge onderzoekstempo halen. Met documenteren lopen we een week achter, dus zelfs deze lijst is nog niet compleet 🙂

Wil je ook meehelpen met de app testen? We hebben een Doe Het Zelfpakket met een voorbeeldapp zodat je zelf met je oma, buur of kind het ontwerp van de app kunt testen. Woon je in Twente, dan kun je je aanmelden om de app een week lang te testen.

Categories
Geen onderdeel van een categorie Hoe doe je onderzoek?

Onderzoek op afstand

Het is mijn life goal om overheid en burger te verbinden en dichter bij elkaar te brengen. Maar sinds een week moeten we fysiek afstand houden. Ai… Bij DUO werken we nu bijna allemaal verplicht thuis en dat betekent dat alles digitaal gaat. Maandag zat ik bij de pakken neer, dinsdag vroeg ik op LinkedIn hoe anderen dat deden en woensdag kreeg ik nieuwe energie want er stroomden veel ideeën binnen. In dit blog een voorzet hoe we het UX-research vak op afstand, maar niet afstandelijk, kunnen doen.

Wil je direct naar het overzicht met alle ideeën over onderzoek op afstand? In dit openbare Google Doc vind je ze allemaal. Vul de lijst aan met je eigen ideeën en best practices.

Tools

De meeste tips die ik kreeg gingen over tools. Mijn collega Ruth merkte op via Slack: ‘ik kan door de tools de research bijna niet zien.” Daar moest ik erg om grinniken, want ik vond het heel herkenbaar. We duiken snel op tools, maar veel interessanter is hoe die tools werken of niet werken.

Ilse Blom van Funda reageerde op LinkedIn dat ze daarom eerst een grondige dry-run deed: “zo kwamen we er bijvoorbeeld tijdig achter dat via de web-app van Teams je niet tegelijk een scherm (met prototype) en camerabeeld kan delen en we de respondent vooraf moeten vragen de applicatie te installeren. En dat diegene die de sessie opneemt geen notities kan typen omdat dat de opname van de sessie verstoort. Diegene moet dus old-school pen en papier paraat hebben :). Kleine dingen, maar als je deze van te voren uitvindt, ben ik ervan overtuigd dat het een stuk soepeler verloopt. Nu alleen nog hopen dat Teams de verbinding een beetje stabiel kan krijgen…”

Heel goed, Suus! Afstand houden 🙂

Voordat we verplicht remote moesten werken was ik geen fan van remote onderzoek doen. Ik schreef eerder deze blog over een experiment met mobiel testen op afstand dat helemaal misging. Ik kon de mensen niet zelf aankijken, lichaamstaal vervalt en er was gedoe met dingen installeren (niet heel inclusief). Maar, eerlijk gezegd, heb ik me nog niet eerder heel goed verdiept in remote onderzoek doen. Tot nu. Nu moet ik wel.

Voorbij usability onderzoek

Voor usability onderzoek is ontzettend veel te vinden. Ik schreef eerder op dit blog al over de opzet die we bij DUO gebruiken en die relatief eenvoudig op afstand uit te voeren is. De basis die we gebruiken is OBS, een recording en streaming tool die gamers ook veel gebruiken. Collega’s kunnen op afstand meekijken.

We doen bij DUO ook ander type onderzoek. Hoe je dat op afstand kunt opzetten en uitvoeren, vind ik een grotere uitdaging. Bijvoorbeeld een focusgroep, diepte-interview en generatief onderzoek. Of hoe je workshops organiseert met je team, teams coacht en bevindingen uit onderzoek overdraagt in je organisatie. Hoe vertaal je dat allemaal naar ‘remote’? Zouden we misschien zelfs een digitale meet-up kunnen organiseren bij DUO?

De komende tijd ga ik wat nieuwe dingen uitproberen. Bovenaan mijn lijst staan creatief samenwerken met Miro, meet-ups en demo’s organiseren met Hopin en al bekende onderzoekstools inzetten om een gesprek te faciliteren. Bijvoorbeeld in plaats van een fysieke discussie in een zaaltje een digitale card sort naar iedereen sturen en na afloop via Miro de resultaten delen en digitaal bespreken. Hoe dit in de praktijk gaat werken, kom ik vast nog op terug.

Rol van de researcher

Door zelf als onderzoeker niet meer fysiek aanwezig te zijn, kunnen we ook reflecteren op onze rol. In eerste instantie was ik dus nooit zo’n fan van onderzoek op afstand omdat ik dacht dat het minder persoonlijk was. Maar een collega van mij, Ruth, bewees het tegendeel. Zij heeft (toevallig!) net een onderzoek afgerond met respondenten uit Caribisch Nederland. Via Experience Fellow stuurden respondenten dagboekberichten naar haar. Via Skype interviewde ze hen. Ruth werd lid van Facebookgroepen om gesprekken te kunnen volgen en het lokale nieuws bij te houden. Dat deed ze ruim een maand en het leverde persoonlijke en authentieke inzichten op. In alle verhalen kwam ze zelf bijna niet voor, de participant des te meer.

Uit The Convivial Toolbox

In The Convivial Toolbox staat een prachtige mapping van verschillende types onderzoek. Generatieve methodes staan aan de kant van participerend onderzoek: de respondent is mede-expert in plaats van ‘slechts’ gebruiker. Nu wij als onderzoekers op afstand moeten blijven vraagt dat van ons meer vertrouwen in de respondent om ons te helpen leren. Een flinke stap naar het rechterdeel van dit spectrum. In plaats van dat ik als onderzoeker kan observeren, moet ik afgaan op wat iemand met me wilt delen en als foto bijvoorbeeld instuurt. We worden gelijkwaardiger en daarmee is het onderzoek misschien juist authentieker.

Een jaar geleden interviewde ik een student die net klaar was met haar studie en begon aan het terugbetalen van haar studieschuld. We spraken af via Facetime. Ze zat in haar studentenkamer met een kop thee op haar bed. In het echt zou ik haar daar natuurlijk nooit gesproken hebben. Ongemakkelijk. Maar nu keek ik zo haar leven in. Ruth kreeg prachtige berichten via Experience Fellow. Respondenten schreven hun zorgen van zich af via de app. Ze reageerden niet op de onderzoeker, maar op het thema wat op dat moment centraal stond in hun leven terwijl ze thuis in hun eigen omgeving waren.

Misschien is remote research wel iets heel goeds voor ons vak. Het vraagt vertrouwen van ons als onderzoekers en meer gelijkwaardigheid tussen respondent en onderzoeker. Ik ben benieuwd wat dat met ons gaat doen.

Hoe ga jij op afstand onderzoeken?

De komende tijd moeten we even schakelen. Mentaal is dat best een ding, dat mag er zijn, en het vraagt creativiteit en inventiviteit om die stap te maken. Ik ben benieuwd naar jullie aanpak en ideeën. Vul ze aan in de openbare Google doc zodat we een mooie lijst krijgen en van elkaar leren. Zet er ook je ervaringen bij.

Categories
Geen onderdeel van een categorie Hoe doe je onderzoek?

UX coaching

Het begon met de empathiethermometer bij het team van Hessel, als proef om te kijken hoe we ontwikkelteams kunnen helpen om zelf verantwoordelijk te zijn voor de ervaring van de gebruiker, de user experience (UX). Dat leidde tot meer workshops, enthousiaste teamleden, ritjes naar scholen en meer teams die zich opgaven voor UX coaching.

De afgelopen maanden hebben we veel geëxperimenteerd. Wat werkt wel, en wat niet? Voor ontwikkelteams is UX coaching een manier om betere gebruiksvriendelijke diensten en producten te maken; voor ons, het UX-team, is het een onderzoek naar de veranderende rol van UX bij de overheid en in grote organisaties. In dit blog een update.

Ontwerpend leren

UX coaching zetten we op door design research te doen. Door te ontwerpen en uit te proberen, samen met participanten, komen we steeds een stap verder. In onderstaand schema zijn de 6 onderdelen van dit ontwerpend experimenteren schematisch weergegeven. Vorige week deden Roos en Suus (2 collega’s die het meest met de experimenten bezig zijn op dit moment), en ik een stap terug om al onze experimenten tot nu toe op een rij te zetten, te reflecteren en onze strategie bij te sturen.

6 onderdelen van design research

De ontwerpvraag of het ontwerpdoel: ‘hoe kunnen we teams de tools, kennis en hulp geven om diensten te maken die goed zijn voor mensen?’

We begonnen met het opschrijven op post-its van alle activiteiten die we het afgelopen jaar hadden gedaan om dat doel te bereiken. Dat waren bijvoorbeeld een workshop prototypen, een teamsessie over ‘ken je klant’, een workshop ‘verbeter je product met data’, een canvas dat teams helpt om de klantreis te maken samen met andere teams, de UX-boekenkast die we aan het opbouwen zijn, dat we onderzoek nu zoveel mogelijk in Sticktail bewaren en de eerste UX-meet-up, om maar even wat te noemen :).

We ordenden de post-its eerst naar onderwerp, maar dat vertelde ons niet veel. Ik dacht aan de workshop Beeldsprinten, en stelde voor dat we verschillende sorteringen gingen uitproberen. We eindigden met 2 schalen van onze type participanten en mapten daar alle experimenten op. Dit bord maakte Suus later digitaal en bewerkbaar zodat we nieuwe experimenten er bij kunnen plotten en het kan groeien.

Participanten: van het individu, naar je team, teams die in dezelfde klantreis ‘zitten’, alle teams bij DUO en voorbij de DUO-grenzen. Participanten kunnen ook in verschillende fases zitten: weten, willen, kunnen en doen.

Dit gaf veel overzicht. We zagen dat we weinig experimenten deden om participanten te overtuigen om te willen. Dat hoefde ook niet, want teams melden zichzelf aan bij ons. Willen ontstaat geleidelijk en organisch. Het enthousiasme van het ene team steekt het andere team aan om zich aan te melden.

We merkten ook dat we veel op de 3 middelste niveau’s werken. We plaatsen het individuele niveau er wel bij, omdat het vaak begint met 1 teamlid dat enthousiast is en het team meeneemt daarin. Het is belangrijk om te investeren in mensen zelf en niet alleen in teams. We doen ook nog niet zoveel voorbij de DUO-grenzen. Dat is niet erg, want we werken bij en voor DUO, maar het is wel goed om te kijken of we de activiteiten die voor heel DUO werken met een kleine stap ook breder kunnen inzetten en delen. Meestal is dat vooral een kwestie of het open mag of niet.

De rol van de UX coach

Roos heeft de afgelopen maanden in een team gezeten als UX coach, waarbij Suus teams van buitenaf heeft geholpen. Van de inzichten die we uit die verschillende aanpak leerden, maakte Roos, samen met collega Lisa, onderstaande tekening. De belangrijkste conclusie: de UX coach is verbonden aan het team, maar moet niet deel zijn van het team.

UX coach is ook voor ux’ers een andere rol. Tot nu toe waren we gewend om teams te helpen door het werk zelf te doen, nu gaan we teams helpen zodat ze (een deel van) het werk zelf kunnen doen. Waar ligt precies de grens? Wanneer ben je interactie ontwerper bij een team, en wanneer interactie coach? Of onderzoeker die zelf het onderzoek doet, of onderzoekscoach?

En hoe verhouden de verschillende UX-disciplines zich ten opzichte van elkaar. Sommige workshops kunnen door meerdere disciplines gegeven worden en we zien disciplines met elkaar vergroeien. Het ontwerpproces wordt daardoor vloeiender. Dat betekent ook iets voor onze eigen ontwikkeling. Daarom stuurde ik een mail naar alle 25+ mensen van het UX-team.

Collega, denk je mee over onze veranderende rol?

Tot nu toe heb ik al 12 mailtjes terug met ‘ik ben erbij’. In maart/ april plannen Suus, Roos en ik het vervolg om samen na te denken over de rol van UX coach. Wanneer we die duidelijk(er) hebben, kunnen we onze experimenten beter opzetten en inplannen, en kan het door het hele UX-team opgepakt worden.

Ben jij, of ken je andere organisaties die ook bezig zijn met de veranderende rol en het opschalen van UX? Ik ben heel benieuwd naar ervaringen en tips. Let me know.