Deze blog bestaat vijf jaar! In 2017 begon ik met bloggen over mijn werk als onderzoeker bij DUO. Eerst heel basic, bijvoorbeeld over een test die ik deed of een bezoekje aan een ander bedrijf (in mijn eerste blog schreef ik over een test bij Blendle op kantoor haha).
De ene blog leidde tot de ander. Van onderzoeksmethoden toepassen, experimenten om gebruikers te betrekken (ook de mislukkingen!) tot aan de strategische beslissingen welke rol onderzoek hoort de spelen in de organisatie.
Een feestslinger van blogs
Naast een enorme stroom aan leuke blogjes, bouwden we vooral aan een onderzoeksstrategie voor DUO, geïnspireerd door het ResearchOps framework. Onze strategie is continu in beweging, we werken er elke dag mee.
Deze research strategie visualiseerde ik deze week in Miro. Bekijk het bord direct en struin zelf door onze strategie en ontwikkeling.
The why, what, how
Op dit bord zijn 3 cirkels, dat zijn natuurlijk die cirkels van Simon Sinek. Elke activiteit kun je herleiden naar het waarom: DUO maakt digitale diensten die goed zijn voor mensen.
Dat lukt als alle medewerkers in de estafette van wet naar loket bij DUO betrokken zijn en inzicht hebben in de ervaring van de burger of zakelijke gebruiker.
In deze visuele strategie vind je de volgende onderwerpen die ons helpen ons doel te bereiken:
de rol van onderzoekers en een onderzoekscultuur in je organisatie
hoe je onderzoek goed, veilig en schaalbaar organiseert
de kwaliteit, vernieuwing en standaardisering van onderzoeksmethoden
je onderzoeksinzichten vastleggen en delen met impact
Waar het handig is, heb ik direct ook wat uitleg bijgedaan. Bijvoorbeeld bij het stuk over onderzoek delen: hoe deel je het dan? En waarom zo?
Of bij het stuk over onderzoeksmethoden. Van de verschillende soorten onderzoek maakte ik ook direct een overzicht waarvoor een methode dient.
Laatste dan. Vorig jaar begonnen we met teams coachen in mensgericht ontwerpen. Dit betekende dat we groter moesten denken. Hoe kunnen we heel DUO helpen om te willen, weten, kunnen en doen? Hop, direct ook onze coachingsstrategie erbij.
Het gaat lukken!
Dit grote plaatje is de reden dat ik blog. Ik vind het belangrijk dat er bij de overheid iets nieuws ontstaat, namelijk dat we de burger belangrijker gaan vinden dan onszelf.
Toen ik begon met bloggen, wilde ik vooral zelf leren. Ik was nieuw bij de overheid en ik had altijd geblogd over wat me bezig hield. Wat ik leerde als onderzoeker, schreef ik op. In het begin had ik 3 bezoekers per maand. Prima, laat mij maar lekker klooien in mijn hoekje op het internet.
Nu zijn het er een stuk meer dan drie. En ik leer nog steeds zoveel. Ik maak jullie enthousiast, en jullie mij. Samen leren we hoe het kan: een overheid die luistert, die echt wel wil en het beter maakt voor de burger. Het gaat lukken, het is al bezig!
De ontwikkeling bij DUO staat zo op een rij, of nou ja, in een rondje dan. Het meest bijzondere van de afgelopen 5 jaar? Dat onderzoek mijn discipline lang en breed oversteeg. Veel collega’s bij DUO raakten enthousiast over de relatie die we met burgers hebben. Daarom is het goed dat we als onderzoeksteam de vraag voor klussen allang niet meer aankunnen. Laten we het allemaal maar samen doen. Onderzoek doen, luisteren naar de burger, daar moet iedereen van zijn.
Bedankt voor 5 jaar lezen (vooral die 3 vanaf het begin). Hartjes.
Bekijk het bord ‘De structuur van Onderzoek’ en klik er ook overzichtelijk door naar alle blogs per thema.
Een overheid die zichzelf laat zien… iedereen die mij kent, weet dat dat de droom is. Maar het is ook superspannend, nu het echt aan het gebeuren is.
Drie weken geleden werd ik gevraagd om het team van het ministerie van Volksgezondheid dat de Covid-19-notificatie-app maakt te versterken als onderzoeker. En dit gaan we open doen: het eindresultaat en het proces.
Over 2 weken studeer ik af met De begripvolle ambtenaar, een foto-onderzoek naar de rol van begrip bij de digitale overheid. Een van mijn belangrijkste conclusies (spoiler) is ‘Maak de overheid open en wees eerlijk over hoe je je keuzes maakt. We moeten onszelf laten zien als makers van de digitale overheid en samen met burgers ontwerpen. De afgelopen jaren deed ik steeds mijn best om open te werken, en van volledige openheid kon ik eigenlijk alleen maar dromen. In dit blog vertel ik hoe tof ik dat vind (heel!), wat de meerwaarde hiervan is, maar ook welke nieuwe vragen dit oplevert.
Over de notificatie-app
Wie het nieuws heeft gevolgd, weet er vast al wat van. De overheid bekijkt hoe digitale middelen gebruikt kunnen worden bij de bestrijding van het coronavirus. Bijvoorbeeld apps die het werk van de GGD kunnen aanvullen. In eerste instantie werken we aan een notificatie-app die je een bericht kan geven wanneer je mogelijk besmet bent. Hierdoor kun je je snel laten testen en krijgt het virus minder tijd om zich te verspreiden. Het ministerie van Volksgezondheid heeft hiervoor een eigen team samengesteld van experts binnen en buiten de overheid om hieraan te werken.
Met direct een grote disclaimer: het is allemaal nog niet af. Er mist nog van alles. Sommige dingen staan nog op onze to-do’s. En de komende tijd gaan we dus vaker delen. En kan het zijn dat wat we nu gedeeld hebben, verandert. Omdat we nieuwe inzichten hebben, of omdat iets toch niet werkt zoals we het bedacht hebben.
Wil je meepraten en meemaken, kom dan naar de Code for NL-slack. Hier delen we vragen en dilemma’s en sparren we openbaar over wat we maken. Er doen al meer dan 700 ontwerpers en programmeurs mee.
De 1e versie van het design, de architectuur en een deel van de broncode van de app die het GGD bron- en contactonderzoek gaat ondersteunen staan online. In juni testen we de app.
Door dit zo openbaar te doen, kunnen anderen zien wat we maken en waar we onze keuzes op baseren. Dit soort gesprekken deed ik eerder met mijn collega’s bij DUO door hen te fotograferen als begripvolle ambtenaar. Hun verhalen deelde ik hier en het gaf een unieke inkijk in hoe we bij DUO de overheidscomputer maken. Nu staat onder andere mijn eigen werk op Github, dat voelt ook als een soort portret. Je kunt zien waar ontwerpkeuzes op gebaseerd zijn en je kunt kritische vragen en aanvullingen erbij plaatsen. Je kunt mij bevragen op hoe ik mijn werk heb gedaan.
Dat is best wel spannend.
Maar ook heel tof. Het levert ontzettend veel meerwaarde op. In de eerste week dat ik begon, deelde ik bijvoorbeeld een overzicht van het proces van de GGD van testen tot aan bron- en contactonderzoek. Ik vroeg feedback en of anderen onderzoeksvragen erbij wilde plaatsen. Dat gebeurde zeker.
Onderzoeksvragen die openbaar door anderen worden geformuleerd
In de afgelopen dagen is spontaan een deel van onze documentatie vertaald naar het Engels en het Duits. Worden er vanuit de community prototypes voorgesteld door externe ontwerpers die met onze stijlelementen aan de slag gegaan zijn. Er wordt druk gespard over vragen waar we niet 1-2-3 het antwoord op hebben. We krijgen zulke goede feedback en anderen helpen ons met oplossingen voor problemen waar wij nog uit waren. Dit is samen ontwerpen. Dit is de droom.
En ook de comments op de designs stroomden binnen
Open zijn is niet het doel, maar de tool
Nu we zo open mogen werken, roept het ook nieuwe vragen op die ik eerder nooit had. Hoe je echt in de praktijk zo open werkt en daarmee een goed product aflevert, moeten we ontdekken. Bijvoorbeeld:
Open zijn is niet alles of niets. Hoe deel je dingen open? Waar ligt de grens? Bijvoorbeeld bij onderzoeksresultaten. Die kunnen natuurlijk niet herleidbaar zijn naar personen en je wilt anderen ook geen overload aan info geven. Maar je wilt wel dat anderen dezelfde info hebben als wij, zodat hun voorstellen ook goed onderbouwd zijn.
‘Gooi je tips op ons’ is niet constructief. We moeten gerichte vragen stellen en anderen de middelen geven om ons te helpen antwoorden te vinden. Als je naar Jelle, onze designlead, een berichtje stuurt, krijg je bijvoorbeeld toegang in onze ontwerpdocumenten. Wil je meehelpen in het testen van de ontwerpen, dan moeten we onze testscripts vrijgeven.
Hoe gaat deze open manier van werken samen met het politieke proces? Is het oké als dingen eerder op Github staan dan in een notie voor de Tweede Kamer? Of dat de minister niet altijd up-to-date is omdat informatie vrijelijk en in detail uitgewisseld wordt via Github en Slack (en ja, daar zitten ook tech-journalisten in). Dit zijn nieuwe vragen voor de overheid.
Als ambtenaar kan ik me niet meer onzichtbaar maken, mijn naam staat op Github en ik praat zelf ook mee in het gesprek. Het is daarmee heel concreet wat mijn aandeel is in dit project en waar je me dus op kunt aanspreken. Wat betekent dit voor het zijn van ambtenaar?
Hoe maken we het ontwerpproces echt inclusief? Github en Slack hebben nogal een drempel, maar houden daarentegen ook trollen buiten de deur. Is het genoeg om regelmatig met een diverse groep te testen en met belangenvertegenwoordigers te sparren en hun advies te vragen. Is openheid genoeg of kun je dan alsnog met oogkleppen op werken als de groep om je heen vooral je eigen netwerk is?
Er komen vast meer vragen de komende tijd. Maar voor nu nog even een paar quotes hoe bijzonder het is dus we zo open werken. Dat valt anderen namelijk ook op en dat mag best even goed gevierd worden!
🇳🇱🔥 Het is altijd spannend om in een vroeg stadium designs & code te delen, maar voor de overheid is dit echt uniek. De ambtenaren waarmee we werken: "Hier droom ik al mijn hele carrière van."
Echt bijzonder hoe het ontwikkelproces van de corona-app is gekanteld: van overhaast en onzorgvuldig, waar inspraak aan de nekharen werd bijgesleept, naar zó open dat je tot op knopjesniveau feedback mag geven. https://t.co/wLcojRTCUZ
2 jaar geleden leek open source in de overheid onmogelijk te worden door een wetswijziging. Dus we publiceerden met @CodeForNL en anderen een open brief. Nu tweet minister @hugodejonge een link naar open source broncode op Github. We came a long way! 💪🙂 https://t.co/0bPclYv5Orhttps://t.co/nqgHeeK35Z
Meerdere begripvolle ambtenaren wezen me erop. Om echt begripvol te kunnen zijn als digitale overheid, moeten we de ander, in het geval van DUO de student, goed kennen. Dat is een inkopper. Alleen het lukt vaak niet, omdat alles wat we weten over de klant versnipperd is over de hele organisatie. Iedere afdeling probeert te luisteren en probeert samen te werken, maar in de waan van de dag zijn er allemaal hordes in de estafette die we samen lopen.
Ik sprak hier bijvoorbeeld met Nico over. Hij heeft toegang tot data en inzicht over al het contact tussen de helpdesk van DUO en studenten. Ik, als UX onderzoeker bezoek scholen en spreek studenten over hun achterliggende motieven. Aan zijn ‘wat-gebeurt-er’, kan ik het ‘waarom-gebeurt-dit’ toevoegen. In ons gesprek droomden we over hoe het zou zijn als we dit vaker deden. Ik schreef:
Hoe kunnen we het inzicht in de klant, en alle onderzoeken die overal gedaan worden, centraliseren in onze organisatie? Ik zet deze vraag op mijn to-do-list.
In deze blog vertel ik over de eerste pogingen die we, iedereen die onderzoekt bij DUO, tot nu toe gedaan hebben om daar te komen. En wat daaruit kwam.
De Research Ops community
Een jaar geleden ontdekte ik de Research Ops community. Dit is een slack-groep met allerlei researchers uit kleine en grote organisaties. Het onderwerp van gesprek: hoe kun je research organiseren in je organisatie. In een klein team is die vraag niet zo ingewikkeld, maar hoe groter het team, de afdeling of het bedrijf, hoe complexer.
Ik zit zelf bij DUO in een team van 25 collega’s. Wij werken samen met tientallen andere teams die of zelf onderzoeken of gebruik maken van onderzoek. Bij DUO werken bijna 3000 mensen. DUO werkt zelf ook in een keten met andere organisaties die ook weer samenwerken, informatie uitwisselen en beslissingen maken. In de onderzoeksstrategie voor 2019 schreef ik eerder over deze uitdaging.
Aansluiten bij de Research Ops community voelde als een warm bad. Ik sprak andere researchers die dezelfde vragen hadden als ik, en sommige hadden, mazzel, zelfs antwoorden. Ik skypte bijvoorbeeld met Brigette Metzler, Lead Research Ops bij de Australische overheid. Met haar dacht ik na over een DUO-vertaling van het internationale Research Ops framework. Ze stuurde mij een aantal workshoptemplates door die ze in haar organisatie had gedaan. Al dit materiaal kun je vinden op de Research Ops medium.
Ik trommelde mijn collega’s op, Roos en Nico, en nog een stuk of tien van andere afdelingen. Wie houdt zich nog meer bezig met onderzoek doen, vroegen we ons af. Roos organiseerde een aantal van de Research Ops workshops.
Meer uitwisseling
We ontdekten van elkaar dat een aantal antwoorden op vragen er al waren. We maakten bijvoorbeeld een overzicht van alle tools om onderzoek te doen en wisselden die met elkaar uit. Sommigen hadden ineens een twee keer zo grote toolkit. Alle opbrengsten verwerkten we in deze overzichtsspin.
In het midden: onderzoek bij DUO. Niet per se UX onderzoek, of data-onderzoek, of klanttevredenheidsonderzoek (ja, ja, dit zijn 3 afdelingen). Maar, gewoon onderzoek. Inclusief, iedereen hoort erbij en niet 1 type onderzoek is belangrijker dan het andere. De grijze bollen zijn de redenen waarom we deze plaat maken. Dit betekent niet dat we één afdeling moeten worden, maar dat we vanaf onze plek samenwerken en een gecentraliseerde aanpak hebben.
De paarse, blauwe en gele bollen gaan over thema’s die steeds concreter worden. Sommigen zijn nog vragend, anderen zijn al duidelijker en ingevuld. Het komende jaar hopen we het steeds concreter te maken. Per gebied kijken we hoe je dit centraal kunt opzetten, de samenwerking kunt organiseren en wie, of welke afdeling die kar het beste kan trekken.
Nieuwe rollen
Een van de gebieden waar we in 2019 veel aandacht aan hebben gegeven is de linkerbovenhoek: inzichtmanagement. Hoe kunnen alle inzichten over de klant bij elkaar komen, elkaar versterken en zo dat iedereen er bij kan? We zijn met Sticktail gaan werken om inzichten te bevrijden uit rapporten en deelbaar te maken. We vertellen in Sticktail verhalen over de klant waardoor collega’s zich kunnen inleven en een fundament hebben voor beslissingen.
DUO’s Sticktail
In het begin deden we dat alleen als UX onderzoekers, maar na de eerste workshop vroeg iedereen of ze hun onderzoek er ook in mochten opslaan. Ja, natuurlijk! Dat leidde tot een nieuwe uitdaging: wie gaat Sticktail beheren? Het werd snel groot en daarmee ook chaotisch. Iedereen heeft een eigen schrijfstijl, de een gebruikt wel tags, de ander vergeet het en voor je het weet is het niet meer bruikbaar. We gingen samenwerken met de webredactie die de rol van ‘Research Librarian’ op zich nam. Zij zijn een ster in hoofd- en bijzaken scheiden, kritisch doorvragen naar wat je nu wilt vertellen en het helder (en kort) opschrijven van de inzichten.
Dit is een nieuwe rol. Ik kan me voorstellen dat er nog meer van dit soort nieuwe ‘ops’-rollen gaan ontstaan. We zijn bijvoorbeeld ook in gesprek met de afdeling Relatiebeheer die met veel enthousiasme hun expertise op respondenten met ons deelt. Vorige maand, op de Leading Design conferentie in Londen, hoorde ik er alles over dit soort nieuwe rollen. Ik wil me komend jaar meer gaan verdiepen in dit soort nieuwe rollen en hoe die samenwerken in je organisatie.
Mixed methods
In de weken na de workshops gebeurde er iets tofs. Als automatisch gevolg werd er meer uitgewisseld en gevraagd aan elkaar. “Hey, ik heb net een onderzoek gedaan naar x. Heb jij toevallig aanvullende documentatie?” “Ja, maar dat is wel van vorig jaar. Hm… dat zou een interessante vervolgvraag zijn.” Meer uitwisseling leidt tot het combineren van verschillende onderzoeksmethodes met elkaar. Onderzoek verdiept zich en wordt beter. Wanneer dat ook allemaal op een centrale plek gedocumenteerd wordt, is dat extra sterk. Tegenstrijdige resultaten gaan geen eigen leven meer leiden maar worden direct kritisch bevraagd op het moment van documentatie. Ons zelflerend vermogen wordt groter.
Mijn collega Ruth gaf ons vandaag een preso over context mapping die ze helemaal getekend had en ik ben in love met haar aanpak 😍😍 pic.twitter.com/Uc4oZcgw5x
Deze uitwisseling leidt ook tot meer enthousiasme. We willen meer van elkaar leren. Er werden de afgelopen maanden workshops onderling georganiseerd. Iemand die een cursus buiten de deur volgde, organiseerde de week erop een mini-editie voor wie interesse had. In februari staat een mini-editie van mijn Dear Data avontuur gepland met collega’s.
Onderzoek inclusief maken
Dit enthousiasme moet gedeeld worden met teams die gebruik maken van onderzoek. Bij DUO zijn we begonnen met UX-coaching voor ontwikkelteams. De teams die zich hiervoor hebben opgegeven (inmiddels al 5) zijn ook enthousiast om meer van onderzoek gebruik te maken. Ze stellen vragen en zijn nieuwsgierig.
Deze twee groepen moeten bij elkaar komen. De onderzoekers en de makers. In 2020 organiseren we meet-ups, gewoon in de kantine, om informatie uit te wisselen, vragen te stellen en elkaar enthousiast te maken. De eerste is eind januari. Er komen ook twee designers van Booking.com die vertellen over data driven design.
Deze blog sluit ik af met twee tips als je meer over Research Ops wilt weten. Op 16 januari is er bij Bol.com in Utrecht een researchmeet-up over hoe zij dit organiseren met als titel ‘Iedereen is een researcher’. En op UX Insight (6-8 april in Breda) staat dit jaar de derde dag helemaal in het teken van Research Ops. Ik ben bij beide van de partij, misschien zie ik je daar?
Ik ben op zoek naar wat de toegevoegde waarde van design is. In mijn eigen werk, bij de overheid; en wat is dat ‘design’ dan precies? Wat is het imago van design op het kantoor waar ik werk? En welke rol vind ik dat design eigenlijk zou moeten hebben in een overheidscontext? In dit blog verken ik deze vragen aan de hand van een aantal externe bronnen.
Afgelopen week gaf ik samen met de researchers van Aegon een praatje op een UX meet-up. Onderwerp: hoe organiseer je usability testen in een agile werk-omgeving. Dat kan namelijk best lastig zijn. In dit blog wat ik vertelde en hoe we het bij DUO aanpakken.
Een relatie met je gebruikers opbouwen, boe, dat klinkt als uit een marketingblad. Het is anders wanneer je mensen uit je wijk te eten vraagt, uit je comfort zone stapt en die gebruikers in real life gaat opzoeken. Voor mij was dit de afgelopen maanden nieuw en in dit blog vertel ik waarom je als ux’er je buren gewoon moet leren kennen.
Om de beste ervaringen te bieden, gebruiken wij technologieën zoals cookies om informatie over je apparaat op te slaan en/of te raadplegen. Door in te stemmen met deze technologieën kunnen wij gegevens zoals surfgedrag of unieke ID's op deze site verwerken. Als je geen toestemming geeft of uw toestemming intrekt, kan dit een nadelige invloed hebben op bepaalde functies en mogelijkheden.
Functioneel
Altijd actief
De technische opslag of toegang is strikt noodzakelijk voor het legitieme doel het gebruik mogelijk te maken van een specifieke dienst waarom de abonnee of gebruiker uitdrukkelijk heeft gevraagd, of met als enig doel de uitvoering van de transmissie van een communicatie over een elektronisch communicatienetwerk.
Voorkeuren
De technische opslag of toegang is noodzakelijk voor het legitieme doel voorkeuren op te slaan die niet door de abonnee of gebruiker zijn aangevraagd.
Statistieken
De technische opslag of toegang die uitsluitend voor statistische doeleinden wordt gebruikt.De technische opslag of toegang die uitsluitend wordt gebruikt voor anonieme statistische doeleinden. Zonder dagvaarding, vrijwillige naleving door uw Internet Service Provider, of aanvullende gegevens van een derde partij, kan informatie die alleen voor dit doel wordt opgeslagen of opgehaald gewoonlijk niet worden gebruikt om je te identificeren.
Marketing
De technische opslag of toegang is nodig om gebruikersprofielen op te stellen voor het verzenden van reclame, of om de gebruiker op een website of over verschillende websites te volgen voor soortgelijke marketingdoeleinden.
