Na onze vorige aflevering over experimenteren kregen we zoveel vragen dat we besloten: hier moet een verdiepingsslag op komen! In deze special nemen Jeroen en Marijn je mee in de concrete stappen van de Build-Measure-Learn-Loop. Met speciale gast Raisa (die jullie kennen van de aflevering over het innovatieprogramma) leggen ze aan de hand van een praktijkvoorbeeld (de parkeergarage-case) precies uit hoe je experimenten opzet, uitvoert en analyseert.

In deze aflevering leer je:

 * Hoe je de Build-Measure-Learn-Loop toepast in de praktijk
 * Het verschil tussen Design Thinking en Lean Startup experimenten
 * Hoe je aannames identificeert en test
 * Wanneer je klaar bent met experimenteren
 * Hoe je voorkomt dat je experiment in de la verdwijnt

De drie fases van experimenteren:

 * Build: Identificeer je grootste risico en ontwerp een experiment
 * Measure: Voer het experiment uit en verzamel data
 * Learn: Analyseer de resultaten en pas je aannames aan

Van kleine, afgebakende experimenten tot een Minimal Viable Product (MVP) - deze aflevering geeft je alle handvatten om morgen zelf aan de slag te gaan.

Praktisch voorbeeld:Een eigenaar van een parkeergarage wil een app bouwen. Maar na gebruikersonderzoek blijkt dat mensen liever op straat parkeren dan de garage in te rijden. Waarom? En hoe test je verschillende oplossingen zonder direct te investeren in grote technologie?

Volgende aflevering: Overdragen - de fase die volgens jullie LinkedIn-poll het moeilijkst is! Stuur je vragen in via innovatie@svb.nl

📚 Meer leren over experimenteren:

 * Fase Experimenteren: https://www.svb.nl/nl/innovatie/zelf-aan-de-slag/fase-3-experimenteren
 * Aanname Map Canvas: https://www.svb.nl/nl/innovatie/zelf-aan-de-slag/canvassen/aanname-map-canvas
 * Experiment Canvas: https://www.svb.nl/nl/innovatie/zelf-aan-de-slag/canvassen/experiment-canvas

#DeInnovatieAmbtenaar #Experimenteren #Innovation #PublicSector #LeanStartup #BuildMeasureLearn

Experimenteren Deep Dive: Van Aanname naar Bewezen Oplossing

In deze derde aflevering van onze serie over de Novum innovatiemethode duiken Jeroen en Marijn in fase 3: Experimenteren. Deze fase wordt vaak beschouwd als de belangrijkste stap in het hele innovatieproces, omdat je hier voor het eerst echt ontdekt of je op de juiste weg zit. Leer hoe je ideeën niet alleen bedenkt en uitwerkt, maar vooral hoe je test of ze daadwerkelijk het probleem oplossen dat je eerder hebt geïdentificeerd.

Marijn deelt praktische inzichten over het testen van drie kernvragen: Is je oplossing wenselijk voor de gebruiker? Is het technisch en organisatorisch mogelijk? En heeft het genoeg effect om de investering waard te zijn? Daarnaast bespreken we het gevaar van 'non-problemen' - situaties waarbij een gebruiker denkt een probleem te hebben, maar de oplossing uiteindelijk minimale waarde oplevert. Met concrete voorbeelden uit de praktijk, zoals een zoekmachine-experiment, leer je hoe je experimenten structureert en wanneer je moet kiezen tussen doorgang (persevere), herontwerp (pivot) of stoppen (kill).

Key Takeaways:✓ Waarom experimenteren de cruciale fase is in innovatieprojecten✓ De drie kernvragen: wenselijk, mogelijk, en effectvol✓ Het verschil tussen echte problemen en non-problemen✓ Hoe je experimenten structureert met duidelijke aannames en succescriteria✓ Wanneer je moet stoppen met experimenteren en door moet naar implementatie✓ Praktisch voorbeeld: A/B testing van zoekmachines bij een overheidsorganisatie✓ Tools: Experiment Canvas en Interview-analyse templates

Resources vermeld in deze aflevering:

 * Novum Innovatiemethode documentatie (www.svb.nl/innovatie)
 * Experiment Canvas template
 * Interview-analyse Excel template (verkrijgbaar via innovatie@svb.nl)
 * Viability, Feasibility, Desirability framework

📧 Contact & Samenwerking:Wil je hulp bij het structureren van jouw innovatie-experimenten? Mail naar: innovatie@svb.nl

🎙️ Over deze podcast:De Innovatie Ambtenaar is de podcast van Novum waarin we je meenemen in onze projecten en manier van werken rondom innovatie in de publieke sector.

👉 Abonneer je op De Innovatie Ambtenaar voor meer inzichten over innovatiemethodologie, gebruikersonderzoek, en digitale transformatie in de overheid.

🔗 Volgende aflevering: Fase 4 - Overdragen: Hoe zorg je ervoor dat je oplossing ook echt gebruikt gaat worden?

Timestamps:

 * 00:00 – Intro: Vrijdagmiddag brainstorm over experimenteren
 * 01:00 – Waarom experimenteren de belangrijkste fase is
 * 02:00 – De drie kernvragen: wenselijk, mogelijk, effectvol
 * 04:00 – Is het wenselijk? Testen op gebruikersbehoefte
 * 05:00 – Wanneer organisaties oplossingen niet willen (ondanks haalbaarheid)
 * 06:30 – Is het mogelijk? Technische en organisatorische haalbaarheid
 * 10:15 – Heeft het genoeg effect? De impact-vraag
 * 12:00 – Het gevaar van non-problemen
 * 15:30 – Praktijkvoorbeeld: A/B testing van zoekmachines
 * 32:00 – Experiment aanpassen: van kwantitatief naar kwalitatief
 * 34:00 – Wanneer stop je met experimenteren?
 * 36:00 – Innovatie is niet lineair: terug naar eerdere fases
 * 37:00 – Grootste tip: structureer je experiment vooraf
 * 38:00 – Pivot, persevere of kill: beslissen op basis van data
 * 39:00 – Tools: Experiment Canvas en analyse templates
 * 40:00 – Outro en preview volgende aflevering



NIM fase 3: Experimenteren - Testen of je idee echt werkt

In deze aflevering duiken Jeroen en Marijn in Fase 2 van de Novum Innovatiemethode: Begrijpen. De fase waarin je écht leert wat het probleem is en voor wie je het oplost.



🎯 In deze aflevering:

 * Hoe definieer je je doelgroep en gebruiker?
 * Wanneer moet je interviews doen en wanneer observaties?
 * Het stellen van de juiste vragen zonder je eigen aannames mee te nemen
 * Omgaan met latente problemen (problemen die gebruikers niet bewust ervaren)
 * Pivot, Kill of Persevere: wat als het antwoord 'nee' is?
 * Het verschil tussen geduld hebben en tijd verspillen
 * Hoe weet je wanneer je genoeg weet om door te gaan naar fase 3?



💡 Praktische inzichten:

✓ Vuistregel: minimaal 5 interviews, liever 10

✓ Vraag naar concrete voorbeelden uit het verleden, niet naar hypothetische situaties

✓ Verzadiging is je meetpunt: als je steeds dezelfde antwoorden hoort, kun je door

✓ Begin klein: drie vragen bij de koffieautomaat kan al genoeg zijn



📚 Aanbevolen literatuur: The Mom Test (ook in het Nederlands beschikbaar)



Vragen of feedback? Mail naar innovatie@svb.nl



De Innovatieambtenaar is een podcast van Novum (SVB) over innovatie in de publieke sector.



[00:01:00] Intro en waarom deze fase essentieel is

[00:02:00] Wie is je gebruiker? De doelgroep definiëren

[00:03:00] Latente problemen en observatietechnieken

[00:04:00] Praktijkvoorbeeld: Paradox kennissysteem

[00:06:00] Hoe voorkom je projectie van eigen aannames?

[00:09:00] Technieken voor het stellen van goede vragen

[00:11:00] Wat als het antwoord 'nee' is? Pivot, Kill, Persevere

[00:14:00] Geduld vs. tijdverspilling

[00:20:00] Mensen meedoen zonder angst

[00:25:00] Welke inzichten komen uit deze fase?

[00:27:00] Wanneer weet je dat je genoeg hebt begrepen?

[00:29:00] Grootste fouten in de begrijpfase

[00:33:00] Tips voor beginners

[00:35:00] Samenvatting: twee dingen om te onthouden

NIM Fase 2: Begrijpen - Het probleem en de gebruiker écht leren kennen

In deze aflevering van De Innovatieambtenaar behandelen Jeroen en Marijn de eerste fase van de Novum Innovatiemethode (NIM): Opstarten. Waarom is deze fase zo cruciaal voor het succes van innovatieprojecten?

Je leert over:

 * Waarom je altijd moet beginnen met het probleem, niet de oplossing
 * Hoe je rode vlaggen herkent die wijzen op ongeschikte projecten
 * Wat een goede opdrachtgever onderscheidt in de opstartfase
 * Het belang van multidisciplinaire teamsamenstelling
 * Waarom projectnamen belangrijk zijn (en welke je moet vermijden)
 * De grootste valkuilen in de opstartfase en hoe je ze voorkomt
 * Praktische tips voor het werken met canvassen vs. traditionele vergaderingen



Met praktijkvoorbeelden zoals "eenzaamheid oplossen met robots" en concrete tips voor ambtenaren die hun eerste innovatieproject willen starten.

Volgende aflevering: Fase 2 - Begrijpen.

NIM Fase 1: Opstarten - Het Fundament van Innovatiesucces

In deze aflevering van De Innovatieambtenaar duiken Jeroen Vonk en Raisa Getrouw diep in het gloednieuwe Novum Innovatieprogramma. Wat is het verschil met de bekende Novum Innovatiemethode? Wat is innoveren op schaal? Hoe werk je met meerdere innovatietrajecten tegelijkertijd? En hoe kunnen ambtenaren en organisaties hier zelf mee aan de slag?

Wat je leert in deze aflevering:

 * Het verschil tussen de Novum Innovatiemethode (NIM) en het Novum Innovatieprogramma (NIP)
 * Hoe je met 3 teams simultaan aan verschillende uitdagingen werkt
 * De praktische opzet: 4,5 maanden, 10 workshops, coaching en huiswerk
 * Waarom "trust the process" zo belangrijk is
 * Hoe eindgebruikers worden betrokken via interviews
 * De resultaten van de eerste pilot en wat er geleerd is



Tijdsinvestering: 4 uur per week per deelnemerDuur programma: 4,5 maandenTeamgrootte: 5-9 personen (multidisciplinair)



Raisa Getrouw, Innovation Designer bij Novum, deelt haar ervaringen van de eerste pilot waarin drie teams met verschillende uitdagingen aan de slag gingen. Van de eerste workshop tot de demodag - je hoort alles over deze nieuwe manier van innoveren op schaal.

Interesse in het programma?Stuur een mail naar innovatie@svb.nl

Meer informatie:svb.nl/innovatie [www.svb.nl/innovatie]

Het Novum Innovatieprogramma: Innoveren op schaal binnen de overheid

In deze aflevering vertellen we alles over project Leesplank, dat we samen met UWV en de KU Leuven hebben gedaan. Leesplank is een open source Large Language Model (LLM) voor de door de overheid, geïnspireerd door Aap, Noot en Mies. Het geeft een begrijpelijke uitleg van het project maar ook diepere technische details.

Meer informatie over de Open source LLM vind je in de volgende links.

UWV wikipedia sets:

https://huggingface.co/datasets/UWV/Leesplank_NL_wikipedia_simplifications

https://huggingface.co/datasets/UWV/veringewikkelderingen (deze is onaf)

 

Bram datasets

https://huggingface.co/datasets/BramVanroy/ultra_feedback_dutch

https://huggingface.co/datasets/BramVanroy/ultrachat_200k_dutch

https://huggingface.co/datasets/BramVanroy/orca_dpo_pairs_dutch

 

Bram verrijkte GEITje
https://huggingface.co/BramVanroy/GEITje-7B-ultra

 

Oorspronkelijke GEITje van Edwin Rijgersberg:

https://huggingface.co/Rijgersberg/GEITje-7B (waar Leesplank dus niets aan heeft gedaan)

 

Bram oude versie van vereenvoudigingsmodel, maar staat op sleep mode en is nog niet verrijkt met onze data om op alinea niveau te werken; kan nu alleen op zinsniveau:

https://huggingface.co/spaces/BramVanroy/mai-simplification-nl-2023-demo

 

Scandeval GPT 4 1106 resultaten gedaan i.s.m. UWV

https://scandeval.com/dutch-nlg/

https://scandeval.com/dutch-nlu/

en hier staan onze credits (bij special thanks): https://github.com/ScandEval/ScandEval

 

Tot slot hier de oerversie die Aap geïnspireerd heeft, die dus nog op illegale data getraind is, maar wel een aardig beeld geeft van hoe het zou kunnen:

https://huggingface.co/spaces/jbilcke-hf/ai-comic-factory

 

Meer informatie over de deelnemers:

Bram - https://www.linkedin.com/in/bramvanroy/

Michiel - https://www.linkedin.com/in/mbuisman/

Maarten - https://www.linkedin.com/in/lensfitzgerald/

Project Leesplank

Waarom dit belangrijk is en hoe we dit doen hoor je in deze aflevering. Marijn van Rossum verteld over zijn onderzoek dat hij bij Novum vanuit zijn opleiding business innovation doet. Hij deelt zijn belangrijkste lessen en hoe ook jij hier mee aan de slag kunt gaan.

Hoe verdeel je innovatie projecten in 3 types?

Willen mensen pro-actief berichten ontvangen als herinnering van de overheid? Daar gaat deze aflevering van onze Podcast de Innovatie Ambtenaar over. Het gaat over ons experiment Notify, van POC naar experiment in het echt. Je leert of en hoe eindgebruikers van de diensten van de SVB zoals mensen die AOW en/of Kinderbijslag ontvangen dit willen en wat we hebben geleerd van het gebruik van Open Source code van een andere overheid. Niels en Suzanne vertellen Jeroen hier alles over.

Kijk voor meer informatie over Notify op onze website: https://novum.nu/project/notify/

Notify: Willen mensen pro-actief berichten ontvangen als herinnering van de overheid?

We zoeken 2 innovatiecoaches die samen met het lab en de SVB het innovatieklimaat gaan verstevigen binnen de SVB. Wie we zoeken hoor je in deze leuke aflevering met 2 SVB collega's en onze eigen Jeroen en Renee. Bekijk de vacature: https://werkenbijdesvb.nl/vacature/innovatiecoach-911463/

Vacature 2 innovatiecoaches om het SVB innovatieklimaat te verstevigen

In deze aflevering staan we stil bij het afscheid van Matthijs. Hij gaat ons verlaten voor een nieuwe baan. We grijpen deze kans aan om hem vragen te stellen die zijn ingezonden. 

Afscheid Matthijs, vraag hem alles

Dit is de Innovatie Ambtenaar, de podcast van Novum, het innovatie lab van de Sociale Verzekeringsbank, toonaangevend binnen de overheid. We nemen je mee in onze projecten en thema’s. We maken de podcast op vrijdagmiddag, het gebouw is dan leeg, een mooi moment voor de podcast.

Jeroen Vonk

Shows