Quality Assurance Engineer

Doel van het project

Het project De Virtuele Assistent schaalt een bewezen prototype uit Montferland (~30.000 gesprekken, 10-15% reductie telefonisch contact, livechat vervangen, 24/7 bereikbaarheid, ~80% inwonerstevredenheid) naar een universeel open-source bouwstenen-framework. Met dit framework kunnen organisaties kant-en-klare modules (orchestration, RAG, guardrails, CMS, evaluation) combineren om eigen AI-assistenten, bots of agents te bouwen. Technologie: Azure OpenAI (EU/AVG-compliant), RAG (Qdrant vectorDB), orchestration framework, guardrails Team: 6 FTE - AI Engineer (36u), Full-stack Developer (36u), Infrastructure Engineer (8u), PO/SM (24u), Conversation Designer (extern), Community Management (36u) Fase: Van werkend prototype naar productie-ready framework

Jouw rol

De QA Engineer valideert de veiligheid, kwaliteit en compliance van een open-source bouwstenen-framework voor (semi)publiek gebruik. Het framework bestaat uit herbruikbare modules die organisaties kunnen combineren om verschillende assistenten te maken. De rol focust op risk-based testing van AI-gedrag (guardrails, hallucination detection, PII leakage), begeleiding van pilotorganisaties bij testen, en het interpreteren en rapporteren van testresultaten voor PO en development team. Focus: 8 uur/week vraagt zeer zelfstandig werken met laser focus op highest risk testing (security, compliance, core functionality). Testing is primair handmatig (edge cases zoeken, adversarial prompts), met ruimte voor test automation waar efficient.

Werkzaamheden

• 50% AI Quality Testing (~4u/week)
  • Guardrails validatie, hallucination detection, evaluation framework, knowledge base correctheid
• 25% Functional & Integration Testing (~2u/week)
  • End-to-end flows, regression testing, API/integration validatie
• 15% Security & Compliance Testing (~1u/week)
  • DPIA requirements, security checks, PII leakage preventie
• 10% Pilot Support & Rapportage (~1u/week)
  • Pilotorganisaties begeleiden, bug management, metrics tracking

• Een aantoonbare opleiding op minimaal hbo bachelor niveau;
• Aantoonbare werkervaring met AI en/of LLM systemen (benoem duidelijk in cv)
• Een maximum uurtarief van 100,- exclusief btw, inclusief reiskosten woon-werk verkeer, werk-werkverkeer, parkeerkosten en de externe administratieve broker fee;
• Minimaal 1 jaar aantoonbare werkervaring bij een overheidsinstelling;
• Aantoonbare werkervaring met projecten op het gebied van AI;
• Een aantoonbare afgeronde technische opleiding op minimaal hbo bachelor niveau;
• Minimaal 2 jaar aantoonbare werkervaring met AI/LLM systemen (benoem duidelijk in cv);
• Minimaal 2 jaar aantoonbare werkervaring met projecten op het gebied van AI.

Competenties

• Probleemoplossend vermogen
• Analytisch denken
• Technische kennis
• Projectmanagement
• Kwaliteitsbewustzijn

Organisatie Montferland is een gemeente in het oosten van de provincie Gelderland. Met een oppervlakte van ca. 110 km2 en ruim 36.000 inwoners heeft Montferland een schakelfunctie tussen de regio Achterhoek en de Stadsregio Arnhem-Nijmegen. De gemeente bestaat uit 12 kernen: Azewijn, Beek, Braamt, Didam, 's-Heerenberg, Kilder, Lengel, Loerbeek, Loil, Nieuw-Dijk, Stokkum en Zeddam. Het gemeentebestuur is gevestigd in Didam. Team: 6 FTE - AI Engineer (36u), Full-stack Developer (36u), Infrastructure Engineer (8u), PO/SM (24u), Conversation Designer (extern), Community Management (36u)

Beoordeling

Stap 1: Beoordeling cvs op minimumeisen
De externe administratieve broker beoordeelt de cvs op de minimumeisen in het bovengenoemde profiel. Kandidaten die voldoen aan de minimumeisen in het bovengenoemde profiel worden geselecteerd voor stap 2 in de beoordeling. De kandidaten die niet voldoen worden niet verder beoordeeld.

Stap 2: Selectie 10 cvs die aan de organisatie worden voorgelegd
De externe administratieve broker beoordeelt de cvs van de kandidaten die voldoen aan de minimumeisen in het bovengenoemde profiel in onderlinge vergelijking op de bovengenoemde gunningscriteria. De 10 kandidaten die het beste scoren op bovengenoemde criteria worden geselecteerd voor stap 3 in de beoordeling. Bij een gelijke score is het uurtarief doorslaggevend. De overige kandidaten worden niet voorgelegd aan de opdrachtgever voor verdere beoordeling.

Stap 3: Uitnodiging voor een selectiegesprek
De opdrachtgever beoordeelt de cvs van de kandidaten die door de externe administratieve broker zijn geselecteerd in onderlinge vergelijking op de volgende criteria. Relevante werkervaring op soortgelijke opdrachten. Relevante werkervaring bij soortgelijke organisaties. De kandidaten die na deze beoordeling het beste scoren op de beoordeelde gunningscriteria worden uitgenodigd voor een selectiegesprek (stap 4 in de beoordeling). De beste kandidaten worden uitgenodigd voor een gesprek. De overige kandidaten worden niet uitgenodigd voor een gesprek.

Stap 4: Selectiegesprek
In het selectiegesprek wordt door de opdrachtgever nader getoetst in hoeverre de betreffende kandidaten voldoen aan het bovengenoemde profiel (met name wordt getoetst op de competenties). Het selectiegesprek wordt gevoerd met minimaal twee vertegenwoordigers van de organisatie. De kandidaten dienen op elke competentie minimaal een voldoende te scoren. Indien geen van de geselecteerde kandidaten op alle competenties minimaal een voldoende scoort zal stap drie van de beoordeling worden herhaald. De opdracht wordt gegund aan de kandidaat die naar het oordeel van de organisatie het beste voldoet aan het bovengenoemde profiel. Alle overige kandidaten worden geinformeerd dat de opdracht niet aan hen wordt gegund. Er wordt een opschortende termijn gehanteerd ter behandeling van eventuele bezwaren.

De gesprekken bij de opdrachtgever zijn gepland op woensdag 3 december 2025 van 12:00 uur tot 17:30 uur. De kandidaten die hiervoor uitgenodigd zijn, ontvangen uiterlijk vrijdag 28 november 2025 bericht. Overige kandidaten ontvangen na de gesprekken bericht over de voortgang van deze inhuuropdracht.

CV-eisen

Maximaal 5 paginas, opgesteld in het Nederlands.

Overige informatie

De opdrachtgever zal om een Verklaring Omtrent het Gedrag (VOG) vragen. Deze mag niet ouder zijn dan zes (6) maanden en moeten dezelfde screeningsprofielen bevatten als gevraagd. De VOG dient voor de startdatum in het bezit te zijn van de gemeente Montferland. Het niet kunnen overleggen van een geldige VOG is een ontbindende voorwaarde. Indien opdrachtnemer personeel ter beschikking stelt, staat opdrachtnemer in het handelsregister geregistreerd als bedrijf dat personeel ter beschikking stelt (conform Waadi).

De vragen en bijbehorende antwoorden worden op dinsdag 25 november 2025 gepubliceerd op onze website.