AI Dataplatform Engineer Databricks

Voor deze rol kunnen wij niet samenwerken met derde partijen of freelancers.

Binnen Data Platform Services zijn we op zoek naar een enthousiaste en ervaren AI Dataplatform Engineer met een sterke focus op Databricks en knowledge provisioning. In deze rol werk je mee aan de verdere ontwikkeling van ons centrale data en AI-platform, waarmee we veilige, schaalbare en herbruikbare AI-oplossingen mogelijk maken voor de organisatie. 

Het scrum team waar je in gaat werken is centraal gelegen binnen de IT organisatie en schakelt met architecten, data engineers, platform engineers, security-specialisten en business teams. Samen zorgen jullie ervoor dat AI oplossingen niet los ontstaan, maar aansluiten op centrale kaders voor security, compliance, observability, FinOps en data governance. 

Dit ga je doen als AI Dataplatform Engineer:

•    Ontwerpen, ontwikkelen en beheren van Databricks-gebaseerde oplossingen voor knowledge provisioning en semantic access. 
•    Realiseren van bouwblokken voor het beschikbaar maken van structured en unstructured data voor AI-toepassingen, waaronder RAG-oplossingen, embeddings, vector search en semantische ontsluiting. 
•    Werken aan een Databricks-first knowledge/data foundation, waarbij Unity Catalog, data lineage, toegangscontrole en auditability centraal staan. 
•    Ontwikkelen van veilige en schaalbare pipelines voor ingestie, verrijking, indexering en ontsluiting van data richting AI-agents en LLM’s. 
•    Meewerken aan het professionaliseren van high-code AI-oplossingen binnen Databricks, inclusief CI/CD, Infrastructure-as-Code, monitoring en beheer. 
•    Samenwerken met architectuur, security, data governance en platformteams om te borgen dat oplossingen voldoen aan de gestelde kaders voor security, compliance, lineage en beheerbaarheid. 
•    Meedenken over standaardpatronen voor knowledge provisioning, document cracking, metadata, toegangsrechten, lifecycle management en monitoring. 

Deze vacature is echt iets voor jou, want jij hebt:

•    HBO/WO werk- en denkniveau 5 jaar   en aantoonbare ervaring met cloud, data of AI-platformontwikkeling. 
•    Gedegen kennis van en ervaring met Databricks; Unity Catalog, Delta Lake, Terraform, model serving en/of Vector Search. 
•    Sterke programmeervaardigheden (terraform, python) en ervaring met software engineering-principes zoals Git, CI/CD, testing en codekwaliteit. 
•    Ervaring met AI concepten zoals LLM’s, RAG, embeddings, semantic search, agents, MCP, model serving of AI observability. 
•    Kennis van en ervaring met security, compliance en governance; opgedaan binnen een complexe corporate omgeving in het financial services domein.
•    Goede communicatieve vaardigheden: je kunt technische keuzes uitleggen aan verschillende stakeholders (in zowel Nederlands en Engels) en werkt graag samen met andere teams. 
•    Ervaring met het bouwen van herbruikbare platformcomponenten of templates voor andere ontwikkelteams. 
•    Ervaring met het ontsluiten van ongestructureerde data, bijvoorbeeld documenten, PDF’s, afbeeldingen of tekstbronnen, voor gebruik in AI- of zoekoplossingen.