← Alle ervaring
05 · Brussel · Full-time
Python Automation Developer & analist
APB (Algemene Pharmaceutische Bond)
Automatiseerde de migratie van farmaceutische data en de rapporteringspipelines.
Focusgebieden
- Data Engineering
- DevOps
Technologieën
- Python
- Apache Airflow
- PySpark
- Pandas
- MS SQL Server
- Qlik Sense
Overview
This record covers the Python Automation Developer & Analyst role at APB (Algemene Pharmaceutische Bond) in Brussels, running from October 2021 to July 2022. The work delivered automation for pharmaceutical data migration and reporting pipelines.
Architecture & Development
- Ontwierp ETL-pipelines met Apache Airflow die legacy XML-feeds koppelden aan moderne JSON/CSV-integraties.
- Bouwde gedistribueerde dataverwerkingsflows met PySpark die miljoenen records opschoonden en aggregeerden.
- Gebruikte Pandas voor analytische transformaties en integreerde de data-output in MS SQL Server.
- Ontwierp rapporteringsdashboards in Qlik Sense om KPI's en compliancecijfers te visualiseren.
DevOps & Testing
- Automatiseerde de uitrol van Airflow-DAG's via Git-gebaseerde workflows.
- Voerde validatiescripts voor datakwaliteit in om anomalieën te signaleren vóór de ingestie.
- Documenteerde data lineage en processtromen voor regelgevende audits.
Key Contributions
- Verlaagde de manuele migratielast met 60% dankzij volledig geautomatiseerde ETL-pipelines.
- Verhoogde de betrouwbaarheid door retry- en monitoringmechanismen in te bouwen in de Airflow-DAG's.