Senior Data Architect - Procurement Analytics
Westhouse Consulting GmbH
1 month ago
Role details
Contract type
Permanent contract Employment type
Part-time (≤ 32 hours) Working hours
Regular working hours Languages
German Experience level
SeniorJob location
Tech stack
Application Programming Interfaces (APIs)
Agile Methodology
Airflow
Amazon Web Services
Amazon S3
Data analysis
Software System Penetration Testing
JIRA
Software Documentation
Data Architecture
Extract Transform Load (ETL)
Data Security
Relational Databases
Identity and Access Management
Python (Programming Language)
Power BI
SAP Applications
SQL Databases
AWS Lambda
Data Lakes
AWS Glue
Apache Nifi
Amazon Redshift
Job description
- Weiterentwicklung und Optimierung der bestehenden Datenplattform
- Fehlerbehebung aus Testphasen in Applikationen und Komponenten
- Datenmodellierung und Konzeption von Data-Lakehouse-Architekturen
- Betrieb, Monitoring und Wartung der Datenplattform inkl. Updates & Upgrades
- Bewertung und Einführung neuer Tools und Technologien
- User- und Access-Management
- Sicherstellung von Datensicherheit und -integrität
- Begleitung von Penetrationstests
- Anbindung von Quellsystemen per API an den Data Lake
- Integration von Daten aus Quellsystemen (u. a. SAP)
- Entwicklung von Datenpipelines (z. B. NiFi, dbt, Airflow, AWS Lambda, AWS Glue)
- Entwicklung von Outbound-Schnittstellen sowie Bereitstellung von Datensets für BI-Tools
- Technische Dokumentation & Systemdokumentationen
Requirements
- (MUSS) 5+ Jahre Erfahrung in der Entwicklung von Data-Lakehouse-Architekturen und KI-Plattformen, nachweisbar in mind. 5 Projekten
- (MUSS) 5+ Jahre Erfahrung mit relationalen Datenbanken, besonders AWS Redshift, SQL sowie mind. 2 Jahre dbt
- (MUSS) 5+ Jahre Erfahrung in der ETL-Entwicklung mit Apache Airflow & NiFi
- (MUSS) 3+ Jahre Erfahrung mit AWS S3 und AWS Lambda
- (MUSS) 5+ Jahre Erfahrung in der Programmierung mit Python
- Verhandlungssicheres Deutsch
- Erfahrung mit AWS Sagemaker & AWS Glue
- Erfahrung im Setup und der Administration von PowerBI-Infrastrukturen
- Methodenkompetenz im agilen Umfeld, z. B. Jira
- Erfahrung in Datenprojekten im Beschaffungsumfeld