Azure FunctionsAzure DatabricksAzure DevOpsSql Data WarehouseAPIsApache AirflowArchitekturAtlassian ConfluenceAtlassian JiraBatch-DateienBusiness IntelligenceBig DataCloud ComputingCloud DatabaseCloud-EngineeringCloud-SpeicherData ArchitectureData GovernanceDateninfrastrukturDatenmanagementDatenqualitätData VaultDatenvisualisierungDevOpsDjangoIdentitätsmanagementInformation RetrievalInfrastrukturData IntelligencePythonPostgreSQLAzure SQLSQL DeveloperDataOpsAzure Data LakeSolution ArchitectureStreamingUnstrukturierte DatenBatch ScriptingParquetDocker ContainerAzure AutomationGoogle CloudCloud PlatformProject EngineeringAzure Data FactorySQL OptimizationSnowflakedbtIT-ArchitekturCloud TechnologiesInfrastructure as Code (IaC)FastAPIData LakePySparkCollibraAWS GlueGoogle BigqueryAWS FargateAtlassian BitbucketDSGVOCloud IntegrationCloud-OptimierungTerraformAzure Data AnalyticsAzure Synapse AnalyticsDaten-PipelineSql Server ProgrammingDatabricks
Als freiberuflicher Data Engineer & Cloud Architect konzipiere und entwickle ich skalierbare, sichere und performante Datenlösungen, mit denen Unternehmen das volle Potenzial ihrer Daten ausschöpfen. Mit über 7 Jahren Erfahrung im Data Engineering unterstütze ich Sie dabei, Ihre Dateninfrastruktur zu optimieren, Prozesse zu automatisieren und fundierte, datengetriebene Entscheidungen schneller zu treffen – von der ersten Strategie bis zum produktiven Betrieb.
Strategische Beratung & Anforderungsanalyse
Beratung bei Planung und Umsetzung datengetriebener Projekte
Anforderungsanalyse und Konzeption maßgeschneiderter Datenlösungen
Technologische Evaluierung und Strategieentwicklung
Erstellung von Roadmaps für Datenarchitekturen und Infrastruktur
Data Engineering & Management
Entwicklung und Optimierung von ETL-/ELT-Prozessen (Batch und Streaming)
Orchestrierung robuster Datenpipelines
Aufbau skalierbarer Data-Warehouse-Lösungen mit Snowflake und Databricks
Verwaltung und Optimierung relationaler und graphbasierter Datenbanken (Oracle, MySQL, PostgreSQL, SQL Server, Neo4j)
Datenmodellierung mit Star Schema, Snowflake Schema & Data Vault 2.0
Cloud-Architektur & DevOps
Design und Aufbau von Cloud-Architekturen auf AWS und Azure
Nutzung von Cloud-Diensten wie AWS Glue sowie Azure Functions, Synapse Analytics und App Service zur Entwicklung und Skalierung datengetriebener Lösungen
Infrastructure as Code und Automatisierung mit Terraform & GitHub Actions
Containerisierung von Anwendungen und Datenpipelines mit Docker
Integration von Confluent Kafka für Streaming-Datenlösungen
Entwicklung & Automatisierung
Entwicklung von APIs sowie von Skripten zur Prozessoptimierung und Automatisierung
Durchführung von Datenanalysen zur Ableitung konkreter Handlungsempfehlungen
Sicherheit & Governance
Sicherstellung von Datensicherheit, Governance und Compliance über alle Prozesse hinweg
Umsetzung von Security-Best-Practices in Cloud und Infrastruktur
Betrieb & Support
Dokumentation von Prozessen und strukturierte Übergabe von Systemen
Wartung und Optimierung bestehender Datenlösungen
Unterstützung bei Fehlerbehebung und kontinuierlicher Verbesserung
Beratende Rolle bei der Konzeption und Weiterentwicklung eines unternehmensweiten Data-Product-Frameworks nach Data-Mesh-Prinzipien.
Fachliche Unterstützung bei der Definition und Operationalisierung von Data-Governance-, Data-Culture- und Data-Quality-Konzepten in den Fachbereichen.
Konzeption und Umsetzung einer zentralen Datenplattform zur Zusammenführung von Informationen aus SharePoint, Azure DevOps, Collibra und internen APIs sowie Bereitstellung der Data Products über Collibra.
Implementierung der Datenpipelines inklusive Netzwerk-Setup und CI/CD-gestütztem Deployment.
Technologien:Azure Functions, Azure Data Factory, Azure Network, Snowflake, SQL Server, Azure DevOps, Python, Data Mesh, Collibra
Snowflake DWH & Schulung
Energie
5000-10.000 Mitarbeiter
Rolle: Data Engineer
Beschreibung der Tätigkeit:
Konzeption, Modellierung und Implementierung eines Data Warehouse auf Basis von Snowflake unter Einsatz von dbt zur Transformation und Versionierung der Datenmodelle.
Aufbau und Betrieb von CI/CD-Pipelines in Azure DevOps sowie Orchestrierung der Datenworkflows mit Airflow.
Erstellung einer Projektdokumentation inklusive Best Practices und Entwicklungsstandards zur Sicherstellung einer nachhaltigen Weiterentwicklung.
Durchführung von Schulungen für das Projektteam zu Snowflake, dbt, Airflow und Azure DevOps zur Übergabe der Plattform in den Eigenbetrieb.
Entwicklung eines analytischen Datenmodells in Power BI zur Analyse von Transaktionsdaten inklusive Modellierung der Daten in Oracle.
Optimierung der Refresh-Prozesse für performante Datenaktualisierungen sowie Strukturierung der Dimensionen für detaillierte Analysen.
Erstellung einer Projektdokumentation und Ableitung datenbasierter Entscheidungsgrundlagen.
Technologien: Power BI, Oracle, Datenmodellierung, Snowflakeschema
LLM Chatbot für Mitarbeiterauslastung
Qurix Technology
Internet und Informationstechnologie
< 10 Mitarbeiter
Rolle: Data Engineer
Beschreibung der Tätigkeit:
Entwicklung eines LLM-basierten Chatbots zur Analyse der internen Mitarbeiterauslastung und Ressourcenplanung.
Umsetzung einer interaktiven Oberfläche mit Streamlit inklusive rollenbasierter Zugriffskontrolle, Feedback- und Historienfunktion.
Bereitstellung der Anwendung in Azure mit GitHub Actions, Docker, App Service, Container Registry sowie Datenhaltung in Azure PostgreSQL und Storage Container.
Entwicklung einer flexiblen Data-Catalogue-Anwendung für den Offline- und Online-Betrieb.
Umsetzung einer interaktiven Benutzeroberfläche mit Streamlit inklusive Offline-Caching von Metadaten aus PostgreSQL, SQL Server und DB2 sowie Echtzeit-Aktualisierung über Kafka.
Containerisierung der Anwendung mit Docker zur portablen und skalierbaren Bereitstellung.
Das original exali Berufshaftpflicht-Siegel bestätigt dem Auftraggeber, dass die betreffende Person oder Firma eine aktuell gültige branchenspezifische Berufs- bzw. Betriebshaftpflichtversicherung abgeschlossen hat.
