Smarketer Holding
Senior Data Engineer (m/w/x)
Vollzeitmit HomeofficeSenior
Berlin
NENetconomy GmbH
Data Engineer (m/w/x)
Vollzeitmit HomeofficeBerufserfahren
AI/ML
Data Science
Nejo KI-Zusammenfassung
Aufbau skalierbarer ETL/ELT-Prozesse in BigQuery und Cloud Storage mit Dataflow und Pub/Sub. 3+ Jahre Erfahrung als Data Engineer mit BigQuery und Python erforderlich. Flexible Arbeitsmodelle und strukturiertes Onboarding.
Deine Match-Analyse
von deinem Karriere-Agenten
Warum dieser Job zu dir passt
Mögliche Lücken
Tipps für deine Bewerbung
Passt dieser Job zu dir?Dein KI-Karriere-Agent sagt es dir.- Findet Jobs direkt auf den Karriereseiten
- Auch Stellen, die auf keiner Jobbörse landen
- Versteht deine Skills, nicht nur Jobtitel
Anforderungen
- 3+ Jahre praktische Erfahrung als Data Engineer
- Fundierte Erfahrung mit BigQuery (SQL, Partitionierung, Clustering, Optimierung) und Dataflow (Apache Beam)
- Starke Programmierkenntnisse in Python mit Erfahrung in Datenmanipulationsbibliotheken wie PySpark und pandas
- Starke Kenntnisse in SQL für komplexe Transformationen, Optimierung und Analyse
- Versiert im Umgang mit Dataform für modulare SQL basierte Daten Transformationen und Pipeline-Management
- Solides Verständnis von Data-Warehousing-Prinzipien, ETL-/ELT-Prozessen, dimensionalem Modellieren und Daten Governance
- Erfahrung in der Integration von Daten aus unterschiedlichen APIs und Streaming-Systemen (Pub/Sub)
- Erfahrung mit Cloud Composer zur Orchestrierung von Workflows
- Hervorragende Kommunikations- und Kollaborationsfähigkeiten in Englisch
- Fähigkeit, sowohl selbstständig als auch im agilen Team zu arbeiten
- Google Professional Data Engineer-Zertifizierung
- Kenntnisse in BigLake für den einheitlichen Zugriff auf und die Verwaltung von strukturierten und unstrukturierten Daten
- Erfahrung mit Dataplex zur Verwaltung von Metadaten, Datenherkunft (Lineage) und Daten-Governance
- Vertrautheit mit Infrastructure-as-Code (Terraform) zur Automatisierung der Bereitstellung von GCP-Ressourcen und CI/CD-Pipelines
- Erfahrung mit Datenvisualisierungstools wie Looker, Looker Studio oder Power BI
- Interesse an bzw. Erfahrung mit Machine-Learning-Workflows unter Verwendung von Vertex AI oder ähnlichen Plattformen
Aufgaben
- Aufbau effizienter und skalierbarer ETL-/ELT-Prozesse zum Einlesen, Transformieren und Laden von Daten aus unterschiedlichen strukturierten und unstrukturierten Quellen in BigQuery und Cloud Storage
- Implementierung von Daten-Ingestion und Echtzeitverarbeitung mit Dataflow (Apache Beam) und Pub/Sub für Batch- und Streaming-Workflows
- Entwicklung von SQL-Transformations-Workflows mit Dataform, einschließlich Versionskontrolle, Tests und automatisierter Planung mit integrierten Qualitätsprüfungen
- Erstellung effizienter, kostenoptimierter BigQuery Abfragen unter Berücksichtigung von Partitionierung, Clustering und Denormalisierungsstrategien
- Orchestrierung komplexer Workflows mit Cloud Composer (Apache Airflow) und Cloud Functions für ereignisgesteuerte Datenverarbeitung
- Implementierung zentraler Daten Governance und Metadatenverwaltung mit Dataplex, inklusive automatischer Katalogisierung und Nachverfolgung der Datenherkunft
- Überwachung und Optimierung von Datenpipelines hinsichtlich Leistung, Skalierbarkeit und Kosten mithilfe von Cloud Monitoring und Cloud Logging
- Zusammenarbeit mit Data Scientists und Analysten zur Erfassung von Datenanforderungen und Bereitstellung verwertbarer Insights
- Kontinuierliche Weiterbildung in den Bereichen GCP-Datenservices, BigQuery-Funktionen und Best Practices im Data Engineering
Berufserfahrung
3 Jahre
Ausbildung
Abgeschlossene BerufsausbildungODER
Bachelor-AbschlussODER
Master-Abschluss
Sprachen
Englisch – verhandlungssicher
Tools & Technologien
Google Cloud Platform (GCP)BigQueryDataflowApache BeamPythonPySparkpandasSQLDataformPub/SubCloud ComposerBigLakeDataplexTerraformLookerLooker StudioPower BIVertex AI
Benefits
Flexibles Arbeiten
- Flexible Arbeitsmodelle
- Hybridarbeit
- Homeoffice möglich
Mentoring & Coaching
- Strukturiertes Onboarding
- Mentoring
Weiterbildungsangebote
- Individuelle Schulungsmöglichkeiten
Team Events & Ausflüge
- Jährlicher Company Summit
- Social Events
- Weihnachtsfeiern
- Milestone Events
Lockere Unternehmenskultur
- Austausch mit internationalem Team
Snacks & Getränke
- Pizza Partys
Gesundheits- & Fitnessangebote
- Sportaktivitäten
Gratis oder Vergünstigte Mahlzeiten
- Lunch Benefits
Sonstige Zulagen
- Essenszuschüsse
Mitarbeiterrabatte
- Rabatte in Partnerrestaurants
Sonstige Vorteile
- Mobility Support
Öffi Tickets
- Unterstützung klimafreundlicher Transportkosten
Von Nejo automatisch aufbereitet
Nejo hat diesen Job automatisch von der Website des Unternehmens Netconomy GmbH erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.
Zur Originalanzeige bei Netconomy GmbHÜber das Unternehmen
NE
ITBerlin
Das Unternehmen entwickelt einzigartige digitale Lösungen und fördert agile, interdisziplinäre Zusammenarbeit.
Wie gut ist dein Lebenslauf?
Nejo bewertet ihn, und bringt ihn danach gemeinsam mit dir in Bestform.
Du hast noch keinen Lebenslauf?
Noch nicht perfekt?
- Tierarzt PlusSenior Data Engineer (m/w/x)Vollzeit/Teilzeitmit HomeofficeSeniorBerlin
- Europace Ratenkredit GmbHData Engineer - Fintech (m/w/x)VollzeitRemoteBerufserfahrenBerlin, Leipzig, Lübeck, Hamburg
- AvomindData Engineer (m/w/x)Vollzeitmit HomeofficeKeine AngabeMünchen, Berlin
- ZoiData Engineer (m/w/x)Vollzeitmit HomeofficeBerufserfahrenBerlin, Köln, Stuttgart