Senior Data Engineer (m/w/d)
Artefact, ein globales KI- und Datenberatungsunternehmen mit rasantem Wachstum, sucht einen talentierten, energiegeladenen Senior Data Engineer für sein entstehendes Tech-Team bei Artefact Germany. Wirst du das sein?
Welche Aufgaben du bei uns übernimmst:
- Du wirst Data-Engineering-Probleme formulieren und unseren Kunden zu einer Lösung führen. Bei einigen Aufträgen in der frühen Phase eines Datenlebenszyklus kannst du uns dabei helfen, Empfehlungen zu einem Data-Engineering-Problem für einen Kunden zu formulieren, z. B. bei der Auswahl von Technologien, dem Entwurf einer Datenarchitektur, der Definition geeigneter Sicherheitsverfahren usw.
- Du wirst eigenständig Datenpipelines implementieren. Du kannst dich um mehrere Phasen solcher Pipelines kümmern: Ingestion, Erstellung von APIs, Einrichtung von Datenbanken, Bearbeitung von Netzwerkanfragen usw.
- Du könntest bestehende Pipelines überwachen und pflegen. Konkret bedeutet dies die Einrichtung von Dashboards, CI/CD-Tools usw.
- Du kannst ein kleines Team leiten und bei technischen Entscheidungen die Führung übernehmen. Bei einigen Aufträgen könntest du der ranghöchste Dateningenieur sein, der tagtäglich an einem Stream arbeitet, und ein paar Junior-Dateningenieure anleiten oder beaufsichtigen. Du könntest der wichtigste technische Ansprechpartner für unseren Kunden sein und bist für technische Entscheidungen verantwortlich.
- Du wirst ein breites Spektrum an Erfahrungen im Bereich Data Engineering sammeln. Es wird von dir erwartet, dass du an einigen Aufträgen pro Jahr (1-3) arbeitest, die dich mit verschiedenen Branchen, Anwendungsfällen und Technologien vertraut machen.
- Du wirst sehen, wie sich deine Arbeit in der Praxis auswirkt. Im Gegensatz zu anderen Unternehmen, die sich auf ausgefallene Modeerscheinungen spezialisiert haben, sind wir darauf spezialisiert, Lösungen zu entwickeln, die jahrelang genutzt werden können und für unsere Kunden tatsächlich etwas bewirken. Das bedeutet auch, dass du Erfahrungen im Umgang mit Kunden und nichttechnischen Personen sammeln wirst.
- Du wirst mit hochmodernen Tools arbeiten. Unser Stack variiert von Kunde zu Kunde, ist aber im Allgemeinen recht modern - GCP mit Terraform, DBT und Vertex AI, um ein aktuelles Beispiel zu nennen. Im Allgemeinen verwenden wir jedoch Python als Programmiersprache.
Was du mitbringst:
- Du beherrschst Python oder eine andere Skriptsprache. Auch mit Shell-Skriptsprachen (insbesondere Bash und make) bist du vertraut.
- Neben deinen Programmierkenntnissen verfügst du über eine echte Datenkultur: Du kannst ETL-Prozesse selbstständig mit Standardtools implementieren, du kannst komplexe SQL-Abfragen durchführen, du weißt, wie man Datenpipelines überwacht, du kennst dich mit Datenbank- und Cloud-Systemen aus, usw.
- Du kannst Data-Engineering-Probleme selbständig lösen und eigenständig begründete Entscheidungen treffen. Dies entspricht in der Regel 2+ Jahren Berufserfahrung als Data Engineer, aber wir sind flexibel.
- Du bist in der Lage, als Referenz für jüngere Data Engineers zu dienen: Du kannst PRs überprüfen, du kannst Best Practices für die Programmierung durchsetzen, etc.
- Du bist in der Lage, deine Ergebnisse visuell zu präsentieren und in englischer Sprache mit technischen und nichttechnischen Personen über deine Arbeit zu sprechen.
“Nice-to-haves”
Wir erwarten nicht, dass du alle diese Anforderungen erfüllst, aber du solltest zumindest ein paar davon mitbringen:
- Du hast umfangreiche Erfahrung in der Arbeit an realen, großen Produktionssystemen, insbesondere an solchen, die mit Kundendaten arbeiten.
- Du hast neben deinen Software-Engineering-Fähigkeiten auch einen Data-Science-Hintergrund und bist in der Lage, eine Art Hybridprofil zwischen Data Scientist und Data Engineer zu sein.
- Du hast Erfahrung in der Arbeit an ML-, KI- oder Forecasting-Projekten. Du weißt, wie man Hand in Hand mit einem Team von Datenwissenschaftlern arbeitet.
- Du hast bereits umfangreiche Erfahrungen mit dem Aufbau von Datenpipelines für ML/AI-Projekte und nutzt Technologien wie Airflow, Kedro, Spark usw.
- Du bist ein MLOps-Experte und weißt, wie man Machine-Learning-Modelle in der Produktion verwaltet und überwacht.
- Du hast Erfahrung in der Architektur von Datensystemen und berücksichtigst dabei Faktoren wie Kosten, Zuverlässigkeit, Sicherheit und Rechtskonformität. Du hast Terraform oder Ansible verwendet.
- Du hast fundierte Kenntnisse über Datenbanksysteme. Du weißt, wann eine NoSQL-Lösung besser ist als Postgres oder BigQuery besser als Cassandra.
- Du kannst Agile/Scrum-Instanzen leiten, wenn kein Produktmanager verfügbar ist.
- Du bist ein SQL-Experte. Du könntest dir zum Beispiel eine bestehende Codebasis von SQL-Abfragen ansehen und viele von ihnen effizienter machen.
- Du hast viel Erfahrung mit Cloud-Umgebungen (AWS, Azure, GCP). Bonuspunkte bekommst du, wenn du mit den Data-Engineering-Komponenten dieser Cloud-Umgebungen gearbeitet hast (Dataflow / Vertex AI / Dataproc, Sagemaker, HDInsight, Databricks, etc.)
- Du hast umfangreiche Erfahrungen mit Batch- und Streaming-Verarbeitung.
Warum ARTEFACT?
- Herausfordernde Projekte für große nationale und internationale Kunden den verschiedensten Bereichen.
- Vielfältige Karriereperspektiven mit Beförderungen, die sich an deiner persönlichen Leistung orientieren - nicht an deiner Betriebszugehörigkeit.
- Teamgeist, der uns in der täglichen Arbeit zusammenhält und für uns im Vordergrund steht.
- Persönliche Weiterentwicklung durch Trainings, Coachings und spannende Kundenprojekte, auch auf internationaler Ebene.
- Attraktive Benefits: Unbegrenzte Homeoffice Möglichkeit, flexible Arbeitszeiten, 28 Tage regulären Urlaub, 1 Tag Geburtstagsurlaub, Weihnachten und Silvester frei, Mental Health Initiativen, Jobrad Leasing, betriebliche Altersvorsorge, Workation Möglichkeiten, Free Drinks/Kaffee/Wasser, ...
Über ARTEFACT
Wir sind ein globales Dienstleistungsunternehmen, das an der Schnittstelle von Marketing, Beratung und Data Science angesiedelt ist. Unsere weltweit über 1200 Mitarbeiter durchbrechen Geschäfts- und IT-Silos und verwandeln Organisationen mithilfe von Digitaltechnik, Daten und KI in kundenorientierte Marktführer.
Wir bieten eine breite Palette von Dienstleistungen von der Strategie bis zur Umsetzung, die Unternehmen helfen, den Wettbewerbsvorteil der Datentransformation zu nutzen.
Wenn du Fragen hast, kannst du uns gerne eine Nachricht an bewerbung-de[at]artefact.com oder claudia.stich@artefact.com schicken.
Wir ermutigen Bewerber aus allen Bereichen und heißen dich ungeachtet deines Geschlechts, deiner Herkunft oder deines LGBT+-Hintergrunds willkommen.