DaCodes. ist ein 2014 gegründetes Technologieunternehmen, das Organisationen beim Aufbau von Software und bei der digitalen Transformation unterstützt. Das Leistungsspektrum umfasst KI-gestützte Produkte, Quality Engineering, UX/UI-Design, Full-Stack-Entwicklung und die Verstärkung von Teams durch zusätzliche Fachkräfte. Mit mehr als 900 abgeschlossenen Projekten und einem Team von über 220 Expertinnen und Experten arbeitet DaCodes. in Branchen wie Automobilindustrie, Gesundheitswesen und E-Commerce und entwickelt Technologielösungen, die auf die operativen Anforderungen der jeweiligen Branche zugeschnitten sind.
Senior Snowflake-Dateningenieur – Remote in Mexiko
Entwickle zuverlässige und kontrollierte Snowflake-Datenlager für die Software- und Digital-Transformation-Kunden von DaCodes. Ermögliche nachvollziehbare Geschäftserkenntnisse für KI-Agenten in Mexiko und LATAM.
Beschreibung
- Extraktionspipelines aus SAP ASE (Sybase) und SQL Server über ODBC mithilfe von Openflow-Connector-Mustern entwickeln.
- REST-APIs mit Authentifizierung, Token-Erneuerung, Paginierung, Umgang mit Ratenbegrenzungen und Wiederholungsversuchen integrieren.
- Dateien und andere Quellen in das Data Warehouse laden und dabei die Originaldaten sowie den Extraktionszeitpunkt erhalten.
- Die erneute Verarbeitung aus der Landing-Schicht ermöglichen, ohne die Quellsysteme erneut abzufragen.
- Bronze-, Silver- und Gold-Schichten mit konformen Dimensionen, Historienverfolgung und Geschäftsfakten mit zertifizierten Metriken entwickeln.
- dbt-Modelle und Transformationen mit deklarativen Tests, inkrementellen Materialisierungen und automatisch erzeugter Dokumentation erstellen.
- Mit Kunden standardisierte Hauptkataloge etablieren, die Identifikatoren und Bezeichnungen systemübergreifend vereinheitlichen.
- Mit dem KI-Engineer semantische Modelle, verifizierte Abfragen und ein Metrikglossar für die Nutzung durch Agenten entwickeln.
- Eine durchgängige Nachvollziehbarkeit jeder Kennzahl bis zu Quelle, Tabelle und Berichtsdatum sicherstellen und Daten über Verbrauchsansichten bereitstellen.
- Regeln zur Datenqualität und Quarantänemechanismen für Datensätze implementieren, die festgelegte Kriterien nicht erfüllen.
- Nächtliche Verarbeitungsfenster mit Ausführungsüberwachung und Protokollen orchestrieren.
- Die Gold-Schicht mit den aktuellen Berichten des Kunden abgleichen und Abweichungen sowie deren Ursachen dokumentieren.
- Den Snowflake-Credit-Verbrauch verwalten und Kontrollen zur Ressourcenüberwachung konfigurieren.
- Bei der Bewertung der Genauigkeit und Wiederholbarkeit von durch KI generierten Antworten der Agenten unterstützen.
- RBAC sowie Richtlinien für den Zeilenzugriff und die Maskierung gemäß der vom Kunden freigegebenen Zugriffsmatrix implementieren.
- Sicherstellen, dass Agenten nur Informationen abfragen und zurückgeben, die für die jeweilige Rolle autorisiert sind.
- Datenherkunft, Pipeline-Betrieb und Verfahren zur erneuten Verarbeitung dokumentieren.
- Die technische und operative Übergabe an das Team des Kunden vorbereiten.
Anforderungen
- Mindestens fünf Jahre Erfahrung mit dem Aufbau produktiver Data Warehouses, davon mindestens zwei Jahre mit Snowflake.
- Fundierte Snowflake-Kenntnisse in den Bereichen Warehouses, RBAC, Richtlinien für den Zeilenzugriff, Maskierung und Ressourcenüberwachung.
- Fundierte Erfahrung in der dimensionalen Modellierung mit konformen Dimensionen, Historienverfolgung und Sternschemas.
- Fundierte dbt-Kenntnisse, einschließlich deklarativer Tests, inkrementeller Materialisierungen und automatisch erzeugter Dokumentation.
- Fundierte SQL-Kenntnisse sowie Erfahrung bei der Datenextraktion aus SAP ASE (Sybase) und SQL Server, einschließlich Reverse Engineering nicht dokumentierter Schemata.
- Fundierte Erfahrung bei der Aufnahme von REST-APIs mit Authentifizierung, Paginierung, Ratensteuerung und Wiederholungsversuchen.
- Fundierte Erfahrung in der Orchestrierung von Pipelines und der Implementierung von Datenqualität mit Quarantänekontrollen.
- Mittlere bis fortgeschrittene Erfahrung bei der Integration von LLM-Modellen mit Data Warehouses, einschließlich semantischer Modelle, kontrolliertem Text-to-SQL, verifizierten Abfragen sowie der Bewertung von Genauigkeit und Wiederholbarkeit.
- Mittlere Erfahrung beim Entwurf von Datenschichten für Agenten mit Nachvollziehbarkeit von Quelle und Berichtsdatum, Verbrauchsansichten und Credit-Kontrollen.
- Erfahrung in der direkten Zusammenarbeit mit Fachanwendern zur Definition von Regeln, Standardisierung von Katalogen und Validierung von Kennzahlen.
- Muttersprachliche oder berufliche Spanischkenntnisse und mittlere Englischkenntnisse sowie die Fähigkeit, technische Dokumentation zu verstehen.
- Wohnsitz in Mexiko oder LATAM und Verfügbarkeit für eine Vollzeitstelle im Homeoffice.
- Von Vorteil: Erfahrung mit Snowflake Intelligence, Cortex Analyst, Cortex Agents, Cortex Search oder Snowflake CoCo.
- Von Vorteil: Erfahrung mit der Implementierung von RAG für unstrukturierte Dokumente in Verbindung mit einem Data Warehouse.
- Von Vorteil: Erfahrung mit Openflow, Dynamic Tables oder Snowpark.
- Von Vorteil: Erfahrung mit Nischen-ERP-Systemen auf Sybase oder SQL Server.
- Von Vorteil: SnowPro-Core- oder Advanced-Zertifizierung.
Zusatzleistungen
- Arbeit mit globalen Marken und disruptiven Start-ups.
- Remote-Stelle im Homeoffice.
- Arbeitszeiten entsprechend dem zugewiesenen Arbeitsbereich oder Projekt.
- Arbeitswoche von Montag bis Freitag.
- Freier Tag am Geburtstag.
- Krankenversicherung für größere medizinische Kosten für Mitarbeitende mit Wohnsitz in Mexiko.
- Lebensversicherung für Mitarbeitende mit Wohnsitz in Mexiko.
- Zugang zu Kursen und Zertifizierungen.
- Virtuelle Integrationsveranstaltungen und Interessengruppen.
- Englischkurse.
- Arbeitgeber mit Great-Place-to-Work-Zertifizierung.