Simple Machines, veri mimarisi, veri mühendisliği, veri bilimi ve yazılım geliştirme alanlarında faaliyet gösteren Avustralyalı bir danışmanlık şirketidir. Danışmanları; kurumlar, kamu kuruluşları ve küresel teknoloji şirketleri için dağıtık veri platformları ve makine öğrenimi uygulamaları tasarlar ve geliştirir. Ekip, Preferred Confluent iş ortağı olarak Kafka danışmanlığı ve eğitimi sunmanın yanı sıra Databricks ve Lightbend iş ortaklıkları aracılığıyla Spark ve Scala danışmanlığı ve eğitimi de verir. Veri mühendisliği, veri bilimi veya yazılım geliştirme alanlarında kariyer seçeneklerini değerlendirenler için Simple Machines, veriyi gerçek dünyadaki sistemlerde kullanmaya odaklanan uzman bir danışmanlık ortamı sunar.
Baş Veri Mühendisi (Uzaktan, Polonya)
Simple Machines adlı küresel teknoloji danışmanlık şirketinde bulut tabanlı veri platformlarının, işlem hatlarının ve veri ürünlerinin mimarisine ve teslimine liderlik edin. Polonya’dan uzaktan çalışırken teknik yönü belirleyin ve müşterilerle iş ortaklığı kurun.
Açıklama
- Modern bulut tabanlı veri platformlarının tasarımdan teslimata kadar mimarisini üstlenin.
- Veri ağı (data mesh), veri ürünleri ve veri sözleşmeleriyle ölçeklenebilir veri ekosistemleri oluşturun.
- Veri alımı, depolama, işleme ve erişim alanlarında mimariyi belirleyin.
- Platformların güvenlik, mevzuata uyum ve üretime hazır olma standartlarını karşılamasını sağlayın.
- Databricks, Snowflake, AWS ve GCP ile bulut tabanlı platformlar sunun.
- Tüketicilere ölçeklenebilir veri erişimi sağlamak için müşteri sistemlerini birbirine bağlayın.
- Toplu ve gerçek zamanlı veri işlem hatları oluşturun ve performanslarını iyileştirin.
- Akış ve mesajlaşma için Kafka, Flink, Kinesis ve Pub/Sub kullanın.
- Airflow, Dataflow ve Glue ile iş akışlarını düzenleyin.
- Spark ve Flink ile büyük veri kümelerini işleyin ve dönüştürün.
- Postgres, BigQuery, Snowflake, Cassandra ve MongoDB dahil ilişkisel, NoSQL ve analitik veritabanlarıyla çalışın.
- Parquet, Delta, ORC ve Avro ile depolama biçimlerini ve erişim yöntemlerini iyileştirin.
- En başından itibaren güvenliği gözeterek güvenli ve mevzuata uyumlu çözümler geliştirin.
- Geliştirici iş akışlarını yavaşlatmadan veri yönetişimini entegre edin.
- Zorlukları anlamak ve çözümler geliştirmek için müşterilerle doğrudan iş birliği yapın.
- İş gereksinimlerini uygulanabilir mühendislik tercihlerine dönüştürün.
- Güvenilir bir teknik iş ortağı olarak müşterilere danışmanlık verin.
- Mühendislik standartlarını, kalıplarını ve uygulamalarını belirleyin.
- Tasarımları ve kodları inceleyerek teknik rehberlik ve mentorluk sağlayın.
- Veri kalitesini, testleri, gözlemlenebilirliği ve operasyonel uygulamaları güçlendirin.
Gereksinimler
- Python ve SQL alanlarında güçlü becerilere sahip olun.
- Spark ve Databricks veya Snowflake gibi modern veri platformlarında kapsamlı deneyiminiz olsun.
- AWS veya GCP üzerindeki bulut veri hizmetlerine hâkim olun.
- Büyük ölçekli veri platformlarının mimarisini üstlenmiş olun.
- Güçlü veri modelleme becerilerinizi kullanın ve sağlam mimari kararlar alın.
- Çözüm seçerken performans, maliyet ve karmaşıklık arasında denge kurun.
- Üretimde büyük ölçekli veri işlem hatları geliştirmiş ve işletmiş olun.
- Birden fazla depolama teknolojisi ve veri biçimiyle deneyiminiz olsun.
- Terraform veya Pulumi gibi altyapı kodu araçlarını kullanın.
- GitHub Actions veya ArgoCD gibi araçlarla CI/CD işlem hatları oluşturmuş olun.
- dbt, Great Expectations veya Soda gibi veri testi ve kalite çerçevelerini kullanmış olun.
- Danışmanlık veya profesyonel hizmetler alanında deneyiminiz olsun.
- Varsayımları sorgulayabilin ve müşterileri daha iyi sonuçlara yönlendirebilin.
- Kıdemli mühendislere mentorluk verme ve teknik kültürü şekillendirme konusunda rahat olun.
Yan Haklar
- Anlamlı etki yaratan zorlu problemler üzerinde çalışın.
- Eski sistemleri sürdürmek yerine modern platformlar geliştirin.
- Deneyimli mühendislerle iş birliği yapın.
- İşinizde özerkliğe ve söz sahibi olma olanağına sahip olun.
- Mesleki gelişim fırsatlarından yararlanın.