Simple Machines ialah firma perundingan Australia yang merangkumi seni bina data, kejuruteraan data, sains data dan pembangunan perisian. Para perundingnya mereka bentuk dan membina platform data teragih serta aplikasi pembelajaran mesin untuk perusahaan, agensi kerajaan dan syarikat teknologi global. Pasukan ini turut menyediakan khidmat perundingan dan latihan Kafka sebagai rakan Preferred Confluent, serta perundingan dan latihan Spark dan Scala melalui perkongsiannya dengan Databricks dan Lightbend. Bagi mereka yang meneroka kerjaya dalam kejuruteraan data, sains data atau pembangunan perisian, Simple Machines menawarkan persekitaran perundingan khusus yang menumpukan pada penggunaan data dalam sistem dunia sebenar.
Jurutera Data Utama (Jarak Jauh, Poland)
Pimpin seni bina dan penyampaian platform data natif awan, saluran paip dan produk data untuk Simple Machines, perunding teknologi global. Tetapkan hala tuju teknikal dan bekerjasama dengan pelanggan sambil bekerja dari jauh di Poland.
Penerangan
- Memiliki seni bina platform data natif awan moden dari peringkat reka bentuk hingga penyampaian.
- Mewujudkan ekosistem data berskala dengan data mesh, produk data dan kontrak data.
- Menetapkan seni bina merentas pengingesan, penyimpanan, pemprosesan dan akses data.
- Memastikan platform memenuhi piawaian keselamatan, pematuhan dan kesediaan produksi.
- Menyampaikan platform natif awan menggunakan Databricks, Snowflake, AWS dan GCP.
- Menghubungkan sistem pelanggan untuk menyediakan akses data berskala kepada pengguna.
- Membina dan memperhalus saluran paip data kelompok dan masa nyata.
- Menggunakan Kafka, Flink, Kinesis dan Pub/Sub untuk penstriman dan pemesejan.
- Menyelaraskan aliran kerja dengan Airflow, Dataflow dan Glue.
- Memproses dan mengubah set data besar menggunakan Spark dan Flink.
- Bekerja dengan pangkalan data hubungan, NoSQL dan analitik, termasuk Postgres, BigQuery, Snowflake, Cassandra dan MongoDB.
- Menambah baik format storan dan corak akses menggunakan Parquet, Delta, ORC dan Avro.
- Membina penyelesaian yang selamat dan patuh dengan mengambil kira keselamatan sejak awal.
- Mengintegrasikan tadbir urus data tanpa melambatkan aliran kerja pembangun.
- Bekerjasama secara langsung dengan pelanggan untuk memahami cabaran dan membentuk penyelesaian.
- Menterjemahkan keperluan perniagaan kepada pilihan kejuruteraan yang praktikal.
- Memberi nasihat kepada pelanggan sebagai rakan teknikal yang dipercayai.
- Menentukan piawaian, corak dan amalan kejuruteraan.
- Menyemak reka bentuk dan kod, serta memberikan panduan dan bimbingan teknikal.
- Memperkukuh kualiti data, pengujian, kebolehcerapan dan amalan operasi.
Keperluan
- Mempunyai kemahiran Python dan SQL yang kukuh.
- Mempunyai pengalaman mendalam dengan Spark dan platform data moden seperti Databricks atau Snowflake.
- Memahami perkhidmatan data awan di AWS atau GCP.
- Pernah memiliki seni bina platform data berskala besar.
- Menggunakan kemahiran pemodelan data yang kukuh dan membuat keputusan seni bina yang tepat.
- Mengimbangi prestasi, kos dan kerumitan ketika memilih penyelesaian.
- Pernah membina dan mengendalikan saluran paip data produksi berskala besar.
- Berpengalaman dengan pelbagai teknologi storan dan format data.
- Menggunakan alat infrastruktur sebagai kod seperti Terraform atau Pulumi.
- Pernah membina saluran paip CI/CD menggunakan alat seperti GitHub Actions atau ArgoCD.
- Pernah menggunakan rangka kerja pengujian dan kualiti data seperti dbt, Great Expectations atau Soda.
- Mempunyai pengalaman dalam perundingan atau perkhidmatan profesional.
- Boleh mempersoalkan andaian dan membimbing pelanggan ke arah hasil yang lebih baik.
- Selesa membimbing jurutera kanan dan membentuk budaya teknikal.
Faedah
- Menangani masalah mencabar yang memberikan impak bermakna.
- Membina platform moden dan bukannya menyelenggara sistem legasi.
- Bekerjasama dengan jurutera berpengalaman.
- Mempunyai autonomi dan pengaruh dalam kerja.
- Berpeluang untuk berkembang secara profesional.