Simple Machines একটি অস্ট্রেলীয় পরামর্শক প্রতিষ্ঠান, যা ডেটা আর্কিটেকচার, ডেটা ইঞ্জিনিয়ারিং, ডেটা সায়েন্স এবং সফটওয়্যার উন্নয়ন নিয়ে কাজ করে। প্রতিষ্ঠানটির পরামর্শকেরা বিভিন্ন প্রতিষ্ঠান, সরকারি সংস্থা এবং বৈশ্বিক প্রযুক্তি কোম্পানির জন্য বিতরণকৃত ডেটা প্ল্যাটফর্ম ও মেশিন লার্নিং অ্যাপ্লিকেশন নকশা ও নির্মাণ করেন। Preferred Confluent অংশীদার হিসেবে দলটি Kafka পরামর্শ ও প্রশিক্ষণও দেয়। Databricks ও Lightbend-এর সঙ্গে অংশীদারত্বের মাধ্যমে Spark ও Scala বিষয়ে পরামর্শ এবং প্রশিক্ষণও প্রদান করে। ডেটা ইঞ্জিনিয়ারিং, ডেটা সায়েন্স বা সফটওয়্যার উন্নয়নে কাজের সুযোগ খুঁজছেন এমন ব্যক্তিদের জন্য Simple Machines বাস্তব ব্যবস্থায় ডেটার কার্যকর ব্যবহারে মনোযোগী একটি বিশেষায়িত পরামর্শক পরিবেশ।
প্রধান ডেটা ইঞ্জিনিয়ার (রিমোট, পোল্যান্ড)
Simple Machines নামের বৈশ্বিক প্রযুক্তি পরামর্শক প্রতিষ্ঠানের জন্য ক্লাউড-নেটিভ ডেটা প্ল্যাটফর্ম, পাইপলাইন ও ডেটা পণ্যের স্থাপত্য এবং সরবরাহের নেতৃত্ব দিন। পোল্যান্ড থেকে দূরবর্তীভাবে কাজ করে প্রযুক্তিগত দিকনির্দেশনা দিন এবং ক্লায়েন্টদের সঙ্গে অংশীদারিত্ব গড়ুন।
বিবরণ
- নকশা থেকে সরবরাহ পর্যন্ত আধুনিক ক্লাউড-নেটিভ ডেটা প্ল্যাটফর্মের স্থাপত্যের দায়িত্ব নিন।
- ডেটা মেশ, ডেটা পণ্য ও ডেটা চুক্তির মাধ্যমে সম্প্রসারণযোগ্য ডেটা ইকোসিস্টেম তৈরি করুন।
- ডেটা গ্রহণ, সংরক্ষণ, প্রক্রিয়াকরণ ও ব্যবহারের জন্য সামগ্রিক স্থাপত্য নির্ধারণ করুন।
- প্ল্যাটফর্মগুলো নিরাপত্তা, নিয়মপালন ও উৎপাদন-প্রস্তুতির মান পূরণ করছে তা নিশ্চিত করুন।
- Databricks, Snowflake, AWS ও GCP ব্যবহার করে ক্লাউড-নেটিভ প্ল্যাটফর্ম সরবরাহ করুন।
- ভোক্তাদের জন্য সম্প্রসারণযোগ্য ডেটা ব্যবহারের সুযোগ দিতে ক্লায়েন্টের সিস্টেমগুলো সংযুক্ত করুন।
- ব্যাচ ও রিয়েল-টাইম ডেটা পাইপলাইন তৈরি ও উন্নত করুন।
- স্ট্রিমিং ও মেসেজিংয়ের জন্য Kafka, Flink, Kinesis ও Pub/Sub ব্যবহার করুন।
- Airflow, Dataflow ও Glue দিয়ে কর্মপ্রবাহ সমন্বয় করুন।
- Spark ও Flink দিয়ে বড় ডেটাসেট প্রক্রিয়াকরণ ও রূপান্তর করুন।
- Postgres, BigQuery, Snowflake, Cassandra ও MongoDB-সহ রিলেশনাল, NoSQL ও অ্যানালিটিক্যাল ডেটাবেসে কাজ করুন।
- Parquet, Delta, ORC ও Avro দিয়ে সংরক্ষণ ফরম্যাট এবং ডেটা ব্যবহারের ধরন উন্নত করুন।
- শুরু থেকেই নিরাপত্তাকে বিবেচনায় রেখে নিরাপদ ও নিয়মসম্মত সমাধান তৈরি করুন।
- ডেভেলপারদের কর্মপ্রবাহ ধীর না করে ডেটা গভর্ন্যান্স সমন্বিত করুন।
- চ্যালেঞ্জ বুঝতে এবং সমাধানের রূপ দিতে সরাসরি ক্লায়েন্টদের সঙ্গে কাজ করুন।
- ব্যবসায়িক চাহিদাকে বাস্তবসম্মত প্রকৌশলগত সিদ্ধান্তে রূপ দিন।
- বিশ্বস্ত প্রযুক্তিগত অংশীদার হিসেবে ক্লায়েন্টদের পরামর্শ দিন।
- প্রকৌশলগত মান, নকশার ধরন ও চর্চা নির্ধারণ করুন।
- নকশা ও কোড পর্যালোচনা করুন এবং প্রযুক্তিগত দিকনির্দেশনা ও পরামর্শ দিন।
- ডেটার গুণমান, পরীক্ষা, পর্যবেক্ষণযোগ্যতা ও পরিচালনাগত চর্চা উন্নত করুন।
প্রয়োজনীয়তা
- Python ও SQL-এ শক্তিশালী দক্ষতা থাকতে হবে।
- Spark এবং Databricks বা Snowflake-এর মতো আধুনিক ডেটা প্ল্যাটফর্মে গভীর অভিজ্ঞতা থাকতে হবে।
- AWS বা GCP-এর ক্লাউড ডেটা পরিষেবা সম্পর্কে ধারণা থাকতে হবে।
- বৃহৎ পরিসরের ডেটা প্ল্যাটফর্মের স্থাপত্যের দায়িত্ব পালনের অভিজ্ঞতা থাকতে হবে।
- ডেটা মডেলিংয়ে দক্ষতা থাকতে হবে এবং যথাযথ স্থাপত্যগত সিদ্ধান্ত নিতে হবে।
- সমাধান বাছাইয়ের সময় কর্মদক্ষতা, খরচ ও জটিলতার মধ্যে ভারসাম্য রাখতে হবে।
- বৃহৎ পরিসরের উৎপাদন-পরিবেশের ডেটা পাইপলাইন তৈরি ও পরিচালনার অভিজ্ঞতা থাকতে হবে।
- একাধিক সংরক্ষণ প্রযুক্তি ও ডেটা ফরম্যাটে অভিজ্ঞতা থাকতে হবে।
- Terraform বা Pulumi-এর মতো ইনফ্রাস্ট্রাকচার-অ্যাজ-কোড টুল ব্যবহার করতে হবে।
- GitHub Actions বা ArgoCD-এর মতো টুল দিয়ে CI/CD পাইপলাইন তৈরি করার অভিজ্ঞতা থাকতে হবে।
- dbt, Great Expectations বা Soda-এর মতো ডেটা পরীক্ষা ও গুণমান যাচাইয়ের ফ্রেমওয়ার্ক ব্যবহারের অভিজ্ঞতা থাকতে হবে।
- কনসাল্টিং বা পেশাদার পরিষেবা খাতে অভিজ্ঞতা থাকতে হবে।
- অনুমান নিয়ে প্রশ্ন তুলতে এবং ক্লায়েন্টকে আরও ভালো ফলের দিকে পরিচালিত করতে সক্ষম হতে হবে।
- সিনিয়র ইঞ্জিনিয়ারদের পরামর্শ দিতে এবং প্রযুক্তিগত সংস্কৃতি গড়ে তুলতে স্বচ্ছন্দ হতে হবে।
সুবিধাসমূহ
- অর্থবহ প্রভাব ফেলে এমন চ্যালেঞ্জিং সমস্যায় কাজ করুন।
- পুরোনো ব্যবস্থা রক্ষণাবেক্ষণের বদলে আধুনিক প্ল্যাটফর্ম তৈরি করুন।
- অভিজ্ঞ ইঞ্জিনিয়ারদের সঙ্গে কাজ করুন।
- নিজের কাজে স্বায়ত্তশাসন ও প্রভাব রাখুন।
- পেশাগতভাবে বিকশিত হওয়ার সুযোগ পান।