Solidus Labs พัฒนาซอฟต์แวร์ด้านความปลอดภัยและการปฏิบัติตามข้อกำหนดสำหรับระบบนิเวศสินทรัพย์ดิจิทัล กลุ่มผลิตภัณฑ์ของบริษัทประกอบด้วยการเฝ้าระวังการซื้อขาย การตรวจสอบธุรกรรม และ Staking Guard ซึ่งช่วยให้องค์กรต่าง ๆ ระบุและจัดการความเสี่ยงตลอดวงจรชีวิตของสินทรัพย์ดิจิทัล บริษัทดำเนินงานบนจุดบรรจบระหว่างความปลอดภัยทางไซเบอร์ เทคโนโลยีการเงิน และการพัฒนาซอฟต์แวร์
วิศวกรข้อมูลอาวุโส ด้านโครงสร้างพื้นฐาน ClickHouse — Solidus Labs (ทำงานแบบไฮบริด สหราชอาณาจักร)
วิศวกรข้อมูลอาวุโสรับผิดชอบการขยายโครงสร้างพื้นฐาน ClickHouse ที่อยู่เบื้องหลังแพลตฟอร์มเฝ้าระวังการซื้อขายของ Solidus Labs บทบาทนี้ครอบคลุมไปป์ไลน์ข้อมูลปริมาณสูง สถาปัตยกรรมคลัสเตอร์ ความน่าเชื่อถือ และการสังเกตการณ์สำหรับงานแบบเรียลไทม์และงานแบบแบตช์
รายละเอียด
- ออกแบบและเพิ่มประสิทธิภาพสถาปัตยกรรมข้อมูล ClickHouse ซึ่งรวมถึงเอนจินตาราง การแบ่งพาร์ทิชัน materialized view และนโยบายการจัดเก็บข้อมูล
- จัดการการกำหนดขนาดคลัสเตอร์ ClickHouse โทโพโลยี และการวางแผนความจุสำหรับการรับข้อมูลแบบเรียลไทม์และการประมวลผลแบบแบตช์ T+1
- เป็นผู้นำแนวทางด้านความน่าเชื่อถือของข้อมูลและการกำจัดข้อมูลซ้ำใน ClickHouse และไปป์ไลน์ที่เกี่ยวข้อง
- สร้างและยกระดับการตรวจสอบ การแจ้งเตือน และการสังเกตการณ์สำหรับการจำลองข้อมูล การรวมข้อมูล ความหน่วงของคิวรี และการใช้ทรัพยากร
- ทำหน้าที่เป็นผู้เชี่ยวชาญ ClickHouse ของบริษัท และให้คำแนะนำทีมวิศวกรรมด้านการเพิ่มประสิทธิภาพคิวรีและการสร้างแบบจำลองข้อมูล
- ทำงานร่วมกับผู้ให้บริการ ClickHouse เพื่อสืบสวนปัญหา ประเมินความสามารถ และส่งมอบการปรับปรุง
- ทำงานร่วมกับทีมวิเคราะห์ข้อมูล แมชชีนเลิร์นนิง และผลิตภัณฑ์ เพื่อปรับปรุงการจัดเก็บ สคีมา รูปแบบข้อมูล และประสิทธิภาพคิวรี
- กำหนดและรักษามาตรฐาน ClickHouse สำหรับการกำหนดเวอร์ชันสคีมาและการกำกับดูแลข้อมูล
คุณสมบัติ
- วุฒิปริญญาตรีด้านวิทยาการคอมพิวเตอร์
- มีประสบการณ์ด้านวิศวกรรมซอฟต์แวร์โดยลงมือปฏิบัติจริงกับ Java, Rust หรือ Python อย่างน้อยห้าปี
- มีประสบการณ์แปดปีขึ้นไปในการสร้างระบบและไปป์ไลน์วิศวกรรมข้อมูลสำหรับสภาพแวดล้อมการผลิตที่มีปริมาณข้อมูลสูงและความหน่วงต่ำ
- มีประสบการณ์ระดับมืออาชีพในการพัฒนาระบบเรียลไทม์ที่มีความหน่วงต่ำและประมวลผลเหตุการณ์หลายพันล้านรายการต่อวัน
- มีความรู้เชิงปฏิบัติขั้นสูงเกี่ยวกับ ClickHouse ซึ่งรวมถึงสถาปัตยกรรมคลัสเตอร์ เอนจินตาราง การจำลองข้อมูล การแบ่งชาร์ด และการเพิ่มประสิทธิภาพคิวรี
- มีประสบการณ์อย่างมากกับ Apache Kafka, Spark, Airflow, Kubernetes, Redis, Snowflake และระบบแคช
- มีทักษะ SQL และการปรับแต่งคิวรีระดับผู้เชี่ยวชาญ รวมถึง materialized view, projection, TTL ของ ClickHouse และการเพิ่มประสิทธิภาพ MergeTree
- มีประสบการณ์ใช้แพลตฟอร์มการสังเกตการณ์ เช่น Prometheus และ Grafana
- แสดงให้เห็นถึงความใฝ่รู้ ความเป็นอิสระ และความคิดริเริ่มในการระบุและส่งมอบโซลูชัน
- มีทักษะการสื่อสารทั้งลายลักษณ์อักษรและการพูดที่ยอดเยี่ยม พร้อมความสามารถในการให้คำแนะนำและสร้างอิทธิพลต่อวิศวกรในทีมแบบกระจาย