Keep IT Simple (KIS) là nhà cung cấp dịch vụ và giải pháp CNTT có trụ sở tại Thung lũng Silicon, phục vụ các tổ chức trên khắp California và nhiều khu vực khác. Được thành lập vào năm 1988, công ty hỗ trợ khách hàng giải quyết các nhu cầu công nghệ phức tạp thông qua các dịch vụ an ninh mạng, ảo hóa, giải pháp đám mây và tư vấn hạ tầng mạng. Công ty hoạt động trong các lĩnh vực như logistics, y tế và an ninh mạng, tập trung vào tư vấn CNTT thiết thực, các giải pháp tiết kiệm chi phí và dịch vụ khách hàng nhanh chóng, tận tâm.
Kỹ sư dữ liệu cấp cao, Databricks và nền tảng dữ liệu AI
Dẫn dắt thiết kế nền tảng dữ liệu Databricks cho một công ty bảo hiểm và quản lý tài sản toàn cầu. Thúc đẩy phân tích trên đám mây, AI và học máy, quản trị dữ liệu và hiện đại hóa doanh nghiệp.
Mô tả
- Thiết kế và duy trì các quy trình dữ liệu có khả năng mở rộng bằng Databricks, Spark và công nghệ đám mây.
- Xây dựng và tối ưu hóa các khuôn khổ nạp dữ liệu theo lô và theo thời gian thực.
- Tạo các mẫu kỹ thuật và công cụ tăng tốc có thể tái sử dụng cho giải pháp dữ liệu doanh nghiệp.
- Triển khai chất lượng dữ liệu, khả năng quan sát, dòng dữ liệu và quản trị trên toàn hệ sinh thái dữ liệu.
- Hỗ trợ các sáng kiến hiện đại hóa dữ liệu quy mô lớn và di chuyển lên đám mây.
- Thiết kế kiến trúc Delta Lake và mô hình dữ liệu Medallion.
- Phát triển quy trình ETL và ELT được tối ưu hóa bằng notebook, quy trình công việc Databricks và Delta Live Tables.
- Thiết lập các phương pháp tinh chỉnh hiệu năng, tối ưu chi phí và quản lý khối lượng công việc.
- Sử dụng Unity Catalog để quản lý quản trị dữ liệu, bảo mật và siêu dữ liệu.
- Triển khai quy trình CI/CD và hạ tầng dưới dạng mã cho các đợt triển khai Databricks.
- Thiết kế kiến trúc dữ liệu đám mây gốc cho Azure và AWS.
- Tích hợp các nguồn dữ liệu doanh nghiệp, gồm SQL Server, Oracle, API, SaaS và nền tảng truyền dữ liệu trực tuyến.
- Xây dựng dịch vụ dữ liệu bảo mật, có khả năng chống chịu và đáp ứng nhu cầu về tính sẵn sàng cao cũng như khôi phục sau thảm họa.
- Phối hợp với các nhóm hạ tầng và bảo mật để áp dụng biện pháp kiểm soát bảo mật đám mây và tiêu chuẩn tuân thủ.
- Xây dựng và tối ưu hóa sản phẩm dữ liệu cho các khối lượng công việc AI, học máy và AI tạo sinh.
- Phát triển quy trình kỹ thuật đặc trưng và tập dữ liệu được chọn lọc để huấn luyện và suy luận mô hình.
- Hỗ trợ cơ sở dữ liệu vector, tìm kiếm ngữ nghĩa, tạo sinh tăng cường truy xuất và ứng dụng mô hình ngôn ngữ lớn (LLM).
- Phối hợp với nhà khoa học dữ liệu và kỹ sư AI để đưa giải pháp học máy vào vận hành.
- Áp dụng phương pháp MLOps và DataOps để hỗ trợ triển khai AI có khả năng mở rộng.
- Dẫn dắt các sáng kiến kỹ thuật dữ liệu phức tạp.
- Thiết lập tiêu chuẩn kiến trúc, phương pháp kỹ thuật và hướng dẫn phát triển.
- Hướng dẫn các kỹ sư cấp dưới và cấp trung.
- Đánh giá kiến trúc và đưa ra khuyến nghị kỹ thuật.
- Thúc đẩy tự động hóa, khả năng quan sát và phương pháp kỹ thuật nền tảng.
Yêu cầu
- Có bằng cử nhân khoa học máy tính, công nghệ thông tin, kỹ thuật hoặc lĩnh vực liên quan.
- Có ít nhất 8 năm kinh nghiệm về kỹ thuật dữ liệu, kho dữ liệu hoặc phát triển nền tảng dữ liệu.
- Có ít nhất 5 năm kinh nghiệm thực hành với Databricks và Apache Spark.
- Có kinh nghiệm thiết kế và triển khai nền tảng dữ liệu đám mây cấp doanh nghiệp.
- Có kinh nghiệm dẫn dắt sáng kiến kỹ thuật và hướng dẫn nhóm kỹ sư.
- Có kinh nghiệm với Databricks, Apache Spark (PySpark và Spark SQL), Delta Lake, Delta Live Tables, Unity Catalog, kho dữ liệu và mô hình hóa dữ liệu.
- Có kinh nghiệm với Python, SQL và PowerShell hoặc tự động hóa bằng tập lệnh.
- Có kinh nghiệm với Microsoft Azure, AWS và dịch vụ lưu trữ, tính toán đám mây gốc.
- Có kinh nghiệm với SQL Server, Oracle, PostgreSQL và cơ sở dữ liệu.
- Có kinh nghiệm với Azure Data Factory, Databricks Workflows, Kafka hoặc truyền sự kiện và REST API.
- Có kinh nghiệm với GitHub, Azure DevOps, quy trình CI/CD, Terraform và hạ tầng dưới dạng mã.
- Có kiến thức về công cụ giám sát và cảnh báo, khuôn khổ chất lượng dữ liệu, tối ưu hiệu năng, ghi nhật ký và khắc phục sự cố.
- Có kiến thức về quy trình dữ liệu học máy, kho đặc trưng, MLOps, khái niệm AI tạo sinh, cơ sở dữ liệu vector, tạo sinh tăng cường truy xuất, quản trị AI và nguyên tắc AI có trách nhiệm.
- Ưu tiên có chứng chỉ Databricks Certified Data Engineer Professional, Azure Data Engineer Associate hoặc AWS Data Analytics.
- Ưu tiên có kinh nghiệm trong các ngành chịu sự quản lý, chương trình quản trị dữ liệu doanh nghiệp và tích hợp AI vào môi trường sản xuất.
- Có tư duy chiến lược, kỹ năng giải quyết vấn đề, lãnh đạo kỹ thuật, thiết kế kiến trúc, quản lý các bên liên quan, giao tiếp và thuyết trình; đồng thời chú trọng cải tiến liên tục, đổi mới và ứng dụng AI, cũng như nhận thức về rủi ro và tuân thủ.
Phúc lợi
- Hình thức hợp tác: nhà thầu độc lập (Pessoa Jurídica, PJ).
- Làm việc theo hình thức kết hợp, có thể làm việc từ xa một phần thời gian.