Sciforium
Sciforium
Sciforium là công ty hạ tầng trí tuệ nhân tạo, phát triển các công cụ serverless cho những ứng dụng đa phương thức được triển khai trong môi trường production. API hợp nhất tương thích với OpenAI của công ty cung cấp cho các đội ngũ quyền truy cập vào các dịch vụ văn bản, hình ảnh, video và âm thanh, cùng với dịch vụ lưu trữ mô hình, thư viện mô hình, quy trình đánh giá theo thời gian thực và khả năng triển khai tác nhân được quản lý. Sciforium vận hành phần cứng GPU AMD được tích hợp theo chiều dọc, tập trung hỗ trợ các đội ngũ phát triển, đánh giá và triển khai hệ thống AI với hiệu suất ổn định, chi phí thấp hơn và mức độ riêng tư cao hơn.

Kỹ sư dữ liệu mô hình nền tảng

Xây dựng bộ dữ liệu tiền huấn luyện và hậu huấn luyện quy mô petabyte cho các mô hình AI đa phương thức của Sciforium. Phát triển pipeline dữ liệu hiệu năng cao cho huấn luyện ngôn ngữ, hình ảnh và video.

Mô tả

  • Xây dựng bộ dữ liệu tiền huấn luyện cho các mô hình ngôn ngữ lớn từ đầu đến cuối.
  • Lựa chọn và cân bằng dữ liệu web, mã nguồn, sách và bài báo kỹ thuật để cải thiện hiệu suất mô hình trong các tác vụ tiếp theo.
  • Tạo pipeline để làm sạch, khử trùng lặp và trích xuất tín hiệu từ petabyte dữ liệu phi cấu trúc.
  • Dẫn dắt phát triển bộ dữ liệu hậu huấn luyện, bao gồm chỉ dẫn tinh chỉnh có giám sát, hội thoại nhiều lượt và dữ liệu ưu tiên RLHF/DPO.
  • Giám sát việc thu thập và xử lý dữ liệu hình ảnh và video.
  • Viết các tập lệnh xử lý dữ liệu Python thông lượng cao, sử dụng đa tiến trình và đa luồng.
  • Phân tích thống kê kho ngữ liệu huấn luyện để phát hiện thiên lệch, khoảng trống kiến thức và suy giảm chất lượng.
  • Xây dựng pipeline dữ liệu tổng hợp để lấp đầy khoảng trống trong các bộ dữ liệu thu thập tự nhiên.
  • Giải quyết các thách thức về căn chỉnh đa phương thức, nén video và tính nhất quán theo thời gian.

Yêu cầu

  • Có ít nhất năm năm kinh nghiệm trong ngành về khoa học dữ liệu hoặc học máy.
  • Có kinh nghiệm thực tế đã được chứng minh trong việc xây dựng và quản lý bộ dữ liệu cho mô hình nền tảng.
  • Thành thạo Python ở trình độ nâng cao, bao gồm đa tiến trình, đa luồng và quản lý bộ nhớ hiệu quả.
  • Có kinh nghiệm làm việc với bộ dữ liệu quy mô petabyte dành cho mô hình ngôn ngữ lớn hoặc mô hình thị giác lớn trong môi trường sản xuất.
  • Có kinh nghiệm tạo bộ dữ liệu huấn luyện LLM quy mô lớn từ đầu bằng dữ liệu thu thập thô trên web và dữ liệu chuyên ngành.
  • Có kinh nghiệm thực tế xây dựng bộ dữ liệu cho RLHF, DPO và làm theo chỉ dẫn nhiều lượt.
  • Có kinh nghiệm quản lý quy trình gán nhãn bởi con người và bộ dữ liệu chuẩn vàng chất lượng cao.
  • Thành thạo Spark, Ray, WebDataset, Parquet hoặc các framework và định dạng tương đương dành cho dữ liệu quy mô lớn.
  • Ưu tiên có kinh nghiệm xây dựng bộ dữ liệu hình ảnh hoặc video quy mô lớn từ đầu.
  • Ưu tiên quen thuộc với thu thập dữ liệu đa phương thức, xử lý video, codec và nén.
  • Ưu tiên có kinh nghiệm thiết kế lược đồ gán nhãn phức tạp cho các bộ đánh giá chuẩn về suy luận, lập trình và toán học.
  • Ưu tiên có bằng thạc sĩ hoặc tiến sĩ trong lĩnh vực định lượng, tập trung vào AI lấy dữ liệu làm trọng tâm hoặc truy xuất thông tin.
  • Có giấy phép hợp pháp để làm việc tại Hoa Kỳ.

Phúc lợi

  • Bảo hiểm y tế, nha khoa và thị lực.
  • Chương trình 401(k).
  • Bữa trưa hằng ngày, đồ ăn nhẹ và đồ uống.
  • Nghỉ phép linh hoạt.
  • Mức lương cạnh tranh.
  • Cổ phần.

Việc làm liên quan

Cardinal Health

Quản lý Kỹ thuật Dữ liệu tại Cardinal Health

Cardinal Health

Dẫn dắt các nhóm chuyển đổi dữ liệu doanh nghiệp tại Cardinal Health, phụ trách nền tảng Google Cloud cùng hoạt động phân tích và AI/ML. Định hướng triển khai, cải tiến nền tảng và phát triển nhân tài.

Mở
Verana Health

Kỹ sư Backend cấp cao/Staff, Nền tảng và Tiếp nhận dữ liệu

Verana Health

Xây dựng và mở rộng quy mô các dịch vụ tiếp nhận dữ liệu lâm sàng, OCR, OpenSearch và nền tảng ung thư học tại Verana Health. Thiết kế API, quy trình ETL và vi dịch vụ hỗ trợ khai thác thông tin y tế thực tế.

Mở
Berkshire Hathaway Homestate Companies - Workers Compensation Division

Quản lý kỹ thuật nền tảng dữ liệu cấp cao

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1.000 Nhân viên
B2BBảo hiểmTài chính

Dẫn dắt nền tảng dữ liệu doanh nghiệp, đội ngũ kỹ thuật và hoạt động vận hành của công ty bảo hiểm trên Azure, SQL, NoSQL và phân tích dữ liệu. Phụ trách độ tin cậy, tự động hóa, tuân thủ và chiến lược nền tảng.

Mở
Berkshire Hathaway Homestate Companies - Workers Compensation Division

Quản lý cấp cao Kỹ thuật Nền tảng Dữ liệu

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1.000 Nhân viên
B2BBảo hiểmTài chính

Dẫn dắt nhóm kỹ thuật nền tảng dữ liệu hỗ trợ hoạt động bảo hiểm của Berkshire Hathaway Homestate Companies. Phạm vi công việc gồm nền tảng cơ sở dữ liệu và phân tích, hạ tầng đám mây, tự động hóa, độ tin cậy và quản lý nhân sự.

Mở
Wealth.com

Kỹ sư dữ liệu cấp cao

Wealth.com
51 – 200 Nhân viên
Bảo hiểmPháp lýTư vấn

Dẫn dắt nền tảng dữ liệu AWS của Wealth.com với dbt, Redshift và Airflow. Xây dựng các hệ thống dữ liệu đáng tin cậy cho nền tảng lập kế hoạch di sản.

Mở