Kỹ sư thu thập dữ liệu Python cấp cao làm việc tự do từ xa

Ai Cập Kết hợp Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư full-stack Kỹ sư phần mềm

Mô tả

Dẫn dắt các quy trình thu thập dữ liệu chuyên biệt cho dự án Tendem và các ứng dụng thực tế
Quản lý toàn bộ quy trình trích xuất dữ liệu trên các website phức tạp
Cung cấp các tập dữ liệu có cấu trúc đầy đủ, chính xác và đáng tin cậy
Áp dụng các công cụ sẵn có và quy trình tùy chỉnh để đẩy nhanh việc thu thập, kiểm tra và thực hiện nhiệm vụ
Thu thập dữ liệu từ các nguồn động và tương tác, thích ứng với nội dung được kết xuất bằng JavaScript và hành vi website thay đổi
Duy trì chất lượng dữ liệu thông qua kiểm tra, đối chiếu giữa các nguồn, tiêu chuẩn định dạng và rà soát có hệ thống
Mở rộng quy mô thu thập dữ liệu lớn bằng cách xử lý theo lô hoặc song song hiệu quả
Theo dõi lỗi và duy trì tính ổn định khi cấu trúc website có những thay đổi nhỏ
Sử dụng Apify, OpenRouter và các công nghệ liên quan kết hợp với chuyên môn kỹ thuật cùng các giải pháp phù hợp

Yêu cầu

Yêu cầu có ít nhất năm năm kinh nghiệm liên quan trong lĩnh vực kỹ thuật dữ liệu, thu thập dữ liệu web, tự động hóa hoặc phát triển phần mềm
Bằng cử nhân hoặc thạc sĩ về kỹ thuật, toán học ứng dụng, khoa học máy tính hoặc lĩnh vực kỹ thuật liên quan là một lợi thế
Có nền tảng thực tiễn vững chắc về lập trình kịch bản, tự động hóa và quy trình trích xuất dữ liệu
Có kinh nghiệm sâu rộng về thu thập dữ liệu bằng Python với BeautifulSoup, Selenium hoặc các công cụ tương đương, nội dung JavaScript và AJAX, cuộn vô hạn và API qua proxy
Có khả năng trích xuất thông tin từ các cấu trúc phức tạp như hệ phân cấp, trang lưu trữ và HTML không nhất quán
Có kinh nghiệm làm sạch, chuẩn hóa và kiểm tra dữ liệu để cung cấp dưới dạng CSV, JSON hoặc Google Sheets có cấu trúc
Có kinh nghiệm thực tế trong việc xử lý các biện pháp chống bot và cấu trúc website thay đổi ở quy mô lớn
Có kinh nghiệm thực hành với AWS hoặc hạ tầng đám mây tương đương và đóng gói container bằng Docker
Có kinh nghiệm áp dụng LangChain, OpenRouter hoặc các framework LLM tương tự cho nhiệm vụ tự động hóa
Cẩn thận cao và tập trung mạnh vào độ chính xác của dữ liệu
Có khả năng làm việc độc lập và xử lý sự cố hiệu quả
Có hồ sơ GitHub là một lợi thế
Yêu cầu trình độ tiếng Anh trên trung cấp, từ B2 trở lên

Phúc lợi

Hình thức cộng tác tự do
Lịch làm việc từ xa bán thời gian
Khoảng 10–20 giờ mỗi tuần trong các giai đoạn dự án hoạt động
Cơ hội tham gia các dự án công nghệ đổi mới thông qua nền tảng Mindrift

Việc làm liên quan

51 – 200 Nhân viên

SaaS Tiếp thị Tư vấn

Elixir JavaScript Ruby

Xây dựng và cải thiện các ứng dụng full-stack cho khách hàng của Rubikal với vai trò Kỹ sư phần mềm cấp đầu. Tham gia thiết kế, kiểm thử, đánh giá mã và phát triển phần mềm có khả năng mở rộng.

Mở

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm

SaaS Sàn giao dịch Trí tuệ nhân tạo

Phát triển nội dung đào tạo kỹ thuật hướng đến khách hàng cho các sản phẩm đám mây, tự động hóa và quản lý HPE Aruba Networking. Tạo các mô-đun khóa học, tài liệu và hướng dẫn trong sản phẩm dành cho khách hàng mạng.

Mở

501 – 1.000 Nhân viên

Brazil

25 $ / giờ

Từ xa Bán thời gian Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư backend Kỹ sư phần mềm

SaaS Sàn giao dịch Trí tuệ nhân tạo

Kỹ sư Python cấp cao chịu trách nhiệm thu thập dữ liệu web đáng tin cậy, xác thực dữ liệu và cung cấp các bộ dữ liệu có cấu trúc cho các dự án công nghệ AI của Mindrift. Công việc bao gồm các website động, hệ thống chống bot, hạ tầng đám mây và công cụ tự động hóa dựa trên LLM.

Mở

501 – 1.000 Nhân viên

Ba Lan

40 $ / giờ

Từ xa Bán thời gian Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư backend Kỹ sư phần mềm

SaaS Sàn giao dịch Trí tuệ nhân tạo

Mindrift đang tìm kiếm kỹ sư Python cấp cao để xây dựng các quy trình thu thập dữ liệu web đáng tin cậy cho các dự án AI. Vai trò này tập trung vào việc trích xuất, xác thực và xử lý dữ liệu có cấu trúc từ các website phức tạp, có tính động.

Mở

501 – 1.000 Nhân viên

Romania

40 $ / giờ

Từ xa Bán thời gian Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư backend Kỹ sư phần mềm

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Kỹ sư Python cấp cao chịu trách nhiệm xây dựng các quy trình thu thập dữ liệu web và xử lý dữ liệu đáng tin cậy cho dự án Tendem AI của Mindrift. Vai trò này tập trung vào việc trích xuất, xác thực và mở rộng quy mô các tập dữ liệu có cấu trúc từ những trang web phức tạp.

Mở

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Phát triển giáo trình và nội dung đào tạo kỹ thuật dành cho khách hàng về các sản phẩm HPE Aruba Networking. Chuyển hóa công nghệ đám mây, tự động hóa và mạng phức tạp thành tài liệu thực tiễn cho khách hàng.

Mở

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Phát triển giáo trình và nội dung kỹ thuật hướng đến khách hàng cho các sản phẩm HPE Aruba Networking. Chuyển đổi các công nghệ đám mây, tự động hóa và mạng phức tạp thành tài liệu học tập thiết thực.

Mở

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Phát triển giáo trình kỹ thuật và nội dung đào tạo khách hàng cho các sản phẩm đám mây, tự động hóa và quản lý của HPE Networking. Biến các khái niệm mạng phức tạp thành tài liệu rõ ràng, thiết thực cho khách hàng.

Mở

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm

Nhà tài trợ visa H1B Doanh nghiệp Phần cứng Trí tuệ nhân tạo

Phát triển giáo trình và nội dung kỹ thuật hướng đến khách hàng cho các sản phẩm đám mây, tự động hóa và quản lý của HPE Aruba Networking. Chuyển hóa công nghệ mạng phức tạp thành tài liệu và tài liệu học tập thiết thực.

Mở

Mexico Từ xa Toàn thời gian Trung cấp Cao cấp Ngôn Ngữ Bắt Buộc: Tiếng Anh Kỹ sư phần mềm