Mindrift เป็นตลาดบุคลากรและแพลตฟอร์ม SaaS ด้านปัญญาประดิษฐ์ที่เชื่อมโยงผู้ร่วมงานมืออาชีพและผู้เชี่ยวชาญเฉพาะด้านกับโครงการฝึกอบรมและประเมินผล AI จากบริษัทเทคโนโลยีต่าง ๆ ในฐานะส่วนหนึ่งของ Toloka Mindrift ทำงานร่วมกับนักเขียน บรรณาธิการ ผู้เชี่ยวชาญด้าน QA นักวิทยาศาสตร์ และผู้เชี่ยวชาญเฉพาะด้านอื่น ๆ เพื่อสร้างข้อมูลฝึกอบรม ประเมินความปลอดภัยและความสามารถในการใช้เหตุผลของโมเดล ประเมินคุณภาพสื่อ และสร้างสถานการณ์จากโลกจริงเพื่อปรับปรุงประสิทธิภาพและความน่าเชื่อถือของ AI. Mindrift คัดเลือกและตรวจสอบผู้ร่วมงานผ่านการประเมินและการยืนยันตัวตน จากนั้นจึงเสนอโอกาสทำโครงการแบบรับค่าตอบแทนที่ยืดหยุ่นในงานฝึกอบรมและประเมินผล AI
วิศวกร Python อาวุโสด้านการเก็บข้อมูลเว็บ — งานฟรีแลนซ์ ทำงานทางไกลจากอินเดีย
Mindrift กำลังมองหาวิศวกร Python อาวุโสเพื่อดึง ตรวจสอบ และขยายเวิร์กโฟลว์ข้อมูลเว็บแบบมีโครงสร้างสำหรับโครงการ Tendem AI บทบาทนี้ครอบคลุม Python โครงสร้างพื้นฐานคลาวด์ Docker และเฟรมเวิร์กการทำงานอัตโนมัติที่ใช้ LLM
รายละเอียด
- จัดการเวิร์กโฟลว์การดึงข้อมูลทั้งหมดจากเว็บไซต์ที่มีความซับซ้อน
- ส่งมอบชุดข้อมูลแบบมีโครงสร้างที่ครอบคลุม มีความแม่นยำสูง และดำเนินการได้ตรงตามกำหนดอย่างน่าเชื่อถือ
- ใช้เครื่องมือเฉพาะทางและเวิร์กโฟลว์ที่ปรับให้เหมาะสมเพื่อเร่งการเก็บข้อมูล การตรวจสอบ และการดำเนินงาน
- ดึงข้อมูลจากแหล่งข้อมูลแบบไดนามิกและโต้ตอบได้ รวมถึงหน้าที่แสดงผลด้วย JavaScript
- ปรับวิธีการเก็บข้อมูลตามการเปลี่ยนแปลงของพฤติกรรมเว็บไซต์และโครงสร้างหน้าเว็บ
- รักษาคุณภาพข้อมูลด้วยการตรวจสอบ การเปรียบเทียบข้ามแหล่งข้อมูล มาตรฐานการจัดรูปแบบ และการทบทวนอย่างเป็นระบบ
- ขยายการเก็บข้อมูลปริมาณมากด้วยการประมวลผลแบบแบตช์และแบบขนานอย่างมีประสิทธิภาพ
- ติดตามข้อผิดพลาดและสนับสนุนการดำเนินงานเก็บข้อมูลที่เสถียรและเชื่อถือได้
- ประยุกต์ใช้ความเชี่ยวชาญด้าน Python การเก็บข้อมูลเว็บ การดึงข้อมูล และการประมวลผลข้อมูลกับโครงการ Tendem
คุณสมบัติ
- มีประสบการณ์ที่เกี่ยวข้องอย่างน้อย 5 ปีด้านวิศวกรรมข้อมูล การเก็บข้อมูลเว็บ ระบบอัตโนมัติ หรือการพัฒนาซอฟต์แวร์
- วุฒิปริญญาตรีหรือโทด้านวิศวกรรม คณิตศาสตร์ประยุกต์ วิทยาการคอมพิวเตอร์ หรือสาขาเทคนิคที่เกี่ยวข้องจะได้รับการพิจารณาเป็นพิเศษ
- มีพื้นฐานเชิงปฏิบัติที่แข็งแกร่งด้านการเขียนสคริปต์ ระบบอัตโนมัติ และเวิร์กโฟลว์การดึงข้อมูล
- มีประสบการณ์ขั้นสูงด้านการเก็บข้อมูลด้วย Python โดยใช้ BeautifulSoup, Selenium หรือเครื่องมือเทียบเท่า รวมถึงเนื้อหาแบบไดนามิกและ API ที่ใช้พร็อกซี
- สามารถดึงข้อมูลจากโครงสร้างที่ซับซ้อน รวมถึงลำดับชั้น หน้าเว็บที่จัดเก็บถาวร และ HTML ที่ไม่สอดคล้องกัน
- มีประสบการณ์อย่างมากด้านการทำความสะอาด การทำให้เป็นมาตรฐาน และการตรวจสอบข้อมูล
- มีประสบการณ์จริงในการจัดการระบบป้องกันบอตและโครงสร้างเว็บไซต์แบบไดนามิกในระดับขนาดใหญ่
- มีประสบการณ์กับ AWS หรือโครงสร้างพื้นฐานคลาวด์เทียบเท่า และการทำคอนเทนเนอร์ด้วย Docker
- เคยใช้งาน LangChain, OpenRouter หรือเฟรมเวิร์ก LLM ที่คล้ายกันเพื่อทำระบบอัตโนมัติ
- ใส่ใจในรายละเอียดและให้ความสำคัญกับความถูกต้องและคุณภาพของข้อมูล
- สามารถทำงานได้อย่างอิสระ แก้ไขปัญหา และจัดการงานเชิงรุก
- มีทักษะภาษาอังกฤษระดับกลางค่อนสูง (B2) หรือสูงกว่า
- หากมีลิงก์ GitHub จะได้รับการพิจารณาเป็นพิเศษ
สวัสดิการ
- รูปแบบการทำงานแบบฟรีแลนซ์
- ทำงานทางไกลแบบพาร์ตไทม์จากอินเดีย
- ประมาณ 10–20 ชั่วโมงต่อสัปดาห์ในช่วงที่โครงการอยู่ระหว่างดำเนินการ
- โอกาสทำงานในโครงการเทคโนโลยีผ่านแพลตฟอร์ม Mindrift
- ค่าตอบแทนเทียบเท่าสูงสุด 30 ดอลลาร์สหรัฐต่อชั่วโมง ขึ้นอยู่กับระดับประสบการณ์และความเร็วในการมีส่วนร่วม