Mindrift
Mindrift
Mindrift একটি কৃত্রিম বুদ্ধিমত্তা প্রতিভা মার্কেটপ্লেস এবং SaaS প্ল্যাটফর্ম, যা পেশাদার অবদানকারী ও বিষয়বিশেষজ্ঞদের প্রযুক্তি কোম্পানিগুলোর AI প্রশিক্ষণ এবং মূল্যায়ন প্রকল্পের সঙ্গে সংযুক্ত করে। Toloka-এর অংশ হিসেবে, এটি লেখক, সম্পাদক, QA বিশেষজ্ঞ, বিজ্ঞানী এবং অন্যান্য বিষয়বিশেষজ্ঞদের সঙ্গে কাজ করে। তাঁরা প্রশিক্ষণ ডেটা তৈরি, মডেলের নিরাপত্তা ও যুক্তি বিশ্লেষণ মূল্যায়ন, মিডিয়ার গুণমান যাচাই এবং AI-এর কর্মদক্ষতা ও নির্ভরযোগ্যতা উন্নত করার জন্য বাস্তবজগতের পরিস্থিতি তৈরিতে সহায়তা করেন। Mindrift মূল্যায়ন ও পরিচয় যাচাইয়ের মাধ্যমে অবদানকারীদের নিয়োগ এবং যাচাই করে, এরপর AI প্রশিক্ষণ ও মূল্যায়নসংক্রান্ত কাজে নমনীয়, পারিশ্রমিকযুক্ত প্রকল্পের সুযোগ দেয়।

সিনিয়র পাইথন ডেটা স্ক্র্যাপিং ইঞ্জিনিয়ার — ফ্রিল্যান্স, ভারত রিমোট

Mindrift Tendem AI প্রকল্পের জন্য কাঠামোবদ্ধ ওয়েব ডেটা ওয়ার্কফ্লো সংগ্রহ, যাচাই এবং স্কেল করার কাজে একজন সিনিয়র পাইথন ইঞ্জিনিয়ার খুঁজছে। এই ভূমিকায় পাইথন, ক্লাউড অবকাঠামো, Docker এবং LLM-ভিত্তিক অটোমেশন ফ্রেমওয়ার্ক ব্যবহার করতে হবে।

বিবরণ

  • জটিল ওয়েবসাইটজুড়ে সম্পূর্ণ ডেটা সংগ্রহের ওয়ার্কফ্লো পরিচালনা করুন
  • সম্পূর্ণ কভারেজ, উচ্চ নির্ভুলতা এবং নির্ভরযোগ্য সময়সীমাসহ কাঠামোবদ্ধ ডেটাসেট সরবরাহ করুন
  • সংগ্রহ, যাচাই এবং কাজ সম্পাদনের গতি বাড়াতে বিশেষায়িত টুল ও উপযোগী ওয়ার্কফ্লো ব্যবহার করুন
  • JavaScript-এ রেন্ডার হওয়া পেজসহ ডায়নামিক ও ইন্টার‌্যাক্টিভ উৎস থেকে তথ্য সংগ্রহ করুন
  • ওয়েবসাইটের আচরণ ও পেজের কাঠামো পরিবর্তিত হলে স্ক্র্যাপিং পদ্ধতি সমন্বয় করুন
  • যাচাই, একাধিক উৎসের পারস্পরিক পরীক্ষা, ফরম্যাটিং মানদণ্ড এবং পদ্ধতিগত পর্যালোচনার মাধ্যমে ডেটার মান বজায় রাখুন
  • দক্ষ ব্যাচিং ও সমান্তরাল প্রক্রিয়াকরণের মাধ্যমে বৃহৎ পরিমাণ স্ক্র্যাপিং স্কেল করুন
  • ব্যর্থতা পর্যবেক্ষণ করুন এবং নির্ভরযোগ্য ও স্থিতিশীল স্ক্র্যাপিং কার্যক্রমে সহায়তা করুন
  • Tendem প্রকল্পে পাইথন, ওয়েব স্ক্র্যাপিং, ডেটা সংগ্রহ এবং ডেটা প্রক্রিয়াকরণে দক্ষতা প্রয়োগ করুন

প্রয়োজনীয়তা

  • ডেটা ইঞ্জিনিয়ারিং, ওয়েব স্ক্র্যাপিং, অটোমেশন বা সফটওয়্যার ডেভেলপমেন্টে ৫ বা তার বেশি বছরের প্রাসঙ্গিক অভিজ্ঞতা
  • ইঞ্জিনিয়ারিং, অ্যাপ্লাইড ম্যাথমেটিক্স, কম্পিউটার সায়েন্স বা সংশ্লিষ্ট কারিগরি ক্ষেত্রে ব্যাচেলরস বা মাস্টার্স ডিগ্রি থাকলে অতিরিক্ত সুবিধা
  • স্ক্রিপ্টিং, অটোমেশন এবং ডেটা সংগ্রহের ওয়ার্কফ্লো সম্পর্কে শক্তিশালী ব্যবহারিক ভিত্তি
  • BeautifulSoup, Selenium বা অনুরূপ টুল, ডায়নামিক কনটেন্ট এবং প্রক্সি-ভিত্তিক API ব্যবহার করে পাইথনে উন্নত স্ক্র্যাপিং অভিজ্ঞতা
  • হায়ারার্কি, আর্কাইভ করা পেজ এবং অসংগত HTML-সহ জটিল কাঠামো থেকে তথ্য সংগ্রহের সক্ষমতা
  • ডেটা ক্লিনিং, নর্মালাইজেশন এবং যাচাইয়ে শক্তিশালী অভিজ্ঞতা
  • স্কেলে অ্যান্টি-বট সুরক্ষা ও ডায়নামিক ওয়েবসাইট কাঠামো পরিচালনার ব্যবহারিক অভিজ্ঞতা
  • AWS বা সমতুল্য ক্লাউড অবকাঠামো এবং Docker কনটেইনারাইজেশনে অভিজ্ঞতা
  • অটোমেশনের জন্য LangChain, OpenRouter বা অনুরূপ LLM ফ্রেমওয়ার্ক ব্যবহার করার বাস্তব অভিজ্ঞতা
  • ডেটার নির্ভুলতা ও মানের প্রতি অত্যন্ত যত্নশীল দৃষ্টিভঙ্গি
  • স্বাধীনভাবে কাজ, সমস্যা সমাধান এবং সক্রিয়ভাবে কাজ পরিচালনার সক্ষমতা
  • আপার-ইন্টারমিডিয়েট ইংরেজি দক্ষতা (B2) বা তার বেশি
  • GitHub লিংক থাকলে অতিরিক্ত সুবিধা

সুবিধাসমূহ

  • ফ্রিল্যান্স কাজের সুযোগ
  • ভারত থেকে পার্ট-টাইম রিমোট কাজ
  • সক্রিয় প্রকল্প পর্যায়ে প্রতি সপ্তাহে আনুমানিক ১০–২০ ঘণ্টা
  • Mindrift প্ল্যাটফর্মের মাধ্যমে প্রযুক্তি প্রকল্পে কাজের সুযোগ
  • অভিজ্ঞতার স্তর ও অবদানের গতির ওপর নির্ভর করে প্রতি ঘণ্টায় সমতুল্য সর্বোচ্চ ৩০ ডলার পারিশ্রমিক