
Mindrift একটি কৃত্রিম বুদ্ধিমত্তা প্রতিভা মার্কেটপ্লেস এবং SaaS প্ল্যাটফর্ম, যা পেশাদার অবদানকারী ও বিষয়বিশেষজ্ঞদের প্রযুক্তি কোম্পানিগুলোর AI প্রশিক্ষণ এবং মূল্যায়ন প্রকল্পের সঙ্গে সংযুক্ত করে। Toloka-এর অংশ হিসেবে, এটি লেখক, সম্পাদক, QA বিশেষজ্ঞ, বিজ্ঞানী এবং অন্যান্য বিষয়বিশেষজ্ঞদের সঙ্গে কাজ করে। তাঁরা প্রশিক্ষণ ডেটা তৈরি, মডেলের নিরাপত্তা ও যুক্তি বিশ্লেষণ মূল্যায়ন, মিডিয়ার গুণমান যাচাই এবং AI-এর কর্মদক্ষতা ও নির্ভরযোগ্যতা উন্নত করার জন্য বাস্তবজগতের পরিস্থিতি তৈরিতে সহায়তা করেন। Mindrift মূল্যায়ন ও পরিচয় যাচাইয়ের মাধ্যমে অবদানকারীদের নিয়োগ এবং যাচাই করে, এরপর AI প্রশিক্ষণ ও মূল্যায়নসংক্রান্ত কাজে নমনীয়, পারিশ্রমিকযুক্ত প্রকল্পের সুযোগ দেয়।
ইতালিতে সিনিয়র পাইথন ডেটা স্ক্র্যাপিং ইঞ্জিনিয়ার (রিমোট)
Mindrift-এর Tendem AI প্রকল্পে যোগ দিয়ে নির্ভরযোগ্য ওয়েব স্ক্র্যাপিং এবং কাঠামোবদ্ধ ডেটা পাইপলাইন তৈরি করুন। এই ভূমিকায় ডায়নামিক ওয়েবসাইট, ডেটা যাচাই, স্কেলযোগ্য ডেটা সংগ্রহ এবং অটোমেশনের ওপর গুরুত্ব দেওয়া হবে।
বিবরণ
- জটিল ওয়েবসাইটজুড়ে সম্পূর্ণ ডেটা সংগ্রহ প্রক্রিয়ার নেতৃত্ব দিয়ে বিস্তৃত, নির্ভুল এবং নির্ভরযোগ্য কাঠামোবদ্ধ ডেটাসেট সরবরাহ করুন
- নির্ধারিত স্পেসিফিকেশন অনুযায়ী সংগ্রহ, যাচাই এবং কাজ সম্পন্ন করার গতি বাড়াতে উপলভ্য প্ল্যাটফর্ম ও উপযোগী ওয়ার্কফ্লো ব্যবহার করুন
- JavaScript-এ রেন্ডার হওয়া পেজ, ইন্টার্যাক্টিভ উৎস এবং পরিবর্তনশীল ওয়েবসাইট আচরণের জন্য ডেটা সংগ্রহের পদ্ধতি মানিয়ে নিন
- যাচাই, বিভিন্ন উৎসের পারস্পরিক পরীক্ষা, ফরম্যাট নিয়ন্ত্রণ এবং সরবরাহের আগে কাঠামোবদ্ধ পর্যালোচনার মাধ্যমে ডেটার মান বজায় রাখুন
- দক্ষ ব্যাচিং ও সমান্তরাল প্রক্রিয়াকরণের মাধ্যমে বড় ডেটাসেটের জন্য স্ক্র্যাপিং সক্ষমতা বাড়ান
- ডেটা সংগ্রহের ব্যর্থতা পর্যবেক্ষণ করুন এবং সাইটের কাঠামো পরিবর্তিত হলেও কার্যক্রমের নির্ভরযোগ্যতা বজায় রাখুন
- Tendem প্রকল্পে ওয়েব স্ক্র্যাপিং, ডেটা সংগ্রহ এবং প্রক্রিয়াকরণে আপনার দক্ষতা প্রয়োগ করুন
- কার্যকর কাস্টম সমাধান তৈরি করতে প্রযুক্তিগত বিচারবোধের সঙ্গে Apify, OpenRouter এবং অন্যান্য টুল ব্যবহার করুন
প্রয়োজনীয়তা
- ডেটা ইঞ্জিনিয়ারিং, ওয়েব স্ক্র্যাপিং, অটোমেশন বা সফটওয়্যার ডেভেলপমেন্টে ৫ বা তার বেশি বছরের প্রাসঙ্গিক অভিজ্ঞতা আবশ্যক
- ইঞ্জিনিয়ারিং, অ্যাপ্লায়েড ম্যাথমেটিক্স, কম্পিউটার সায়েন্স বা সংশ্লিষ্ট প্রযুক্তিগত বিষয়ে স্নাতক বা স্নাতকোত্তর ডিগ্রি থাকলে তা সুবিধাজনক
- BeautifulSoup, Selenium বা সমতুল্য টুল, ডায়নামিক কনটেন্ট এবং প্রক্সিড API ব্যবহারে উন্নত Python স্ক্র্যাপিং অভিজ্ঞতা
- হায়ারার্কি, আর্কাইভ করা পেজ এবং অসামঞ্জস্যপূর্ণ HTML-এর মতো জটিল উৎস থেকে ডেটা সংগ্রহের সক্ষমতা
- CSV, JSON বা Google Sheets-এ সরবরাহের জন্য ডেটা পরিষ্কার, নর্মালাইজ এবং যাচাই করার অভিজ্ঞতা
- স্কেলে অ্যান্টি-বট সুরক্ষা ও পরিবর্তনশীল ওয়েবসাইট কাঠামো পরিচালনার বাস্তব অভিজ্ঞতা
- AWS বা সমতুল্য ক্লাউড অবকাঠামো এবং Docker-ভিত্তিক কনটেইনারাইজেশনে পরিচিতি
- অটোমেশনের জন্য LangChain, OpenRouter বা অনুরূপ LLM ফ্রেমওয়ার্ক হাতে-কলমে ব্যবহারের অভিজ্ঞতা
- বিস্তারিত বিষয়ে অসাধারণ মনোযোগ এবং ডেটার নির্ভুলতার ওপর দৃঢ় গুরুত্ব
- স্বাধীনভাবে কাজ, সমস্যা অনুসন্ধান এবং নিবিড় তত্ত্বাবধান ছাড়াই সমাধান করার সক্ষমতা
- উচ্চ-মধ্যবর্তী ইংরেজি দক্ষতা (B2) বা তার বেশি আবশ্যক
- GitHub প্রোফাইলের লিংক থাকলে তা সুবিধাজনক
সুবিধাসমূহ
- ফ্রিল্যান্স কাজের সুযোগ
- পার্ট-টাইম রিমোট ব্যবস্থা
- সক্রিয় প্রকল্প চলাকালে প্রতি সপ্তাহে ১০–২০ ঘণ্টা কাজের প্রত্যাশিত চাপ