
Mindrift একটি কৃত্রিম বুদ্ধিমত্তা প্রতিভা মার্কেটপ্লেস এবং SaaS প্ল্যাটফর্ম, যা পেশাদার অবদানকারী ও বিষয়বিশেষজ্ঞদের প্রযুক্তি কোম্পানিগুলোর AI প্রশিক্ষণ এবং মূল্যায়ন প্রকল্পের সঙ্গে সংযুক্ত করে। Toloka-এর অংশ হিসেবে, এটি লেখক, সম্পাদক, QA বিশেষজ্ঞ, বিজ্ঞানী এবং অন্যান্য বিষয়বিশেষজ্ঞদের সঙ্গে কাজ করে। তাঁরা প্রশিক্ষণ ডেটা তৈরি, মডেলের নিরাপত্তা ও যুক্তি বিশ্লেষণ মূল্যায়ন, মিডিয়ার গুণমান যাচাই এবং AI-এর কর্মদক্ষতা ও নির্ভরযোগ্যতা উন্নত করার জন্য বাস্তবজগতের পরিস্থিতি তৈরিতে সহায়তা করেন। Mindrift মূল্যায়ন ও পরিচয় যাচাইয়ের মাধ্যমে অবদানকারীদের নিয়োগ এবং যাচাই করে, এরপর AI প্রশিক্ষণ ও মূল্যায়নসংক্রান্ত কাজে নমনীয়, পারিশ্রমিকযুক্ত প্রকল্পের সুযোগ দেয়।
সিনিয়র পাইথন ওয়েব স্ক্র্যাপিং ইঞ্জিনিয়ার – ফ্রিল্যান্স রিমোট
Mindrift-এর AI প্রকল্পের জন্য নির্ভরযোগ্য Python-ভিত্তিক ওয়েব স্ক্র্যাপিং ও ডেটা প্রসেসিং কর্মপ্রবাহ তৈরি করুন। জটিল, ডায়নামিক ওয়েবসাইট থেকে কাঠামোবদ্ধ ডেটাসেট সংগ্রহ, যাচাই এবং বৃহৎ পরিসরে প্রক্রিয়াকরণ করুন।
বিবরণ
- জটিল ওয়েবসাইটজুড়ে শুরু থেকে শেষ পর্যন্ত ডেটা নিষ্কাশন কর্মপ্রবাহ পরিচালনা করে সম্পূর্ণ, নির্ভুল ও কাঠামোবদ্ধ ডেটাসেট সরবরাহ করুন
- নির্ধারিত প্রয়োজনীয়তা অনুযায়ী ডেটা সংগ্রহ, যাচাই এবং কাজ সম্পাদন ত্বরান্বিত করতে উপলভ্য টুল ও কাস্টম কর্মপ্রবাহ ব্যবহার করুন
- JavaScript-এ রেন্ডার হওয়া কনটেন্ট, ইন্টারঅ্যাক্টিভ সোর্স এবং পরিবর্তনশীল ওয়েবসাইট আচরণের জন্য নিষ্কাশন পদ্ধতি মানিয়ে নিন
- ডেটার মান বজায় রাখতে যাচাই, একাধিক সোর্সের পারস্পরিক পরীক্ষা, ফরম্যাট নিয়ন্ত্রণ এবং পদ্ধতিগত ভেরিফিকেশন প্রয়োগ করুন
- দক্ষ ব্যাচিং বা সমান্তরাল প্রসেসিংয়ের মাধ্যমে বৃহৎ ডেটাসেট স্ক্র্যাপিংয়ের পরিসর বাড়ান
- সাইটের কাঠামোতে সামান্য পরিবর্তন হলেও নিষ্কাশন ব্যর্থতা পর্যবেক্ষণ করুন এবং স্থিতিশীলতা বজায় রাখুন
- Apify, OpenRouter এবং সংশ্লিষ্ট প্রযুক্তিসহ ওয়েব স্ক্র্যাপিং, ডেটা নিষ্কাশন ও ডেটা প্রসেসিংয়ে দক্ষতা ব্যবহার করুন
প্রয়োজনীয়তা
- ডেটা ইঞ্জিনিয়ারিং, ওয়েব স্ক্র্যাপিং, অটোমেশন বা সফটওয়্যার ডেভেলপমেন্টে ৫ বছরের বেশি প্রাসঙ্গিক অভিজ্ঞতা
- ইঞ্জিনিয়ারিং, অ্যাপ্লায়েড ম্যাথমেটিক্স, কম্পিউটার সায়েন্স বা সংশ্লিষ্ট কারিগরি ক্ষেত্রে ব্যাচেলরস বা মাস্টার্স ডিগ্রি থাকলে অতিরিক্ত সুবিধা
- স্ক্রিপ্টিং, অটোমেশন এবং ডেটা নিষ্কাশন কর্মপ্রবাহে ব্যবহারিক অভিজ্ঞতাসহ শক্তিশালী কারিগরি ভিত্তি
- BeautifulSoup, Selenium বা অনুরূপ টুলে ব্যাপক Python স্ক্র্যাপিং অভিজ্ঞতা; JavaScript, AJAX, ইনফিনিট স্ক্রল এবং প্রক্সি-ভিত্তিক API-সহ
- জটিল হায়ারার্কি, আর্কাইভ করা পেজ এবং অসঙ্গত HTML কাঠামো থেকে ডেটা নিষ্কাশনের সক্ষমতা
- CSV, JSON বা Google Sheets-এ কাঠামোবদ্ধ ডেটাসেট পরিষ্কার, স্বাভাবিকীকরণ এবং যাচাইয়ের অভিজ্ঞতা
- বৃহৎ পরিসরে অ্যান্টি-বট ব্যবস্থা ও পরিবর্তনশীল সাইট কাঠামো সামলানোর অভিজ্ঞতা
- AWS বা সমতুল্য ক্লাউড অবকাঠামো এবং Docker কনটেইনারাইজেশনে ব্যবহারিক অভিজ্ঞতা
- অটোমেশন কাজে LangChain, OpenRouter বা অনুরূপ LLM ফ্রেমওয়ার্ক প্রয়োগের হাতে-কলমে অভিজ্ঞতা
- বিস্তারিত বিষয়ে উচ্চ মনোযোগ এবং ডেটার নির্ভুলতার প্রতি দৃঢ় অঙ্গীকার
- স্বনির্দেশিতভাবে কাজ করার সক্ষমতা এবং স্বাধীনভাবে সমস্যা সমাধানের দক্ষতা
- উচ্চ-মধ্যবর্তী ইংরেজি দক্ষতা (B2) বা তার বেশি
- GitHub লিংক থাকলে অতিরিক্ত সুবিধা
সুবিধাসমূহ
- ফ্রিল্যান্স কাজের সুযোগ
- পার্ট-টাইম রিমোট কাজ
- সক্রিয় প্রকল্পের পর্যায়ে সপ্তাহে আনুমানিক ১০–২০ ঘণ্টা