العودة لقائمة المشاريع
مطور Python خبير Web Scraping لاستخراج بيانات من مواقع عقارات ومنصات سوشيال ميديا
الميزانية
$50.00 - $100.00
التصنيف
برمجة، تطوير المواقع والتطبيقات
المهارات المطلوبة
بايثون
web scraping
MySQL
استخراج البيانات
البحث على الإنترنت
تطوير البرمجيات
بايثون
web scraping
MySQL
استخراج البيانات
البحث على الإنترنت
تطوير البرمجيات
الوصف
أبحث عن مطور Python خبير في Web Scraping للعمل على مشروع استخراج بيانات من عدة منصات على الإنترنت.
المشروع يتضمن استخراج بيانات العقارات من المواقع التالية:
Bayut
Dubizzle
Property Finder
المطلوب هو استخراج جميع بيانات العقارات المنشورة في هذه المواقع بطريقة منظمة، بما في ذلك جميع الصفحات والنتائج.
كما أفضل أن يكون لدى المطور خبرة سابقة في Web Scraping لمنصات السوشيال ميديا، مثل:
Facebook
Instagram
TikTok
Reddit
LinkedIn
وذلك لأن المشروع يتطلب مطور لديه خبرة في التعامل مع المواقع الكبيرة والـ dynamic content وأنظمة الحماية الخاصة بالمواقع.
المتطلبات التقنية:
يجب أن يمتلك المطور خبرة قوية في:
Python Web Scraping
BeautifulSoup
Scrapy
Selenium
تفاصيل العمل:
لدي بعض الأكواد الأولية ويمكن استخدامها كنقطة بداية.
استخراج البيانات من جميع الصفحات (Pagination) وليس صفحة واحدة فقط.
حفظ البيانات في ملفات CSV منفصلة لكل موقع بطريقة منظمة.
بعد ذلك إدخال وتجميع البيانات داخل قاعدة بيانات SQL على السيرفر.
المخرجات المطلوبة:
سكربت Scraping مستقر وقابل للتشغيل.
ملفات CSV منظمة للبيانات.
قاعدة بيانات SQL تحتوي على البيانات المستخرجة.
يفضل:
وجود خبرة سابقة في مشاريع Scraping كبيرة.
القدرة على التعامل مع JavaScript rendering و dynamic loading.
يرجى إرفاق أمثلة أو مشاريع سابقة في Web Scraping عند التقديم.