22

تجربتي لبرمجة Crawler لسحب المشاريع المهتم بها من موقع مستقل

  • ilwido

كمستقل على منصة مستقل علي البحث كل يوم عن مشاريع قد تكون مناسبة لي لكي أقدم عليها بعض العروض، و في بعض الأحيان يكون الأمر ممل أو مرهق، فأنا أبحث فقط مثلا مشاريع تطوير تطبيقات الهواتف فقط، ليس لي أي دخل في باقي الأمور.. أو ربما تصل متأخرا للمشروع و تجد حوالي 657 شخص قد قدمو عروضهم عليه

لذالك قمت ببرمجة Crawler بسيط أقوم بإعطائه الكلمات المفتاحية التي أريدها في العناوين و هو يقوم بجلب لي فقط تلك المشاريع التي أنا مهتم بها..

الأمر بسيط تعطيه ال keywords ثم يقوم بالبحث عن أحدث المشاريع ثم يعيد لك Array من ال Objects للمشاريع..

يمكنكم معاينة الكود على موقع Github على الرابط

ما الذي يمكنني فعله بهذا السكربت ؟

يمكنك تحميله و التعديل عليه من أجل أغراض تعليمية فبرمجته بسيطة جدا، للإشارة فهو مبرمج ب nodeJs أو يمكنك إكمال العمل عليه (و ذالك ما سوف أفعله أنا) لكي يقوم بإرسال المشاريع لك على الإيميل كل ساعة مثلا, أو إرسالها لك على شكل تنبيهات sms ..

ملاحظة

السكربت كنت قد قمت برمجته فقط للإستخدام الشخصي و أنا غير مسؤول عن أي إستخدام غير لائق له.

يرجى الدخول لحسابك أو تسجيل حساب لتستطيع إضافة تعليق
حساب جديد دخول

التعليقات

عملت كراولر مشابه لخمسات. ينشر على قنوات تلقرام، بحسب نوع الخدمات سوف انشر الكود قريبا.

القنوات حاليا مفتوحة للعامة

سوشيل ميديا:

تصميم:

تعليق صوتي:

كتابة وترجمة:

خدمات الفيديو:

التسويق والنشر:

اين برمجة :( :( :(

سكربت رائع وجدا مفيد

بارك الله فيك

سوف احاول تعديله ليرسل نتائج لي كل يوم على تليكرام او ايميل واحاول تشغيله عن طريق serverless مجاني او فايربيس

سعيد أنه أعجبك، و يمكنك كذالك إضافة filters للميزانية و عدد العروض المقدمة مثلا، بحث يقوم بجلب فقط المشاريع التي مزانيتها فوق 500 دولار و عدد العروض المقدمة أقل من 5..

هل يمكن تطويره ليعرض لك نتائج الكلمة المفتاحية بحسب ميزانية العميل مثلا 25-50 يتجاهلها ومافوقها يرسلها لي

نعم يمكن عمل الأمر بكل سهولة.

أحسنت ، سيكون ذلك مفيد لو حولته إلى API حتى تستخدمه في بناء تطبيقات الجوال أو في اي شيء يخطر على بالك :)

تنبه أيضا إلى ما يتعلق برخصة مستقل بخصوص الزاحفات ، تحياتي