ما رأيكم في فكرة زاحف شبكة يقوم ...

السلام عليكم

أولا أقدم نفسي أنا عبد الرحيم، أتشرف بالإنتساب إلى مجمع Arabia.io

بالنسبة لي هذه أول مشاركة و أود من خلالها التعرف على آرائكم بعد عمل شاق ألا و هو زاحف شبكة مهمته مراقبة الصفحات الرئيسة للمواقع هذه المرة ليس مجرد جمعها بل ,

يقوم بتحديد حالة الرد من الخادم إن كانت 200 أي الإجابة جيدة و الصفحة المطلوبة موجودة، أو باقي أنواع الأخطاء مثل 404, Host not found, Time out, أو غيرها

الخدمة الأساسية للموقع مجانية و هي متمثلة في عرض كم هائل من المواقع مع إمكانية البحث المتطورة، كما تحاول البرمجية اكتشاف لغة الموقع، كما تقدم البرمجية مجموعة منحنيات تتناسب و نتائج البحث التي يقوم بها الزائر .

لن أقوم بنشر الموقع الآن لأن شكله سيئ كما أني لم أعمل صفحات التسجيل و الدخول و غيرها و لم أختر حتى المضيف، لكني أود معرفة آرائكم حول الفكرة مبدئيا، كما أتشرف بالإستماع إلى اقتراحاتكم.

و السلام عليكم


أنصحك تبرمج الزاحف بلغة بايثون فهي سريعة وتدعم الـ Multithreading وكذلك لديها عدة مكتبات ودوال تسهل عليك إستخراج الروابط من الصفحات... وبالتوفيق لك

شكرا سعيد، أما لغة بايثون فهي عالية المستوى و هي مناسبة جدا لكتابة زاحف شبكة فصحيح قولك بأن لديها عدة مكتبات ودوال متوفرة، لكني صممت الزاحف بلغة جافا و ليس الفارق بين السرعة كبير هنا إذ أن الزاحف لا يقوم بعمليات حسابية كبيرة فجل الوقت متوقف على انتظار الرد من الخادم بعد الطلب،