قبل عدة ايام قمت بتحليل للموقع و عدد الاعضاء الذين شاركو على الاقل بتعليق واحد يصل عددهم الى 8903

ما هي التقنيات التي استخدمتها؟ هل يمكنك نشر تفاصيل أكثر

python و web crawler من صنعي

هل تستطيع أن تعرف من هو أكثر عضو حصل على تسليبات أو أكثر موضوع\تعليق حصل على تسليب أو العكس في النقاط الإيجابية طوال عمر الموقع؟

أجل بالطبع و لكن سيكون علي تشغيل الكرولر من جديد

و لكن اكثر جملة تكررت في الموقع هي

حسوب I/O هو مجتمع عربي، رجاءً شارك باللغة العربية الفصحى فقط

و لكن اكثر جملة تكررت في الموقع هي

حسوب I/O هو مجتمع عربي، رجاءً شارك باللغة العربية الفصحى فقط

كل هذا بسببك يا @vegas

هذه تورث..بحثت عنها عندما رأيت تعليقك السابق لفيجاس منذ يومين تقريبا لأدلل لك أنها أكثر كلمة ذكرت..لكن الطائي جاء بأدلة أكثر عوضا عن الرابط الذي كنت سأرسله لك

أظن أن المرتبة الثانية من نصيب كلمة تسليب

وأنا أظن أن إحدى الكلمات الأكثر شيوعًا هي حسوب أو I/O.

أنا عندما بحثت لم أبحث عن الجملة كلها بل عن النصف الثاني لإن الأول تغير

أنا معك في الحرفين وليس الكلمة..فلا تنسى نصيب أرابيا

لا أعلم عمومًا ماهية هذا الكرولر الذي تتكلم عنه، لكنني أقترح عليك إعادة تشغيله ونشر بضعة معلومات للمجتمع، لعّل ذاك الموضوع الذي تنشره يصبح صاحب أكثر نقاط إيجابية.


بالمناسبة، ما الذي تستطيع فعله أيضًا بهذا "الكرولر"؟ هل تستطيع استخدامه على مواقع أخرى؟

الكرولر هو https://en.wikipedia.org/wiki/Web_crawler

و به تستطيع ان تحمل كل الصور في موقع ما، او كل التعليقات لمنتدي

او اي شيء يخطر على بالك في صفحة انترنيت معينة

حسنًا وهل تستطيع مثلاً أن تعرف عدد تكرار عنصر ما في الموقع؟ مثل عدد المواضيع بأكملها أو عدد التعليقات أو عدد التقييمات؟

أتمنى منك إن أعدت تشغيله أو Whatever أن تجيبني عن أسئلتي:

هل تستطيع أن تعرف من هو أكثر عضو حصل على تسليبات أو أكثر موضوع\تعليق حصل على تسليب أو العكس في النقاط الإيجابية طوال عمر الموقع؟

ولدي عشرات الأسئلة الأخرى أيضًا، تذكر أنني بانتظارك.

اجل بالطبع، و سأحاول تشغيله مرة اخرى، و لكن لأنه يأخذ الكثير من الوقت و الباندوث للأنترنيت، فمن الممكن ان أأخذ وقت في عمل هذا

ممكن مشاركة الكود إذا أمكن ﻷني أعمل على مشروع و سأبرمج web crawler و أريد أستفيد من ما صنعته

مازال الكود قيد التطوير، عندما ينتهي سأقوم بإطلاقه

لا بأس أرسل لي نسخة لكي أطلع عليه إن سمحت

هل قمت ببنائه من الصفر ام بالإعتماد على مشاريع اخرى

تذكير: هل واجهت مشكلة مع الحظر من قبل السيرفر؟

اجل، و لكنني استخدمت أمر يجعل البرنامج ينام حتى ينتهي مده الحظر

تقصد يتوقف بين فترات معينة مثلا كدالة (sleep) أعلم ذلك، لكن هل استكعت استنتاج مقدار توقيت الحظر؟

هناك طرق أخرى لتخطي الحظر لم أجربها على حسوب كتغيير قيم الهيدر و المعرف الالكتروني ..الخ لأن المجتمع يعتمد على خاصية الموجوة في مفسّر ruby للحظر المؤقت.

ولن يقل عدد الجميع (معلقين وغير معلقين) عن 13 ألف بالطبع..أليس كذلك!

يمكنك معرفة عدد تقريبي من عدد المتابعين في المجتمعات،فمثلا أكثر مجتمع لاحظت أن فيه أكبر عدد من المتابعين،فهو يحوي أكثر بقليل من 13 ألف متابع.

ماذا سيفيد معرفة هذا الأمر ؟

حسوب I/O

مجتمع لطرح الشكاوي والإقتراحات المتعلقة بتطوير حسوب I/O والإعلانات المتعلقة به

9.4 ألف متابع