اريد ان اعرف حجم قاعدة البيانات المتوقع عند ارشفة مواقع كبيرة ؟

الذي سيحدد الرقم التقريبي هو نوع الأرشفة التي ستقوم بها

• هل ستقوم بأرشفة كاملة للموقع(صفحات-صور-ملفات-مرئيات-إلخ)؟

• أم نُسخة HTML للمحتوى النصي؟

• أم ستقوم بعمل بوت لجلب محتوى معين؟

• تقريباً لو تم عمل بوت لجلب المحتوى النصي فقط بدون أكواد HTML/CSS/JS ستكون مساحة قاعدة البيانات للمواقع الكبيرة بمُعدل من 25 جيجا بايت إلى 250 جيجا لكل موقع وبالتالي سيكون لديك قاعدة بحجم 25000 إلى 250000 جيجا بايت، هذه البيانات من شخص يعمل في مجال الأرشفة وأخبرني أن قاعدة بيانات موقع مصراوي تقريباً هي 250 جيجا بايت.

• في هذه الحالة يجب عليك دراسة التعامل مع البيانات الكبيرة واستخدام أنظمة أكثر ملائمة لهذا الكم الهائل من البيانات كاستخدام قواعد بيانات NoSQL.