اذا كان لديك موقع جديد انتبه ان تنسى وضع ملف ال : Robots.txt حتى تتجنب أرشفة الموقع اثناء التطوير لأننا عادتاً مانقوم في تعبئة محتوى مزيف حتى نجرب, تخيل معي بعد ان تنشر الموقع والناس تبحث عنه ويبدا يظهر الصفحات القديمة في نتائج البحث وعند الضغط عليها Page not Found 404 ومن هنا يبداً Google في حجب موقعك من على الشبكة حتى يأتي للمستخدم في نتائج تعمل لا نتائج 404 وهذه كارثة حدثت معي وحبيت ان انصح اخواني هنا ان