السلام عليكم

انا دخلت على أدوات مشرفي المواقع الخاصة بجوجل

لقيت فيه جدول اسمه (أخطاء الزحف)
و فيه في الجدول دا (تم حظره بواسطة ملف robots.txt)

و لما ضغطت على الكلمة دي
اللي هيا تم حظره

لقيت ملايين من الصفحات
دي أعمل فيها ايه
كمان انا مش عارف احذفها ازاي
لأني لما باضغط عليها
بيفتح لي موضوع في المنتدى


ايه بقا أخطاء الزحف دي