|
| ملف Robots.txt |
من الضروري جدا توجيه عناكب الأرشفة إلى مدونتك من أجل إظهار مقالاتك في نتائج البحث والتحكم في ظهورها من عدمه ومن أجل التحكم فيه يتم استخدام ملف Robots.txt من أجل تسهيل هذه المهمة.
ماهو ملف Robots.txt
Robots.txt هو ملف نصي يحتوي على مجموعة من الإرشادات لبرامج الروبوت "برامج زحف محركات البحث" التي تقوم بالزحف مدونتك. وهي التي تتحكم في تحدد الأماكن المراد الزحف إليها والتي يُسمح لها بالوصول إليها أو لا يُسمح لها بدا لك. حيث يمكنك بسهولة استبعاد نطاقات أو روابط كاملة أو رابط فرعي واحد أو أكثر أو ملفات من زحف محرك البحث باستخدام هذا ملف Robots.txt.طريقة إضافة ملف Robots.txt في بلوجر
- أولا قم بالدخول إلى
الإعدادات في مدونتك . - ثم النزول لأسفل إلى أن تجد خيار
برامج الزحف والفهرسة . - تأكد من تفعيل الخيار
تفعيل محتوى ملف Robots.txt مخصص . - وقم بالضغط على
ملف Robots.txt مخصّص . - انسخ ملف
Robots.txt التالي مع تغير رابط مدونتك ثم عمل حفظ .
ملف Robots.txt
User-agent: * Disallow: /search?updated-min= Disallow: /search?updated-max= Disallow: /search/label/*?updated-min= Disallow: /search/label/*?updated-max= Allow: / Sitemap:رابط_مدونتك /sitemap.xml
شرح اوامر ملف Robots.txt
- User-agent: هدأ الأمر يشير إلى اسم الروبوت الزاحف (يمكن العثور على الأسماء في قاعدة بيانات الروبوتات)
- Disallow: يمنع الزحف إلى مشاركات أو صفحات وكذا روابط المدونة.
- Allow: عكس Disallow يسمح بالزحف إلى الملفات وصفحات وروابط ومشاركات المدونة.
- Sitemap (اختياري): يظهر خريطة المدونة.