ماهو ملف robots وكيف تتأكد أنه يعمل على مدونتك ؟

معنى كلمة robots :
المعنى الحرفى لكلمة robots هى " الرجل الالى" وهذا ادق معنى للrobots الخاصه بمحركات البحث ولكنها ايضا يطلق عليها فى بعض الاحيان Wanderers بمعنى "المتجولون" او spiders " بمعنى عناكب ....الان بدأنا نعرف عن ماذا اتحدث عندما ذكرت كلمة عناكب اليس كذلك؟
حسنا نستخلص من هذا ان ال robots هى عناكب محركات البحث وبالتالى سيكون ملف robots.txt هو المسؤول عن توجيه هذه العناكب

ما هى العناكب وما هى وظيفتها:
عناكب محركات البحث عباره عن برامج تتصفح المواقع تلقائيا . محركات البحث مثل Google تستخدم العناكب فى أرشفة محتويات المواقع لكى تبنى بها محرك بحث Google الشهير .كما ان بعض ال spammers -وهم الذين يهتمون بجمع الايميلات ومراسلتها بغرض الدعايا- يقومون بعمل عناكب بهدف جمع الايميلات من المواقع

والآن كيف تتأكد أنه يعمل على موقعك أو مدونتك
أول شئ تدخل الرابط الموجود أسفل التدوينة ثم تضع رابط موقعك وتختار checkup!
وإذا كانت النتيجة كما يلي فتطمن وإعلم أن ملف ربوت ليس به أخطاء وأنه يعمل بكفاءة
وإذا كان بملف ربوت خطأ فأعد إنشاأه من هنا

رابط الموقع من هنا