الأربعاء , يناير 18 2017
الرئيسية / السيو / ملف الروبتكس Robot.txt و أهميته لذى محركات البحث

ملف الروبتكس Robot.txt و أهميته لذى محركات البحث

سنشرح في هذه الحلقة من أساسيات السيو أحد أهم الملفات و الخصائص في مبادئ السيو, ملف Robots.txt و أهميته لذى محركات البحث. الكثير ممن يضعونهم على مدوناتهم لكن دون فهم وظيفته و دوره الأساسي. بعد هذا الموضوع ستفهم كل شيئ عن هذا الملف و ان شاء الله في حلقة موالية سنعرف كيفية اضافته على مدونتنا بلوجر.

ملف الروبتكس Robot.txt و أهميته في أرشفة المواقع

ملف الروبتكس Robot.txt و أهميته في أرشفة المواقع

أول سؤال سيتبادر في ذهنك الآن  لعله

ماهو ملف الروبتكس و ما دوره ?!

ملف الروبوتكس يتكون من كلمة روبوت Robot و يقصد بها الرجل الآلي و هي أدق معنى .و يطلق عليها أيضا Wanderers  المتجولون, و كذلك  Spiders  أي العناكب.
الان بدأنا نعرف عن ماذا أتحدث عندما ذكرت كلمة عناكب اليس كذلك ?

نستخلص من هذا كله أن Robots هي عناكب محركات البحث و بالتالي سيكون ملف Robots.txt هو المسؤوول عن توجيه هذه العناكب. و بهذا يجب على كل مدون أو صاحب مواقع أن يقوم بعمل ملف الروبوتكس لكي يقوم بتوجيه محركات بحث القادمة الى موقعه.

للتوضيح أكثر فمثلا لدينا صفحة بالموقع و هي كالتالي :
www.mycomputer-now.com/SEO
قبل أن يقوم التعامل مع الصفحة من قبل عناكب محركات البحث يتم التحقق أولا من وجود ملف Robots.txt  و قراءته. لكن …

كيف ستتم قرائة هذا الملف ?!

لنفرض انك  قمت بانشاء قسم جديد في موقعك باسم SEO واردت حجبه عن محرك بحث جوجل مثلا و ستمنع أرشفته ستكتب الأمر التالي داخل ملف Robot.txt

user-agent : googlebot disallow : /SEO/

اما اذا اردت حجب القسم عن جميع محركات البحث فاستبدل السطر الاول بما يلي
user-agent : *

وضعت النجمة مكان الاسم و هذا يدل على أن الملف سيمنع من جميع محركات البحث و ليس فقط جوجل..
الآن فهمت معي, السطر الأول يمكننا تخصيصه لمحرك بحث واحد فقط أو لجميع محركات البحث Google,yahoo,msn…

ملاحظة : يسمى الزاحف الخاص بمحرك جوجل والذي يقوم بالمرور على المواقع باسم googlebot
في السطر الثاني كما قلت قمنا بحجب فقط قسم السيو أما ادا أردنا حجب كافة الموقع عن محركات البحث يكفي أن نغيره الى :
disallow :  /

علامة / تعبر عن حجب كامل للموقع لذى يجب التعامل بحذر في مثل هذا النوع من الملفات.
و عدم كتابة / يدل على السماح لمحركات البحث بفهرسة كل محتويات الموقع.
الى جانب سطر disallow  يوجد أمر آخر و هو للأمر بزيارة و تصفح صفحة معينة أو الموقع ككل
و هذا الأمر هو Allow  مثال :
Allow: /
و يعني السماح بأرشفة الموقع ككل 😉

في هذا الموضوع قمت بشرح ملف Robot.txt و أهميته في أرشفة المواقع . سأضع كذلك حلقة فيديو أشرح فيها كيفية انشاء هذا الملف بالطريقة الصحيحة ووضعه على مدونتك بلوجر . لذى كن على اتصال بصفحتنا على الفيسبوك و كذلك لا تسنى الانضمام على قناتنا يوتوب من أجل أن تتوصل بجديد دروس و حلقات السيو .

عن admin

الطيب من مواليد 1994 من المغرب مهتم بالتكنولوجيا الحديثة و بعالم المعلوميات عامة و من عشاق التدوين العربي و ادارة المواقع بالاضافة الى التجارة الالكترونية أحب مساعدة الناس بما علمني الله كما أسعى الى تحقيق طموحاتي و الرقي بالتدوين العربي من خلال هذا الموقع المتواضع أتمنى أن تنال مقالاتي اعجابكم و تلقى اهتمامكم.

تعليق واحد

  1. السلام عليكم طيب انا عندي فكرة هل من مساعده

اترك رد