U3F1ZWV6ZTIzMTg0MjgxNjExX0FjdGl2YXRpb24yNjI2NDU5MjQ3MzY=
recent
أخبار ساخنة

اضافة ملف الروبوت تكست Robots.txt مخصص لبلوجر

اضافة ملف Robots.txt مخصص لبلوجر بالطريقة الصحيحة 

في هذا المقال سنتعلم كيفية انشاء ملف الروبوت تكست Robots.txt مخصص لبلوجر لأرشفة المدونة وتصدر محركات البحث بالطريقة الصحيحة ان شاء الله .


كيفية اضافة ملف Robots.txt مخصص لبلوجر بالطريقة الصحيحة
كيفية انشاء ملف Robots.txt مخصص لبلوجر وتصدر محركات البحث

ملف الربوت تكست Robot.txt

يستخدم أصحاب مواقع الويب ملف robots.txt لتقديم إرشادات حول مواقعهم إلى روبوتات الويب؛ يسمى هذا بروتوكول استبعاد أو السماح للروبوتات أو العناكب بتصفح موقعك.  حيث يعمل ذلك على النحو التالي:

يريد روبوت أن يزور عنوان URL لموقع الويب ، على سبيل المثال ،
http://www.example.com/welcome.html. 

قبل القيام بذلك
يقوم أولاً بالتحقق من http://www.example.com/robots.txt ، ويعثر على: 

User-agent: * 
Disallow: / 
وهنا في هذا الأمر يمنع العناكب من تصفح الموقع. وعليه فان هذه الأكواد مهمة جداً وبنفس الوقت خطيرة جداً في التعامل معها وقد تؤثر سلباً على موقعك.

كود الروبوت تكست Robot.txt

قد تجد ملف أو الكود الخاص بالروبوت تكست Robot.txt عند العديد من المبرمجين وأصحاب المواقع على الانترنت كما يلي:
================================================
The "User-agent": * 

يعني أن هذا القسم ينطبق على جميع برامج الروبوت.

================================================

"Disallow: /"

يخبرالروبوتات أنه لا ينبغي زيارة أي صفحات على الموقع.

================================================

Sitemap:https://www.example.com/sitemap.xml
هذا أمر خاص بخريطة الموقع التي ستقوم الربوتات بتصفحها
================================================

انشاء خريطة الموقع Sitemap وملف الروبوت تكست Robot.txt

لانشاء خريطة موقع جاهزة كل ماعليك فعله هو اضافة هذا الرابط واستبدال الجزء الملون باللون الأحمر برابط موقعك :
Sitemap:https://www.Example.com/sitemap.xml

يظهر لك ملف ال SiteMap جاهز, كل ماعليك فعله هو التحقق منه واضافة الجزء الخاص باعلانات جوجل أدسنس ليصبح الملف كاملاً كالشكل التالي :

(يمكنك نسخ الكود التالي جاهز فقط استبدل الرابط الموجود برابط مدونتك أو موقعك )

User-agent: Mediapartners-Google
Disallow:User-agent: *
Disallow: /search
Allow: /
Sitemap:https://Example.com/sitemap.xml

ملاحظة:

الملف /robots.txt هو ملف متاح للجمهور. يمكن لأي شخص الاطلاع على أقسام الخادم التي لا تريد أن يستخدمها الروبوت. لذلك لا تحاول استخدام /robots.txt لإخفاء المعلومات.


شاركونا معلوماتكم وارائكم
د.محمد عبد الرحيم
الاسمبريد إلكترونيرسالة