random
أخر الأخبار

كيفية انشاء ملف Robots txt مخصص لبلوجر

كيفية انشاء ملف Robots txt مخصص لبلوجر

كيفية انشاء ملف Robots txt مخصص لبلوجر وتصدر محركات البحث.


كل مدون يجب عليه استخدام ملف robots txt لتقديم إرشادات حول مدونته او موقعه إلى روبوتات قوقل؛ يسمى هذا بروتوكول استبعاد أو السماح للروبوتات العنكبوتية بالتصفح لموقعك واقدم لك ايضا الاكواد الخاصة meta tags .

كيف يعمل robots txt ؟


يريد روبوت قوقل زيارة عنوان URL لموقع الويب الخاص بي ، على سبيل المثال:

https://joker0o.de/2020/04/Professional-Publister-template.html.


قبل القيام بذلك يقوم أولاً بالتحقق من https://joker0o.de/robots.txt ، ويعثر على:

User-agent: *
Disallow: /


ماذا تعني تلك الاوامر بالنسبة لنا ؟

User-agent: *


يعني أن هذا القسم ينطبق على كل برامج الروبوت.

Disallow: /


يخبرالروبوتات أنه لا ينبغي زيارة أي صفحات انت من يحددها على المدونة مثل اتصل بنا ومن نحن.

 Sitemap:https://www.example.com/atom.xml?redirect=false&start-index=1&max-results=500


هذا أمر خاص بخريطة الموقع التي ستقوم الربوتات بتصفحها.


لانشاء خريطة للمدونة Sitemap :


نذهب الى موقع ctrlq.org ونضع الرابط الخاص بمدونة بلوجر وننقر على Generate Sitemap فيظهر لك الــ Sitemap جاهز وكل ما يطلب منك هو التحقق منه على الشكل التالي :

User-agent: Mediapartners-Google
Disallow:User-agent: *
Disallow: /search
Allow: /
Sitemap:https://Example.com/atom.xml?redirect=false&start-index=1&max-results=500

ملحوظة :


ينصح بإستخدام Disallow: عدة مرات وذلك من اجل حظر وصول الروبوتات الى بعض الصفحات، ومثال على ذلك:

هذا رابط صفحة اتصل بنا لمدونتي على حظره في الــ robots.txt ، ما يتوجب فعله في رابط مدونتي هو:


اخذ الجزء الاخير من الرابط على هذا الشكل p/contactform1contact-form-name.html ليصبح بعض اضافته على شكل :

Disallow: p/contactform1contact-form-name.html


يمكنك تحميل الــ robots.txt الخاص بمدونتي من هنا، مع التعديل عليه :


التحميل من هنا

google-playkhamsatmostaqltradent