عيد الاضحى المبارك


مواضيع تهمك

ركن تطوير منتديات vb3.8.0 القسم خاص بتطوير منتديات الجيل الثالث ويمنع منعاً باتاً.. كتابة اي موضوع يهتم بمشاكل المنتديات (( يمنع وضع نسخ vBulletin ))

أمثلة على طريقة كتابة robots.txt

السلام عليكم ورحمة الله وبركاته الكثير من الاخوة كتبوا عن هذا الموضوع من قبل. لكن انا حبيت ان اضع امثلة لطريقة...

احصائياتى

الردود
0

المشاهدات
987
هيلبرنت
.:: رفيق درب ::.
  • هيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant futureهيلبرنت has a brilliant future

  • هيلبرنت غير متواجد حالياً

المشاركات
11,551

+التقييم
321

تاريخ التسجيل
Jul 2015

الاقامة
فى الدنيا

نظام التشغيل
windows 8

رقم العضوية
18
09-30-2017, 12:28 AM
المشاركة 1
09-30-2017, 12:28 AM
المشاركة 1
افتراضي أمثلة على طريقة كتابة robots.txt
السلام عليكم ورحمة الله وبركاته
الكثير من الاخوة كتبوا عن هذا الموضوع من قبل.

لكن انا حبيت ان اضع امثلة لطريقة الاستخدام افضل من الكلام الكثير:

تعريفات:
user-agent:هو اسم سبيدر او المتصفح اوحتى الهاتف المحمول. طبعا هنا نحن نتكلم عن روبوتس فهو اسم السبيدر.

Disallow:طريقة المنع

Crawl-delay:مدة تاخير بين زيارة اخرى

Request-rate:معدل طلب الصفحة

Visit-time:الاوقات المسموح بها بالزيارة

sitemap:خارطة الموقع بصيغة .xml او .xml.gz

-------
نبدأ الامثلة:
1.
كود:
User-agent: *
Disallow:
نحن نقول لكل سبيدر يزور الموقع بسبب * انه يمكن ان يتصفح الموقع وذلك لاننا لم نضع شيء امام المنع.

2.
كود:
User-agent: *
Disallow: /
هنا نحن نمنع كل السبيدر من زيارة اي صفحة في الموقع.

3.
كود:
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
منع الجميع من زيارة مجلدين cgi-bin و tmp

4.
كود:
User-agent: *
Disallow: /downloads/index.html
نمنع الجميع من زيارة صفحة معينة

5.
كود:
User-agent: BadBot
Disallow: /
هذا ربوت سيء امنعه من دخول الي الموقع

6.
كود:
User-agent: ]DontLikeBot
Disallow: /private/
اريد ان امنع هذا الروبوت من مجلد واحد فقط

7.
كود:
User-agent: *
Disallow: /
Request-rate: 1/5         
Visit-time: 0600-0800
مسموح بزيارة كل السبيدر لكل صفحات موقعي بس بالشروط التالية: معدل الوقت المسموح هو 5 ثواني لكل صفحة واحدة. وايضا الوقت المسموح فيه بالزيارة هو من 6 الى 8 صباحا gmt

8.
كود:
User-agent: msnbot 
Crawl-delay: 120
سبيدر msn مزعج وكثير الزيارات انا اريدة ان لا يزور صفحات موقعي الا كل دقيقتين.

9.
كود:
Sitemap: http://www.ketaballah.net/sitemap.xml
لكل السبيدرز هذا هو رابط خريطة موقعي

10.
كود:
User-agent: *
Disallow: /
User-agent: Googlebot
Disallow: /cgi-bin/
نمنع الجميع من الزيارة كل الموقع
لكن نسمح لجوجل بزيارة كل الموقع ما عدا cgi-bin

بالتوفيق اعزائي


اضافة رد

العلامات المرجعية

أمثلة على طريقة كتابة robots.txt


أدوات الموضوع

الانتقال السريع
المواضيع المتشابهه للموضوع: أمثلة على طريقة كتابة robots.txt
الموضوع كاتب الموضوع المنتدى مشاركات آخر مشاركة
[ شرح ] : طريقة كتابة محتوى جيدا طبقا لمعاير السيو داخل موقع هيلبرنت abo-karim ركن تقنيات محركات البحث سيو SEO 14 10-21-2022 10:40 AM
أمثلة على العقائد الإسلامية المتواترة هيلبرنت الركن العام للمواضيع العامة 0 06-24-2018 09:42 PM
[ شرح ] : طريقة انشاء ملف الروبوتس robots.txt بالكامل هيلبرنت ركن تقنيات محركات البحث سيو SEO 5 01-08-2017 12:17 AM
طريقة كتابة (السلام وعليكم ورحمه الله وبركاته) تلقائية Pro Ebram ركن مشاكل وطلبات المنتديات 7 12-06-2015 04:05 PM
شرح طريقة الربح عبر كتابة اكواد الكابتشا هيلبرنت ركن التجارة الالكترونية 1 09-22-2015 08:50 PM




الساعة الآن 06:47 PM
RSS 2.0XML Site MapTAGS SiteInfo SiteRSS FeedMap SectionsvB MapsMap TagSitemap ForumMaps Forum