הרשם שאלות ותשובות רשימת חברים לוח שנה חיפוש הודעות מהיום סמן פורומים כנקראו

   
|!|

 
 
כלים לאשכול תצורת הצגה
Prev הודעה קודמת   הודעה הבאה Next
ישן 01-07-07, 09:33   # 4
Gil B
חבר וותיק
דירוג מסחר: (0)
 
מיני פרופיל
תאריך הצטרפות: Jun 2007
הודעות: 1,120

Gil B לא מחובר  

אני לא בטוח אבל הבנתיש אם אתה שם את שתי השורות הבאות בrobots.txt שנמצא בשרת שלך (robots.txt זה הקובץ הסבר לספיידרים והרובוטים באינטרנט), אז אתה מגביל את הרובוט שלהם.
הנה השורות:
קוד:
 User-agent: Slurp
Crawl-delay: 10
USERAGENT, מגדיר את הספיידר אליו אתה פונוה.
והקרול דיליי מגביל את הכמות, אתה יכול לבחור כמות שאתה רוצה שנראה לך שתהיה טובה, ולא תפגע בשרת.
__________________

  Reply With Quote
 

חברים פעילים הצופים באשכול זה: 1 (0 חברים ו- 1 אורחים)
 

כלים לאשכול
תצורת הצגה

חוקי פירסום
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts

BB code is מופעל
סמיילים הם מופעל
[IMG] קוד מופעל
קוד HTML מכובה

קפיצה לפורום


כל הזמנים הם GMT +2. הזמן כעת הוא 11:17.

מופעל באמצעות VBulletin גרסה 3.8.6
כל הזכויות שמורות ©
כל הזכויות שמורות לסולל יבוא ורשתות (1997) בע"מ