ציטוט:
נכתב במקור על ידי Anton Livshits
הקטע שאני כבר מזמן מופיע בגוגל בחיפושים... יצרתי Sitemap ב-Google Webmaster Tools והוא מגיש את כל מה שאני מפרסם אחרי כמה דקות... אז לא הבנתי מה הקטע שגם הגוגלבוט בא לסרוק את האתר... 
|
זה העכביש של גוגל שאחראי לסרוק את האתר.
העכביש סורק את האתר על פי תדירות מסויימת לבדוק האם התוכן השתנה וכו'.
כשאתה שולח מפת אתר גוגל אינו סורק את המפה ואז מחליט באופן מיידי על הסריקה.
העכביש "גולש" באתר באמצעות הקישורים.
המפה אולי מקלה על תהליך סריקת הקישורים אבל אינה אחראית על סריקת התוכן.
בכל מקרה השימוש הכי טוב למפת אתר הוא שאפשר בעזרתה למצוא ליקויים באתר היכולים להוריד את הדרוג של האתר שלנו.
שימושי מאוד כאשר יש לך הרבה דפים באתר.