האם יש פה מישהו שיודע לבנות רובוטים?
 

האם יש פה מישהו שיודע לבנות רובוטים?
למנועי חיפוש וכו'.
GOOGLEBOT לדוגמא..
משהו שמחפש ברשת האתרים..

מישהו יודע לבנות \ איך בונים דבר כזה???

חעח
GOOGLEBOT זה מחשב עם תוכנה
מחשב ממש חזק עם מעבד סוס
בלי מערכת הפעלה אפילו אני מתאר לעצמי (או אולי אם.. O.o)
שמריץ חיפוש..
בקיצור,
תוותר.

זה לא מחשב אחד.
זה מערך של 100 אלף מחשבים..

אני יכול לבנות עכביש (spider) ואולי איזה מערכת שתאנדקס לך מידע (בעזרת index server), בחינם אפילו (בשביל האתגר נו מה? |קורץ|). אתה מסדר את ה cluster??

בואו כולנו נגזים... למה לא?

"מערך המיחשוב של גוגל מתבסס על כ30 אשכולות שונים (Data-Centers) המכילים בתוכם כל אחד בתורו מעל 2,000 מחשבים דמוייPC. סה"כ זהו מערך חסר תקדים של 60,000 מחשבים שונים המחוברים יחדיו בשיתוף פעולה מדהים ויוצרים את מערכת החיפוש היעילה הידועה בשם גוגל. זוהי המערכת המבוזרת המסחרית הגדולה ביותר הנמצאת בשימוש בעולם המכילה כ 40TB של אינפורמציה. הנחת העבודה הבסיסית של גוגל היא שכ 2 מחשבים שונים בכל יום בכל אחד מהאשכולות השונים יקרסו/יפסיקו לעבוד ובכל זאת מנוע החיפוש ימשיך לעבוד כרגיל."

שים לב שזה מעודכן לשנת 2004 בלבד (נלקח מאתר מורנו'ס)
www.google.com/bot.html

אני לא כ"כ מתעניין בגוגל ברמה כזאת, אבל ידעתי שזה מעל 50 אלף... אבל המרחק בין 50, או אפילו 60 ל-100 אלף הוא בהחלט גדול, במיוחד כשמדובר במספרים כאלה...

אני לא מתכווון לעשות GOOGLE2 ..
LOL
אני רוצה רוצה לנסות ולהתקדם עם מערכת חיפוש אתרים קטנה בעזרת רובוט.
ומי שיכול לעזור לי (אלעד) בבקשה תעזרו לי..

מצאתי את זה וזה די מעניין חחח..
http://www.robotstxt.org/wc/active/html/index.html
הרבה סוגי רובוטים

אין לי כוח כרגע לבנות משהו
מחר בבוקר אני אשרבט איזה עכביש ואני אפרסם את הקוד שלו