בניית מנוע חיפוש...הכיצד?
 

כיצד אפשר לבנות מנוע חיפוש אשר דומה למנוע החיפוש של גוגל...ז"א מבחינת התכונות של המנוע עצמו.....זאת אומרת להכניס בוטים אוטומטים אשר בודקים כל אתר כיצד הוא מתקדם לפי מילות חיפוש ועוד...ולמשל כל יומיים יהיה עדכון של הדירוג במנוע החיפוש עצמו...

יש לזה מדריכים וכו'...?

לבנות מנוע חיפוש כמו גוגל ייקח שנים ובנוסף תצטרך צוות גדול מאוד והרבה השקעה כספית
בכל מקרה בקשר לבוטים,כתבו תוכנה שסורקת את האתרים,והתדירות של הסריקה נקבעת ע"י אלגוריתם מסויים,וההתקדמות מדף לדף זה פשוט,התוכנה עוברת על כל הלינקים באתר,מה שלא מאונדקס היא מוסיפה לרשימה של אתרים שצריכים סריקה(משהו בסיגנון) ואז אחרי כמה זמן הדף נסרק
מדריכים אתה לא תמצא לזה...

בקיצור- שכח מזה אלא אם כן אתה מיליונר-מיליארדר. ואז הכסף יעשה את העבודה

יש לי שאלה בנושא, איך הבוט יודע מאיזה אתר להתחיל לסרוק ?

מתוך רשימה שאתה מגדיר לו, והיא כל הזמן גדלה בעזרת הוספת אתרים בכל סריקה

dsadas
 

כלומר,"בהתחלה" גוגל הסתמך ש:
1.לכל אתר\דף יש לינק אליו מאתר\דף אחר?
2.בעיקרון זה אומר שיקח כמה חודשים טובים אם לא שנים להוסיף מעל ל70-90% מהדפים שיש באינטרנט,לא?

אני חושב שמכניסים לו פשוט אתר, והוא מתחיל ללחוץ על קישורים.. וככה המאגר גדל
עריכה: עקפתם אותי :/
לגבי 1, לא לכל אתר יש לינק מאתר אחר, לכן לא כל האינטרנט מאונדקס אלא רק חלק מסויים.
לגבי 2 זה לוקח המון המון זמן לאנדקס, במיוחד אם אין לך חוות שרתים שמבצעות את זה.

נגיד ויש לך את המערכות.
אתה צריך הרבה שרתים כדי להכיל את המידע

אנשים, תפסיקו לדבר שטויות.

התיכנות של המנוע חיפוש לא מסובך בכלל, רוב העבודה היא בשיפור האלגוריתם ככה שידע לעבוד בצורה הטובה ביותר. אני פיתחתי מערכת למנוע חיפוש - בשביל ה"כיף" "לימוד" "אתגר" - וזה לא מסובך בכלל.

כמובן, אני לא משווה את מה שעשיתי לגוגל אבל הוא בהחלט ברמה סבירה +, והמליונים שדיברנו פה - אתה צריך השקעה בשביל שרתים שיחזיקו את כל המידע ויספקו הכל במהירות סבירה אבל בשביל התחלה אפשר להסתפק במס' שרתים בסכום חודשי סימלי (כמה אלפי שקלים בחודש).

נ.ב. למי שואל "אם זה ככה למה לא העלת אותו והפצת אותו?" - מהסיבה הפשוטה שלהתחרות ב MSN GOOGLE וכו' זה מיותר ויהווה ביזבוז זמן מוחלט.

נ.ב. 2 - למי ששאל פה לגבי האינדקוס: אני הכנסתי קישור לאתר וואלה! ומשם הגיעו אלפי אתרים ומכל אחד מהם עוד ועוד ככה זה ממשיך עד כמעט אין סוף (כמובן שאני עצרתי את זה בסופו של דבר).