אחסון לאתר סרטונים

[yonatan]

נכתב במקור על ידי Kernel

יונתן,
יוטוב מזמן עברו ל-CDN בארץ,
אני צופה בסרט הזה, השרת שמזרים את הסרט הוא 212.199.219.120(אם תלחצו על הלינק תגיעו ל-Google), השרת כנראה נמצא בפתח תקווה בחווה של 012. (או שיש להם כלוב ב-MED1, עם חיבור לכל ה-ISP's).

cateye, רוחב פס של 5mbit שווה ל-10 צופים בו זמנית(בהנחה שהכל ירוק) לסרט באיכות FLV.
ברגע שיש יותר מ-11, מתחיל ה-buffer(הסרט נתקע ונטען כל הזמן).
אם אתה עובד ישר מול החווה(תדלג על 014 - המחירים שלהם מטורפים), ואתה מנהל מו"מ קשיח(בשבילך אין דבר כזה התחייבות לשנה), אתה תגלה מחירים מפתיעים.

עד לא מזמן אני תיחזקתי שרת ששירת 120 איש בזמן השיא(4 בצהריים ו-2 בלילה), באותו הזמן גולשים מעלים סרטים לשרת והעומס היה נסבל. המפרט של השרת: Q9550s וכונן SATA 250Gb.

מצד שני, אני מתחזק לאתר וידאו גדול בארץ את השרתים שלו, הוא הקשיב לאיש מכירות במקום לאיש טכני וקנה ציוד ב-5 ספרות, ועכשיו הציוד שלו "נח" (8 ליבות ו-Load avarage עומד על 0).

משום מה לי זה נותן מ 74.125.79.*
מוזר! הסרטון שהבאת באמת מגיע מישראל.

בכל מקרה זה לא משנה את העובדה, התקציב שלהם מאפשר להם CDN כזה.
זה לא כלכלי לאתר מתחיל.

[Kernel]

לכל גולש זה ייתן IP של הספק שלו - עקרון ה-CDN.

בכל מקרה, מעת לעת חברות השרתים הענקיות בארה"ב, מציעות דילים עם AKAMAI,
AKAMAI יהוו בעצם CACHE ויעמדו בין הלקוחות לשרת.

אפשר לחפש דיל כזה.

[cateye]

כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)


אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?

[yonatan]

נכתב במקור על ידי cateye

כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)


אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?

מי סיפר לך שתפסיד את רוחב הפס שלך?
אני מבסס את רוב השרתים שלי בצרפת , בתור אחד שניהל ומנהל שרתים בכל החוות בישראל בניהם נטוויזן 012 ובזק בינלאומי , אני באמת לא מאוכזב מרוחב הפס שאני משלם עליו ומקבל בצרפת.

פינג אינו מדד לאיכות, פינג זו מחסנית מסוג ICMP שאינה מועדפת בנתבים של ספקי האינטרנט , בעצם המחסניות של הפינג מקבלות פחות מאחוז אחד במעבד של הנתבים ( לפחות ברשת שמנוהלת היטב ).


לנוחיותך הוספתי לאשכול פלט פינג לשרת יוטיוב, מול שרת בצרפת לצורך המחשה.

C:\>ping youtube.com

Pinging youtube.com [74.125.95.93] with 32 bytes of data:
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=202ms TTL=51

Ping statistics for 74.125.95.93:
    Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
    Minimum = 196ms, Maximum = 202ms, Average = 197ms

C:\>ping securehost.co.il

Pinging securehost.co.il [178.32.7.96] with 32 bytes of data:
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56
Reply from 178.32.7.96: bytes=32 time=97ms TTL=56
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56

Ping statistics for 178.32.7.96:
    Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
    Minimum = 97ms, Maximum = 99ms, Average = 98ms

C:\>

אגב אל תכפיל ב 8
בחישוב גס ולא בדיוק של ביטים:
5MBIT = 650K/sec
10MBIT = 1200K/sec

לגבי AKAMAI , תכין את הארנק + חיוך לפקידה בבנק.

[Kernel]

נכתב במקור על ידי cateye

כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)


אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?

רוחב פס = מס' המשתמשים כפול 0.55 כפול 8 = כמות ה-Mbps שתצטרך.
לגבי ה-5Mbit, לחלק ב-8.

המצב היום בארץ, שבשעות הלחץ, ספקיות האנטרנט מפעילות תעדוף נתונים, והקו היוצא לחו"ל מצטמצם. ואיכות הצפייה נהרסת.
מעבר לזה, עבדתי עם המון שרתים בארץ ובחו"ל, מבחינת זמן תגובה, אין תחליף לארץ.

השרת שהעלאת כאן הוא שרת וירטואלי, אתה צריך שרת פיזי(כמו השרת שהיה לי). על זה אתה צריך לדבר עם החווה.

[cateye]

אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?

[yonatan]

נכתב במקור על ידי cateye

אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?

נחזור לסיפור של AKAMAI,
אתה מתחיל להבין שכשמדובר בשידורי מדיה זורמת, שרת אחד לא תמיד מספיק בשביל לעמוד בפופולריות.

במקרה כזה, תוכל לבצע מה שנקרא CACHING SDUID,
בעצם התוכן שלך יהיה על שרת גדול שאחראי גם לקידודים והעלאות.
ויהיה לך שרת נוסף ,שהתפקיד שלו הוא סה"כ לשמש כמתווך בין השרתים ללקוחות הקצה.
השרת כמובן יצטרך המון זכרון RAM , והגדרות ספציפיות לאגור את הסרטונים בזכרון שלו , ולא בדיסק הקשיח.
ככה בעצם , רוחב הפס אינו מושפע מגורמים כמו I/O בדיסקים הקשיחים.

כמובן צריך גם לבחור זכרון איכותי עם תכונות תיקון שגיאות.

[Kernel]

נכתב במקור על ידי cateye

אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?

אוי אוי, טעות שלי, הנוסחה היא 0.055X8. לסרט FLV באיכות H263.
לסרט HD עם דחיסה יעילה זה עומד על 0.09.

עוד ניפוץ אשלייה, ל-1mbit משלמים 8.4 שקל לחודש, ברוב החוות בארץ, לתעבורה פנים ארצית.