כמה גדול הענן?

ענן גדול

בחודש שעבר, 2007es.com חשפה בפניכם הסולם האמיתי של פורנו באינטרנט. בכל עת, הזרמת סרטונים למבוגרים מנצלת ככל הנראה כ -30% מרוחב הפס הכולל של האינטרנט, מה שמשווה לכ- 6 טרה-בייט של פורנו הנצרך. כל שנייה. אבל מה עם 70% האחרים? נטפליקס, יוטיוב ואתרי וידאו אחרים שאינם מבוגרים הם חזירי רוחב פס ענקיים, ואולי מהווים עד 40% מתעבורת האינטרנט. ארונות קבצים דיגיטליים, כגון Rapidshare ו- Megaupload, מהווים כ -10% מהתנועה ברחבי העולם. גלישה באינטרנט ודואר אלקטרוני (וספאם!) הם עוד 15%. ואז יש מחשוב ענן.

כיום, הרוב המכריע של שירותי האינטרנט והאתרים מתארחים בענן. בזה אני מתכוון שבמקום שחברות (כמו זיף דייוויס / אקסטרים טק) ינהלו חומרה משלהן, נעשה שימוש בשירותי אחסון ומחשוב בענן של צד שלישי. שירותי האינטרנט של אמזון (AWS), Microsoft Azure וגוגל הם שלוש דוגמאות בולטות לאשכולות ענן ענקיים, אך ישנן מאות פעולות קטנות יותר שגודלן נע ממרכז נתונים שלם ועד כמה מדפים.



כוחו של הענן נתון בעובדה שניתן לכפות אותו ולנעול אותו למשימות שונות כמו מחשב-על מבוסס ענן, לדואר אינטרנט, ל אחסון מסמכים פשוט. באשכול ענן יחיד, גוגל יכולה לארח ולהגיש פטא-בייטים של סרטוני YouTube ולאחסן את כל הדוא'ל והמסמכים שלך. מכל ההיבטים של הענן, לעומת זאת, היום אנו מתמקדים באחסון ענן.



מרכז נתונים של מיקרוסופט

מרכז נתונים של מיקרוסופט

אמנם אחסון לא יכול להיות סקסי כמו טרה-בייט של זיכרון RAM ואלפי ליבות מעבד, אך זו הדרך האמינה ביותר למדידה הגודל של הענן, במיוחד כאשר אנו גורמים לשימוש ברוחב הפס. מכמות האחסון הכוללת נוכל גם לעבד את עֲלוּת של אחסון בענן - ומשם נוכל סוף סוף להתאמן למה כמו גוגל, מיקרוסופט ודרופבוקס נופלים על עצמם לספק שירותי אחסון בענן.



כמו סיפור הפורנו, ראשית נתחיל בכמה מספרים תיאורטיים, ואז נעבור לכמה דמויות (וחומרה) של העולם האמיתי מ- Backblaze, ספק גיבוי בענן.

פטאביטים

לרוב, מספרים אמיתיים של החברות הגדולות, כמו גוגל, פייסבוק, אמזון ומיקרוסופט, הם מעטים. אם אתה סורק באינטרנט, מופיעים כמה דמויות מחוספסות:

  • פייסבוק, בהגשת ההנפקה שלה, אמרה כי היא מאחסנת מעל 100 פטא-בתים (PB) מדיה (תמונות וסרטונים). זה לא לא מציאותי לומר שלפייסבוק יש כנראה אחסון כולל של קיבולת הרבה מעבר לזה, ברגע שאתה גורם לגיבויים ונתונים אחרים (עדכוני סטטוס, לייקים וכו '), אולי בטווח של 300PB.
  • מיקרוסופט הודתה לאחרונה כי Hotmail מאחסן למעלה מ -100 פטה בייט, וכי SkyDrive, עם '17 מיליון לקוחות', מאחסן 10PB של נתונים. כמו פייסבוק, הקיבולת הכוללת של מיקרוסופט, ברגע שנחשב את שאר תכלת והנכסים ברשת שלה, היא כנראה הרבה יותר מ -300 פטה.
  • מגאופלאוד הוא זעיר יחסית בהשוואה, ככל הנראה מאוחסן 25 פטה בייט בלבד.
  • אמזון, במקום לתת לנו מספר נחמד וקל של פטא-בייטים, במקום זאת מודיעה על המספר הכולל של אובייקטים המאוחסנים על ידי שירות אחסון הענן S3 שלה. נכון לאפריל 2012, אמזון S3 אחסנה 905 מיליארד אובייקטים. אם אנו מניחים שגודל ממוצע של 100KB, זה סביב 90 פטה בייט; אם הגודל הממוצע הוא 1MB, זה 900 פטה בייט - כמעט אקס-בייט!
  • Dropbox, לפני שנה, אחסנה '10+ פטה-בייטים' של נתונים. היו לה אז 25 מיליון משתמשים, וכיום 100 מיליון משתמשים, כך שלמרות הכל שווה החברה מאחסנת כעת נתונים של כ- 40PB.

כדי לנקוט בפרספקטיבה של נתונים אלה, כנראה שלמחשב ממוצע יש כונן קשיח בגודל 500GB או 1TB, ופטאבייט הוא 1024TB. לכל הפחות, אם כן, מרכזי הנתונים של מיקרוסופט ופייסבוק מארחים יותר מ -100,000 כוננים קשיחים. מבלי לבנות חומרה מותאמת אישית, אתה יכול לסחוט 48 כוננים לתוך מארז 4U. לאחר ביצוע חשבונאות על ציוד רשת, פירוש הדבר שאתה בוודאי מסתכל על כ -400 כוננים קשיחים לכל מתלה של 40U - או 250 מתלים, שכל אחד מהם תופס שטח של מטר רבוע אחד. זה אולי נשמע הרבה, אבל כשאתה מחשיב שגוגל, אמזון, פייסבוק ומיקרוסופט מציגות מרכזי נתונים באופן קבוע עם תוכניות קומה של מעל 30,000 מ'ר (300,000+ רגל מרובע), זה ממש לא כל כך הרבה. בקנה מידה גדול של דברים, הרבה יותר מקום מוקדש לשרתים (כלומר מעבדים) ולציוד רשת.



רוחב פס

מתג מרכז נתוניםמבחינת רוחב הפס, יש לנו עוד פחות נתונים מהבנים הגדולים. אנו יודעים כי נכון לשנה שעברה נשמרו מיליון קבצים כל חמש דקות - כך שהיום, עם פי 4 משתמשים, מדובר ב -800,000 קבצים לדקה. אמזון S3, הגדולה משמעותית מ- Dropbox, מטפלת ב' 650,000 בקשות לשנייה. '

אם אנו מניחים שהקובץ הממוצע השמור ב- Dropbox הוא 500KB (שילוב של תמונות, סרטונים ומסמכים) אז Dropbox מאחסן סך של 400,000 מגה-בייט (0.4TB) לדקה - או 6.7GB לשנייה (54Gbps). אין לנו נתונים על כמה נתונים Dropbox שולח לדקה (כלומר אנשים שמורידים קבצים מ- Dropbox שלהם), אבל זה כנראה באזור של 10 עד 20 ג'יגה לשניות.

אמזון S3, המשמשת בעיקר לאחסון קבצים סטטיים לאתרים (תמונות, גיליונות סגנון, קטעי וידאו), ככל הנראה יש גודל קובץ ממוצע נמוך יותר מ- Dropbox. אם אנו מניחים שגודל ממוצע של 100KB לקובץ, אז 650,000 בקשות לשנייה מגיעות לסך כולל של 61 ג'יגה בייט של נתונים המועברים בשנייה, או 488Gbps. זה קרוב מאוד לנתון 800Gbps שהערכנו עבור אתר פורנו גדול, השווה לכ -2% מסך תעבורת האינטרנט - אמזון די גדולה!

פייסבוק ומיקרוסופט, עם 100 עד 300 פחיות אחסון כל אחד, כנראה נופלות איפשהו בין דרופבוקס לאמזון מבחינת השימוש ברוחב הפס - אולי 200Gbps לחתיכה.

אבל מספיק תיאוריה! בואו נדון בכמה מספרים בעולם האמיתי וחומרה בעולם האמיתי!

Copyright © כל הזכויות שמורות | 2007es.com