400G לעומת 800G NIC: במה כדאי לבחור?

הבחירה בין NIC של 400G ל-800G היא החלטה של ​​מבנה, לא השוואת דפי-תשלום. המתאם המהיר יותר משתלם רק כאשר השרת, המתג, האופטיקה והכבלים יכולים לשאת את המהירות הזו מקצה לקצה. מדריך זה בוחן את התמורה- מזווית פריסה ורכש, כך שתוכל להחליט לפני מתן תקציב למתאמים, מתגים, מקלטי משדר, DACs, AOCs, AECs או סיבים.

הגרסה הקצרה: NIC של 400G היא ברירת המחדל הבוגרת והחסכונית-למרבית עומסי העבודה של AI, HPC, אחסון ועונן של היום, והיא ממופה בצורה נקייה על מארחי NDR InfiniBand ו-PCIe Gen5. NIC של 800G מרוויח את הפרמיה שלו כשאתה בונה מארג בינה מלאכותית מהדור הבא עם GPUs צפופים יותר, תעבורה כבדה יותר ממזרח-מערב ומפת דרכים לכיוון XDR InfiniBand, 800G Ethernet, ובסופו של דבר 1.6T.

400G לעומת 800G NIC

בחר NIC של 400G כאשר השרתים, המתגים והמפעל האופטי שלך כבר סטנדרטיים על 400G Ethernet או NDR InfiniBand, או כאשר עומס העבודה אינו רווה כל נתיב GPU-ל-GPU. זוהי גם השיחה הבטוחה יותר כאשר הזמינות, התקציב וזמן ההסמכה חשובים יותר ממהירות הנמל שיא.

בחר NIC של 800G כאשר הרשת הופכת לצוואר הבקבוק לאימון-בקנה מידה גדול, שרתי GPU בצפיפות-גבוהה או מאיצים-בדור הבא. זה מפחית בערך בחצי את מספר הקישורים והמודולים האופטיים הדרושים לכמות נתונה של רוחב פס ומכין את הבד לשדרוג הבא.

יציאת 800G שווה לקנות רק כאשר שאר המערכת יכולה להזין אותה. אם המארח לא יכול לחשוף מספיק נתיבי PCIe למתאם, NIC 800G הופך ליציאה יקרה ולא בשימוש ולא לשדרוג ביצועים.

מה זה NIC 400G?

NIC 400G הוא מתאם רשת שזז עד 400 גיגה-ביט לשנייה ליציאה. בסביבות AI ו-HPC הוא מטפל ברשתות GPU-, הדרכה מבוזרת, גישה לאחסון, תעבורת MPI, רקמות RoCE וקישורי NDR InfiniBand. עבור רוב המפעילים, 400G הוא כבר קפיצה גדולה מ-100G או 200G ומסיר את צווארי הבקבוק הברורים מבלי לאלץ עיצוב מחדש של השרת והחלפת שכבות.

היכן שמכשירי רשת 400G מתאימים להיום

מתאמי 400G הם ברירת המחדל הפועלת באשכולות אימון בינה מלאכותית על -GPUs מהדור הנוכחי, HPC ומחשבים-מדעיים, רשתות אחסון בעלות ביצועים גבוהים, -רשתות אחסון בעלות ביצועים גבוהים, בדים RoCEv2 Ethernet ו-InfiniBand, ציי שרתי ענן כלליים ושדרוג 100G/200}ל{07}ל{07}G חדרים מהדור המעורב. בהגדרות אלה 400G הוא רק לעתים רחוקות פשרה. זה פשוט דרגת המהירות הנכונה כאשר גודל אשכול, ספירת GPU ותקציב אינם מצדיקים את המורכבות הנוספת של 800G.

מדוע 400G עדיין הגיוני

בחירת NIC היא בעיית איזון מערכת-. אם מארח לא יכול להזין מתאם 800G, אם עומס העבודה קשור למחשוב- או אחסון-או אם עמוד השדרה עדיין 400G, אזי ירידה ב-800G NIC מעלה את העלות מבלי להזיז את ביצועי האפליקציה. בד 400G בנוי היטב, עם מנוי יתר נמוך, טופולוגיה נקייה, RDMA, אופטיקה איכותית ובקרת גודש מכווננת, עדיין נושא עבודות AI ו-HPC תובעניות בנוחות.

מה זה NIC 800G?

NIC של 800G מספק עד 800 גיגה-ביט לשנייה ליציאה. הוא מכוון ל-מרכזי נתונים בינה מלאכותית מהדור הבא, אשכולות GPU גדולים ובדים בקנה מידה גבוה, שבהם הביקוש לתקשורת עולה על רשת שרתים קונבנציונלית. דור 800G הוא כעת סטנדרטי:תקן IEEE 802.3df, שאושר בשנת 2024, מגדיר 800 Gigabit Ethernet ותומך בקצבי משנה- כגון 1x800G, 2x400G ו-8x100G, וזה מה שהופך את הגירה המהירה-מעולה למעשית.

הערך הוא לא רק קצב הכותרת הכפול. 800G מאפשר לאדריכלים להעלות את צפיפות רוחב הפס, לחתוך ספירת קישורים ומודולים, ולתמוך במארגי הדרכה גדולים יותר עם תעבורה אגרסיבית יותר-לכל-כל.

מדוע אשכולות AI עוברים ל-800G

הדרכה של-מודלים גדולים מייצרת תעבורת GPU-ל-GPU עצומה ומשרת-לשרת-. החלפת שיפוע, הכל-הקטנה, תערובת-של-מומחים ניתוב, נקודות ביקורת ואחסון-צינורות כבדים, כולם פוגעים בבד. ככל שהמאיצים נעשים מהירים יותר, הרשת צריכה לעמוד בקצב או שמעבדי GPU יקרים יושבים בחוסר מעש ומחכים לסנכרון. 800מחשבי G NIC עונים על כך על ידי הגדלת רוחב הפס לכל צומת, לכל מאיץ או לכל מסילת רשת.

800G הוא החלטת בד, לא רק מתאם

המעבר ל-800G משנה צורה של בחירת מתגים, אופטיקה, תכנון טווח הגעה, עיצוב תרמי, זרימת אוויר ופריסה של מתלה. האפשרויות האופטיות והנחושת בפרט מחמירות יותר: יציאת 800G עשויה להשתמש במודול OSFP או QSFP-DD, ומודול צד מתג-ו-NIC- יכול להיות שונה בעיצוב תרמי ומכני אפילו באותו קצב. אם המפעל שלך משתמש בסיבים מובנים, אשר את סוגי המודול והמחברים מוקדם; שֶׁלָנוּסקירה כללית של הפורמט QSFP-DDמכסה היכן שהוא מתאים ביחס ל-OSFP. התייחס ל-800G כאל תוכנית ברמת-בד, לא כאל החלפת פריט- אחת.

NIC 400G לעומת 800G NIC

מתי לבחור NIC 400G

בחר NIC 400G כאשר המטרה היא רשת-בביצועים גבוהים עם חומרה בוגרת, פריסה צפויה ועלות מבוקרת.

אתה בונה על תשתית 400G קיימת

אם המתגים, הכבלים, האופטיקה ופלטפורמות השרת שלך כבר סטנדרטיות על 400G, הישארות עם 400G NIC מסירה סבב של בדיקות תאימות ומאפשרת לך לעשות שימוש חוזר ברוב המערכת האקולוגית הנוכחית. זה נכון במיוחד כאשר משדרגים מ-100G או 200G, כאשר רווח הביצועים גדול והמערכת האקולוגית בוגרת הרבה יותר מ-800G.

עומס העבודה בינה מלאכותית שלך לא מרווה את הבד

לא כל עבודת AI צריכה 800G לשרת. רבים מהם קשורים למחשוב-, קשורים לאחסון-, קשורים לזיכרון- או מוגבלים על ידי יעילות התוכנה במקום רוחב הפס של הרשת. אם הפרופיל מראה שהרשת אינה צוואר הבקבוק העיקרי, NIC 400G בדרך כלל מספק את התמורה הטובה יותר.

אתה צריך עלות-HPC יעיל

עומסי עבודה רבים של HPC רגישים לאחזור, התנהגות-העברת מסרים וגודש מארג ולא לרוחב פס גולמי. בד 400G מכוון היטב-מנצח לעתים קרובות בד 800G משולב בצורה גרועה. השאלה השימושית היא לא איזה NIC מהיר יותר, אלא איזה עיצוב רשת מספק את ביצועי האפליקציה הטובים ביותר לדולר.

אתה צריך רכש מהיר יותר,-נמוך יותר בסיכון

מתאמי 400G, אופטיקה וכבלים קלים יותר למקור ולהתאים בפלטפורמות נוספות של שרתים ומעברים. כאשר לצוות יש זמן מוגבל לאימות, 400G הוא הבחירה-בסיכון הנמוכה שעדיין מנקה את רוב צווארי הבקבוק.

מתי לבחור NIC 800G

בחר NIC של 800G כאשר היישום, פלטפורמת ה-GPU והבד יכולים למעשה להשתמש ברוחב הפס הנוסף.

אתה מעצב מארג הדרכה של-הדור הבא של AI

אשכולות אימון גדולים מייצרים תקשורת כבדה מכל-ל-כל ומזרח-מערב. ככל שגודל הדגם, מספר ה-GPU והמקביליות גדלים, הרשת הופכת למגביל. כאן, NICs של 800G מגדילים את רוחב הפס לכל-צומת ומצמצמים את הסיכון שהבד יחנק את ה-GPU.

אתה צריך צפיפות רוחב פס גבוהה יותר

800G מפחית את מספר היציאות, הקישורים והמודולים הדרושים כדי לספק כמות נתונה של רוחב פס. זה חשוב באשכולות צפופים שבהם חלל מתלה, ספירת יציאות-החזית, ניהול כבלים ורדיוס מתגים מוגבלים. פחות קישורים מהירים יותר יכולים לפשט את הבנייה, בתנאי שמארג המתגים ותוכנית הכבלים מיועדים לכך.

אתה מתכנן לפלטפורמות ה-GPU של-הדור הבא

אם מפת הדרכים כוללת-שרתי GPU מהדור הבא, צפיפות כוח גבוהה יותר של מתלים, קירור נוזלי ואשכולות גדולים יותר, 800G הוא הקריאה האסטרטגית החזקה יותר. קניית 400G היום עדיין יכולה להיות סבירה, אבל הבד צריך להיות מתוכנן עם נתיב הגירה ל-800G ומעלה.

אתה רוצה לצמצם את הפרעות השדרוג לטווח ארוך-

אסטרטגיית 800G מדורגת מפחיתה כאבי הגירה עתידיים. פרוס תחילה מתגים בעלי יכולת 800G-, חבר 400G NIC קיימים דרך פריצה או עיצובים מהירים- מעורבים, ואז שדרג שרתים ל-800G מאוחר יותר. זה מגן על ההשקעה הנוכחית תוך בניית הבד לדור הבא.

מתי לא לבחור NIC 800G

לעתים קרובות זו השאלה השימושית יותר, והיא מסננת את רוב הרכישות שהתחרטו עליהן. השהה עם 800G כאשר אחד מהדברים הבאים נכון:

• המארח אינו יכול לחשוף נתיב מלא PCIe Gen6-class x16 למתאם. הנמל יפעל מורעב, ותשלם עבור רוחב הפס שאפיק השרת לא יכול לספק.
• עמוד השדרה מנוי יתר על המידה או עדיין 400G. NIC מהיר יותר אינו מתקן בד מוגבל; זה רק מרחיק את צוואר הבקבוק בקפיצה אחת.
• עומס העבודה הוא חביון- או MPI-מגביל ולא רוחב פס-. תפוקה נוספת עושה מעט עבור עבודות הנגרמות על ידי סנכרון או התנהגות הודעות קטנות-.
• אופטיקה, כבלים או קירור עבור 800G לא ניתנים למקור ולאמת על ציר הזמן שלך. מודול לא מוסמך שמתנפנף תחת עומס גרוע יותר מקישור איטי יותר שנשאר למעלה.
• אין מפת דרכים צמיחה קונקרטית המצדיקה את הפרמיה כיום.

אם שניים או יותר מאלה חלים, 400G הוא כמעט בוודאות התשובה הנכונה עבור המבנה הזה, כאשר 800G מוחזק ברזרבה לרענון הבא.

400G לעומת 800G NIC עבור מרכזי נתונים בענן

בדי ענן כמעט ולא פועלים במהירות אחת בכל מקום. הם מחלקים לפי מחלקת תעבורה, והבחירה ב-NIC עוקבת אחר הפלח ולא אחר מרכז הנתונים בכללותו.

• תנועה חזיתית-/צפונית-דרומה:400G הוא בדרך כלל מספיק עבור-משתמשים ושכבות API, כאשר רוחב הפס לכל-זרימה הוא צנוע ומספר החיבורים שולט.
• אחסון ותנועה מזרח-מערבית:התשובה תלויה עד כמה הארכיטקטורה מפורקת. 400G מכסה את רוב הבריכות הכלליות; 800G עוזר במקומות שבהם כונני אחסון גדולים ומפוזרים נמשכים עומס מזרח-מערב.
• הסקת AI:400G מספיק עבור ענני מסקנות רבים, בעוד ש-800G מתאים לתערובת צפופה-של-ניתוב מומחים או שירות מפורק שבו אסימונים נעים על פני צמתים רבים.
• בד מרובה-דיירים:כאן, יחס מנוי-יתר ובידוד דיירים יוצרים את הביצועים הרבה יותר משיעור NIC שיא. בד 400G מאוזן עם בידוד חזק לרוב מנצח בד מהיר יותר אך צפוף.

מכיוון שגידול ענן מזרח-מערב נוחת על סיבים מובנים, תכננו כבלים מטען לצד ה-NIC; שֶׁלָנוּמדריך לכבלים מטען MPO/MTPמכסה ריצות- בצפיפות גבוהה. ככלל אצבע, השתמש ב-400G עבור רוב שכבות הענן הקדמיות-וכלליות, ושמור 800G למקטעים שבהם שולטים שירותי AI צפופים או בריכות מזרח-מערביות גדולות.

גורמי בחירה מרכזיים מעבר למהירות היציאה

NIC מהיר יותר אינו מבטיח עומסי עבודה מהירים יותר אלא אם כל הפלטפורמה תומכת בו. חמישה גורמים מחליטים אם יציאת 800G מספקת או לא מושבתת.

יצירת PCIe ורוחב פס מארח

ה-NIC מגיע למארח דרך PCIe, והקישור הזה הוא תקרה קשה. יציאת 400 ג'יגה-בייט לשנייה צריכה בערך 50 ג'יגה-בייט לשנייה לכל כיוון, אותם יכול לשאת חריץ PCIe Gen5 x16, בכ-63 ג'יגה-בייט לשנייה שמיש לכל כיוון. יציאת 800 ג'יגה-בייט לשנייה צריכה בערך 100 ג'יגה-בייט לשנייה לכל כיוון, מעבר לחריץ Gen5 x16, וזו הסיבה שבדרך כלל מתאמי 800G מצפיםמפרט PCIe 6.0 מ-PCI-SIG(64 GT/s, עד 256 GB/s דו-כיוונית ב-x16) או עיצוב רגיל של x32. לפני התחייבות ל-800G, אשר:

• דור PCIe
• ספירת נתיבים וחיווט חריצים
• מיקום NUMA והנתיב של GPU-ל-NIC
• אימות ספק-שרת עבור המתאם
• תמיכה ב-BIOS ובקושחה

בשרתי GPU, מיקום ה-NIC ביחס למעבדי המעבד וה-GPU מחליט באיזו ניקיון נתונים זזים. NIC מסוג Gen6- שנפל לתוך חריץ Gen5 x8 הוא צוואר הבקבוק הנפוץ ביותר בתחום.

החלף בד ומנוי יתר

מהירות ה-NIC חייבת להתאים למארג. 800מתאמי G אינם עושים דבר אם עמוד השדרה-מנויים יתר על המידה או שהקישורים העליונים דקים. בדוק את מהירויות יציאות העלים והעמוד השדרה, יחס מנוי היתר, מספר מסילות הרשת, דפוס מזרח-מערב, כשל בעיצוב הדומיין- ורוחב הפס הנדרש לחצייה. לאימון, יחס מנוי יתר נמוך בדרך כלל עושה יותר לביצועים מאשר NIC מהיר יותר.

RoCE, InfiniBand ו-Ultra Ethernet

בדי AI ו-HPC נשענים על RDMA כדי לחתוך את תקורה של המעבד, והפרוטוקול מעצב את ה-NIC, המתג, בקרת הגודש והפעולות. כיום, NDR InfiniBand פועל במהירות של 400 Gb/s ליציאה וXDR InfiniBand מגיע ל-800 Gb/s ליציאה, שמתיישר ישירות עם שכבות ה-NIC של 400G ו-800G. בצד ה-Ethernet, ה

מפרט 1.0 של קונסורציום Ultra Ethernetמגדיר ערימת RDMA-מעל-Ethernet המשתרעת על NICs, מתגים, אופטיקה וכבלים, המכוונת באופן ישיר ל-AI ו-HPC scale-.

בחר ב-InfiniBand עבור מארג HPC או AI עם חביון-נמוך, כאשר הצוות שלך מכיר את המערכת האקולוגית הזו. בחר Ethernet או RoCE לבחירה רחבה יותר של ספקים ושילוב ענן. שקול Ultra Ethernet כאשר אתה רוצה נתיב סטנדרטי ופתוח ל-Ethernet בדור הבא עם ביצועים- גבוהים-.

אופטיקה, גורמי צורה וכבלים

ב-400G ו-800G, התאימות הפיזית חשובה לא פחות מהקצב. שני מודולים יכולים לחלוק מהירות אך שונים זה מזה בגורם הצורה, העיצוב התרמי ודרישות המארח. אמת את OSFP לעומת QSFP112 לעומת QSFP-DD, שטוח-עליון לעומת סנפיר-OSFP עליון, מתג-צד מול NIC-דרישות מודול צד, DAC, AEC, AOC או טווח אופטי, תמיכה בפריצה וקידוד וקושחה של ספקים. אל תניח ש-800G OSFP שעובד במתג יתמקם ויתקרר בצורה נכונה ב-NIC; מודולי מתג ו-NIC רבים משתמשים בעיצובים תרמיים ומכניים שונים.

כוח, זרימת אוויר ואימות תרמי

רכיבי 800G שואבים יותר חשמל ופועלים חם יותר. אמת את ה-NIC, האופטיקה, יציאות המתג ונתיב זרימת האוויר תחת עומס מתמשך, לא במצב סרק. אשר את הספק ה-NIC וה-הספק של המודול האופטי, כיוון זרימת האוויר ומרווח הקירור, טמפרטורת הכניסה המקסימלית, צפיפות הכבלים וחסימת זרימת האוויר, והנחות הקירור של האוויר- מול נוזל-. חוסר יציבות תרמית מופיעה כדשי קישור ושיעורי שגיאה עולים, סוג של תקלות לסירוגין שאיטיות ויקר לרדוף אחריה בייצור.

טעויות נפוצות שיש להימנע מהן

קניית 800G רק כי זה מהיר יותר

800G לא אוטומטית טוב יותר. אם עומס העבודה, השרת או המרקם אינם יכולים להשתמש ברוחב הפס, העלות הנוספת לא תהפוך לביצועי האפליקציה. התאימו את הנמל לצוואר הבקבוק שיש לכם בפועל.

התעלמות מרוחב פס PCIe

NIC יכול להעביר נתונים רק מהר ככל שהאוטובוס המארח מאפשר. ודא יצירת PCIe, ספירת נתיבים וטופולוגיית השרת לפני שאתה בוחר בדרגת מהירות, לא לאחר הגעת החומרה.

בחירת המודול האופטי השגוי

בקצבים אלה, גורם צורת מודול ועיצוב תרמי הם קריטיים. גרסת OSFP שגויה עשויה שלא להתאים לכלוב נתון, או עשויה להתאים אך להתחמם יתר על המידה תחת תעבורה מתמשכת, וליצור שגיאות שנראות כמו בעיית בד.

שוכחים את טווח הכבלים

DAC, AEC, AOC, אופטיקה מרובת מצבים ואופטיקה-יחידה משרתת כל אחת טווחי מרחקים שונים, ודרגות סיבים שונות נושאות מרחקים שונים; שֶׁלָנוּפירוט של גבולות טווח הגעה של OM1 עד OM5מראה היכן מגיע כל כיתה. בחירה בחיבור השגוי מוסיפה חביון, עלות או עיבוד מחדש.

התייחסות ל-NIC, מתגים ואופטיקה כרכישות נפרדות

הזמינו את המתאם, המתג, האופטיקה והכבלים בתור כתב חומר אחד מאומת. אי התאמה שהתגלתה לאחר הפריסה פירושה יציאה שמקשרת אך מקלפת, או חומרה שיש להחזיר באמצע-בנייה, וזה הרבה יותר מפריע מאשר לתפוס אותה במהלך ההסמכה.

המלצה סופית

בחר NIC של 400G עבור מתאם מוכח, חסכוני-המתאים לבדי הבינה המלאכותית, HPC, האחסון והענן של היום. זוהי הבחירה המעשית עבור רוב אשכולות ה-GPU הקיימים וחדרי הדור המעורב-. בחר NIC של 800G כאשר צפיפות רוחב הפס, תקשורת GPU בקנה מידה- גדול ומוכנות לשדרוג גוברים על העלות המוקדמת, וכאשר כל הנתיב בנוי עבורו.

ההחלטה לעולם אינה מהירות בלבד. זה האם השרתים, המתגים, האופטיקה, הכבלים, החשמל והקירור שלך יכולים להפוך את המהירות הזו לביצועי יישומים. הדיסציפלינה שמגינה על התקציב היא פשוטה: אמת את ה-NIC, המתג, האופטיקה והכבלים כמערכת אחת לפני ביצוע ההזמנה.