[IUCC-HPC] דיון עם אינבדיה

[Haim Abudraham]

כמה לא מפתיע....
אנחנו רודפים אחריהם שבועיים כדי לקבל שירות תמיכה למתג אינפינבנד תקול.

משהו ממש לא טוב קורה שם...

בברכה,
חיים אבודרהם
מנהל מחלקת תשתיות IT ותמיכת מחשוב
אגף טכנולוגיות, חדשנות ודיגיטל
haimabu at bgu.ac.il<mailto:haimabu at bgu.ac.il>
משרד:  0747795200 | נייד: 0529454525
P בבקשה אל תדפיסו דוא"ל זה אלא אם אתם חייבים
[cid:image001.png at 01D87BF6.ADFF9890]


From: Hpc-list <hpc-list-bounces at nocvm.ilan.net.il> On Behalf Of Hank Nussbacher
Sent: Thursday, June 9, 2022 11:15 AM
To: Vadim Malkin‏ <vadim.malkin at weizmann.ac.il>; Amihai Silverman‏ <amihai at technion.ac.il>; hpc-list at nocvm.ilan.net.il
Subject: Re: [IUCC-HPC] דיון עם אינבדיה

חברים,

לא כל כך האמנתי שחברה בגודל של NVIDIA  יזלזל בגופים כגון מכון ויצמן וטכניון.  עד שהוכח לי בחודש האחרון L
אחרי ריצה אחריהם במשך חודש, לספק לו"ז ודובר למפגש שלנו ביום ראשון (גוגל סיפק שם וכותרת תוך יומיים) ואחרי שהובטח לי סופית שאקבל כותרת ושם של דובר אתמול – שוב קבלתי אבטחה שהם יספקו שם וכותרת עד סוף היום.

אם לא אקבל שם וכותרת מאנשי NVIDIA עד סוף היום אני מבטל אותם ליום ראשון ולכן נקיים את המפגש שלנו רק מ- 14:00-15:00 (עם גוגל מ 14:15-14:45) במקום מ- 13:00-15:00.  אוציא הודעה בסוף היום.

בברכה,
הנק

From: Vadim Malkin [mailto:vadim.malkin at weizmann.ac.il]
Sent: 19 May 2022 14:47
To: Amihai Silverman <amihai at technion.ac.il<mailto:amihai at technion.ac.il>>; Hank Nussbacher <hank at mail.iucc.ac.il<mailto:hank at mail.iucc.ac.il>>; hpc-list at nocvm.ilan.net.il<mailto:hpc-list at nocvm.ilan.net.il>
Subject: Re: [IUCC-HPC] דיון עם אינבדיה

שלום רב,

לאור אותם בעיות שעמיחי העלה, גם אנחנו במכון ויצמן למדע לא מתכוונים לרכוש את מכונות הDGX, עד שנראה ערך אמיתי ללקוח.
הרחבת הקלאסטר של 2020 ביצענו עם HPE Apollo 6500 וההרחבה של שנת 2022 נבצע עם מוצר שהוא לא DGX.

Thanks,
Vadim


From: Hpc-list <hpc-list-bounces at nocvm.ilan.net.il<mailto:hpc-list-bounces at nocvm.ilan.net.il>> on behalf of Amihai Silverman <amihai at technion.ac.il<mailto:amihai at technion.ac.il>>
Date: Tuesday, 10 May 2022 at 11:39
To: Hank Nussbacher <hank at mail.iucc.ac.il<mailto:hank at mail.iucc.ac.il>>, "hpc-list at nocvm.ilan.net.il<mailto:hpc-list at nocvm.ilan.net.il>" <hpc-list at nocvm.ilan.net.il<mailto:hpc-list at nocvm.ilan.net.il>>
Subject: Re: [IUCC-HPC] דיון עם אינבדיה

שלום,
בניגוד לתשובות ה,ו
אגף המחשוב בטכניון רכש 9 שרתי DGX באופן מרכזי לשימוש כל החוקרים.
Nvidia מבטיחה באתר שלה תמיכה שהיא חלק מובנה מקניית ה- DGX, ראו בדף :
https://www.nvidia.com/en-us/data-center/dgx-systems/support/<https://eur02.safelinks.protection.outlook.com/?url=https%3A%2F%2Fwww.nvidia.com%2Fen-us%2Fdata-center%2Fdgx-systems%2Fsupport%2F&data=05%7C01%7Chank%40mail.iucc.ac.il%7C252bed3434cd4a417e6a08da398d3da7%7C5157b0be66864470892cbf98e43728a4%7C1%7C0%7C637885576079808086%7CUnknown%7CTWFpbGZsb3d8eyJWIjoiMC4wLjAwMDAiLCJQIjoiV2luMzIiLCJBTiI6Ik1haWwiLCJXVCI6Mn0%3D%7C7000%7C%7C%7C&sdata=JtM6IQzY8pk%2B0RFCpB4zdmGgl5R3xz5S5ei1OIopqM0%3D&reserved=0>
[Image removed by sender.]<https://eur02.safelinks.protection.outlook.com/?url=https%3A%2F%2Fwww.nvidia.com%2Fen-us%2Fdata-center%2Fdgx-systems%2Fsupport%2F&data=05%7C01%7Chank%40mail.iucc.ac.il%7C252bed3434cd4a417e6a08da398d3da7%7C5157b0be66864470892cbf98e43728a4%7C1%7C0%7C637885576079808086%7CUnknown%7CTWFpbGZsb3d8eyJWIjoiMC4wLjAwMDAiLCJQIjoiV2luMzIiLCJBTiI6Ik1haWwiLCJXVCI6Mn0%3D%7C7000%7C%7C%7C&sdata=JtM6IQzY8pk%2B0RFCpB4zdmGgl5R3xz5S5ei1OIopqM0%3D&reserved=0>
Enterprise Support for DGX | NVIDIA<https://eur02.safelinks.protection.outlook.com/?url=https%3A%2F%2Fwww.nvidia.com%2Fen-us%2Fdata-center%2Fdgx-systems%2Fsupport%2F&data=05%7C01%7Chank%40mail.iucc.ac.il%7C252bed3434cd4a417e6a08da398d3da7%7C5157b0be66864470892cbf98e43728a4%7C1%7C0%7C637885576079808086%7CUnknown%7CTWFpbGZsb3d8eyJWIjoiMC4wLjAwMDAiLCJQIjoiV2luMzIiLCJBTiI6Ik1haWwiLCJXVCI6Mn0%3D%7C7000%7C%7C%7C&sdata=JtM6IQzY8pk%2B0RFCpB4zdmGgl5R3xz5S5ei1OIopqM0%3D&reserved=0>
Every NVIDIA DGX ™ system comes with comprehensive system support and access to NVIDIA's optimized AI software stacks. Get the most out of your NVIDIA DGX systems and streamline AI experimentation by leveraging containerized application management, performance monitoring, and software updates.
www.nvidia.com<http://www.nvidia.com>

בפועל, הם לא עומדים בסעיפי התמיכה המובטחים באתר.
הם לא דרשו שנבצע הסכם שירות מרכזי.

מומלץ להתעניין באלטרנטיבות, לדוגמה HPE Apollo 6500.

עמיחי
טכניון


________________________________
From: Hpc-list <hpc-list-bounces at nocvm.ilan.net.il<mailto:hpc-list-bounces at nocvm.ilan.net.il>> on behalf of Hank Nussbacher <hank at mail.iucc.ac.il<mailto:hank at mail.iucc.ac.il>>
Sent: Tuesday, May 10, 2022 10:44 AM
To: hpc-list at nocvm.ilan.net.il<mailto:hpc-list at nocvm.ilan.net.il> <hpc-list at nocvm.ilan.net.il<mailto:hpc-list at nocvm.ilan.net.il>>
Subject: [IUCC-HPC] דיון עם אינבדיה


מהפרוטוקול:



-        אינבדיה ו- serverfarm

o      צריכים לבקש מהם להקל על השימוש ב- GPUים, תוספת קורים, מיגרציה, ועוד

o      השירות והתמיכה של אינבדיה בישראל היא לא טובה.  יש אנשים צעירים שמה ולא אנשים עם ניסיון

o      בחו"ל יש אנשים הרבה יותר מוכשרים של אינבדיה

o      המצב הזה קיים כבר 3 שנים

o      בחו"ל חברת אינבדיה ממוקדת הרבה יותר לעולם האקדמיה לעומת כאן בישראל שהחברה מתמקדת יותר לעולם התעשייה ולא באקדמיה

o      האם אתר  serverfarm  יתמוך בקירור עם מים

o      אנחנו צריכים לדעת מה ההספק המקסימלי ש-  serverfarm יכולים לתת לארון ומה כמות הארונות/ שטח ריצפה מינימלית להזמנה.



תשובות:



א.  באתר  serverfarm בבני ציון אין שטח פנוי.  צפי לפתיחה של ה- DC – אוקטובר 2022

ב.   serverfarm לא שוכר לפי שטח אלה לפי MW.  המינימום היא  1MW

ג. המנכ"ל של אינבדה לא מכיר קירור עם מים על הציוד שלהם

ד. serverfarm לא תומך בקירור עם מים

ה. אינבדיה: בעיות שירות ותמיכה הם בגלל שאין הסכם שירות מרכזי.  הסיבה: כל חוקר קונה שרתים לשים מתחת לשולחן ואין קנייה מרכזית לכן אין ריכוזיות בנושא שירות ותמיכה

ו. רעיון: במקום שכל אוניברסיטה ימשיך לקנות שרתי אינבדיה באופן נפרד – תקנו מרכזי – שימו באתר  serverfarm הבא (מוכן לאכלוס בעוד שנתיים) ואז תקבלו שירות ותמיכה הרבה יותר טובה



יש לנו מפגש ביוני עם גוגל (30 דקות גוגל + 30 דקות אנחנו).  יש כמה ימים שניתן לצרף המפגש לשני  slots – בת שעתיים ואז ניתן להזמין נציגי אינבדיה.

האם אתם מעוניינים בדיון לשעתיים במקום לשעה במפגש הבא?



בברכה,

הנק




-------------- next part --------------
An HTML attachment was scrubbed...
URL: <http://nocvm.iucc.ac.il/pipermail/hpc-list/attachments/20220609/a8b04efe/attachment-0001.htm>
-------------- next part --------------
A non-text attachment was scrubbed...
Name: image001.png
Type: image/png
Size: 5905 bytes
Desc: image001.png
URL: <http://nocvm.iucc.ac.il/pipermail/hpc-list/attachments/20220609/a8b04efe/attachment-0001.png>