[چين، شينزين، جولاءِ 14، 2023] اڄ، Huawei وڏي پيماني تي ماڊلز جي دور لاءِ پنهنجو نئون AI اسٽوريج حل پيش ڪيو، بنيادي ماڊل ٽريننگ، انڊسٽري لاءِ مخصوص ماڊل ٽريننگ، ۽ سيڪشن ٿيل منظرنامي ۾ انفرنس لاءِ بهترين اسٽوريج حل مهيا ڪري، اهڙي طرح نئين AI صلاحيتن کي ختم ڪرڻ.
وڏي پيماني تي ماڊل ايپليڪيشنن جي ترقي ۽ عمل ۾، ادارن کي چار وڏن چئلينجن کي منهن ڏيڻو پوي ٿو:
پهرين، ڊيٽا جي تياري لاءِ گهربل وقت ڊگهو آهي، ڊيٽا جا ذريعا پکڙيل آهن، ۽ جمع ڪرڻ سست آهي، سوين ٽيرابائيٽ ڊيٽا جي اڳڀرائي لاءِ اٽڪل 10 ڏينهن لڳن ٿا. ٻيو، ملٽي ماڊل وڏن ماڊلز لاءِ وڏي ٽيڪسٽ ۽ تصويري ڊيٽا سيٽن سان، وڏين ننڍين فائلن لاءِ موجوده لوڊشيڊنگ جي رفتار 100MB/s کان گهٽ آهي، جنهن جي نتيجي ۾ ٽريننگ سيٽ لوڊ ڪرڻ لاءِ گهٽ ڪارڪردگيءَ جو نتيجو آهي. ٽيون، وڏي ماڊلز لاءِ بار بار پيٽرولر جي ترتيب، غير مستحڪم ٽريننگ پليٽ فارمن سان گڏ، تربيتي رڪاوٽن جو سبب بڻجندي آهي تقريبن هر 2 ڏينهن، ٽريننگ کي ٻيهر شروع ڪرڻ لاءِ چيڪ پوائنٽ ميڪنزم جي ضرورت آهي، بحالي هڪ ڏينهن کان وڌيڪ وقت سان. آخر ۾، وڏين ماڊلز لاءِ اعليٰ عمل درآمد جي حد، پيچيده سسٽم سيٽ اپ، وسيلن جي شيڊيولنگ چئلينجز، ۽ GPU وسيلن جو استعمال اڪثر 40٪ کان گھٽ.
Huawei وڏي پيماني تي ماڊلز جي دور ۾ AI ترقي جي رجحان سان ترتيب ڏئي رهيو آهي، مختلف صنعتن ۽ منظرنامي لاءِ تيار ڪيل حل پيش ڪري ٿو. اهو متعارف ڪرايو OceanStor A310 Deep Learning Data Lake Storage and the FusionCube A3000 Training/Inference Super-converged Appliance. OceanStor A310 ڊيپ لرننگ ڊيٽا ڍنڍ اسٽوريج ٻنهي بنيادي ۽ صنعت جي سطح جي وڏي ماڊل ڊيٽا ڍنڍ جي منظرنامي کي ھدف ڪري ٿو، ڊيٽا جي مجموعي کان جامع AI ڊيٽا مينيجمينٽ حاصل ڪرڻ، ماڊل ٽريننگ کان اڳ پروسيسنگ، ۽ انفرنس ايپليڪيشنون. OceanStor A310، هڪ واحد 5U ريڪ ۾، صنعت جي معروف 400GB/s بينڊوڊٿ ۽ 12 ملين IOPS تائين، 4096 نوڊس تائين لڪير اسڪاليبلٽي سان، بيحد ڪراس پروٽوڪول ڪميونيڪيشن کي چالو ڪري ٿو. گلوبل فائل سسٽم (GFS) سڀني علائقن ۾ ذھني ڊيٽا کي آسان بڻائي ٿو، ڊيٽا گڏ ڪرڻ جي عمل کي منظم ڪرڻ. ويجھي اسٽوريج ڪمپيوٽنگ کي حقيقي ڊيٽا پري پروسيسنگ، ڊيٽا جي حرڪت کي گھٽائڻ، ۽ پروسيسنگ ڪارڪردگي کي 30٪ بهتر بڻائي ٿو.
FusionCube A3000 ٽريننگ/Inference Super-Converged Appliance، صنعت-سطح جي وڏي ماڊل ٽريننگ/انفرنس منظرنامي لاءِ ٺهيل، ايپليڪيشنن کي پورو ڪري ٿو جنهن ۾ ماڊلز شامل آهن بلين پيرا ميٽرز سان. اهو OceanStor A300 اعليٰ ڪارڪردگي اسٽوريج نوڊس، ٽريننگ/انفرنس نوڊس، سوئچنگ سامان، AI پليٽ فارم سافٽ ويئر، ۽ انتظام ۽ آپريشن سافٽ ويئر کي ضم ڪري ٿو، وڏي ماڊل پارٽنرز کي ون اسٽاپ ترسيل لاءِ پلگ ۽ پلي ڊيپلائيمينٽ جو تجربو مهيا ڪري ٿو. استعمال ڪرڻ لاء تيار، ان کي 2 ڪلاڪن اندر مقرر ڪري سگهجي ٿو. ٻئي ٽريننگ / انفرنس ۽ اسٽوريج نوڊس کي آزاد ۽ افقي طور تي وڌايو وڃي ٿو مختلف ماڊل پيماني جي گهرجن سان ملائڻ لاء. ان دوران، FusionCube A3000 GPUs کي شيئر ڪرڻ لاءِ گھڻن ماڊل ٽريننگ ۽ انفرنس ٽاسڪ کي فعال ڪرڻ لاءِ اعليٰ ڪارڪردگي وارا ڪنٽينرز استعمال ڪري ٿو، وسيلن جي استعمال کي 40٪ کان 70٪ تائين وڌائي ٿو. FusionCube A3000 ٻن لچڪدار ڪاروباري ماڊل کي سپورٽ ڪري ٿو: Huawei Ascend One-Stop Solution ۽ ٽئين پارٽي پارٽنر ون-اسٽاپ حل سان گڏ اوپن ڪمپيوٽنگ، نيٽ ورڪنگ، ۽ AI پليٽ فارم سافٽ ويئر.
Huawei جي ڊيٽا اسٽوريج پراڊڪٽ لائن جي صدر، زو يوفينگ، چيو ته، "وڏي پيماني تي ماڊل جي دور ۾، ڊيٽا AI انٽيليجنس جي اونچائي کي طئي ڪري ٿو. ڊيٽا جي ڪيريئر جي طور تي، ڊيٽا اسٽوريج AI وڏي پيماني تي ماڊل لاء بنيادي بنيادي زيربنا بڻجي ويندو آهي. Huawei ڊيٽا اسٽوريج جدت جاري رکندي، AI وڏن ماڊلز جي دور لاءِ متنوع حل ۽ پراڊڪٽس مهيا ڪندي، ڀائيوارن سان تعاون ڪندي صنعتن جي وسيع رينج ۾ AI کي بااختيار بڻائڻ لاءِ.
پوسٽ جو وقت: آگسٽ-01-2023