Η Microsoft ανακοίνωσε νέες ισχυρές και εξαιρετικά επεκτάσιμες εικονικές μηχανές που ενσωματώνουν τις πιο πρόσφατες GPU NVIDIA H100 Tensor Core και τη δικτύωση NVIDIA Quantum-2 InfiniBand.
Η Microsoft έχει ξοδέψει εκατοντάδες εκατομμύρια δολάρια την κατασκευή του ένας τεράστιος υπερυπολογιστής για να βοηθήσει στην τροφοδοσία του OpenAI ChatGPT chatbot, Σε μια αναφορά, η Microsoft εξηγεί πώς κατασκεύασε την ισχυρή υποδομή AI Azure που χρησιμοποιείται από το OpenAI και πώς τα συστήματά της γίνονται ακόμη πιο στιβαρά.
Για την κατασκευή του υπερυπολογιστή που τροφοδοτεί τα έργα OpenAI, η Microsoft ισχυρίζεται ότι έχει συνδέσει χιλιάδες μονάδες επεξεργασίας γραφικών (GPU) NVIDIA στην πλατφόρμα υπολογιστών νέφους Azure. Αυτό, με τη σειρά του, επέτρεψε στο OpenAI να εκπαιδεύει όλο και πιο ισχυρά μοντέλα και να «ξεκλειδώνει τις δυνατότητες AI» εργαλείων όπως το ChatGPT και το Bing.
Σκοτ Γκάθρι, αντιπρόεδρος τεχνητής νοημοσύνης και cloud στη Microsoft, είπε ότι η εταιρεία ξόδεψε αρκετές εκατοντάδες εκατομμύρια δολάρια για το έργο, σύμφωνα με ανακοίνωση. Και ενώ αυτό μπορεί να φαίνεται σαν μια σταγόνα στον κάδο για τη Microsoft, η οποία πρόσφατα επέκτεινε την πολυετή επένδυση πολλών δισεκατομμυρίων δολαρίων στο OpenAI, σίγουρα δείχνει ότι είναι έτοιμη να επενδύσει ακόμη περισσότερα χρήματα στον χώρο της AI.
Όταν επένδυσε η Microsoft 1 δισεκατομμύρια δολάρια στο OpenAI το 2019, συμφώνησε να κατασκευάσει έναν τεράστιο υπερυπολογιστή και τελευταίας τεχνολογίας για την έναρξη έρευνας τεχνητής νοημοσύνης. Το μόνο πρόβλημα: Η Microsoft δεν είχε τίποτα που χρειαζόταν το OpenAI και δεν ήταν απολύτως σίγουρη ότι θα μπορούσε να δημιουργήσει κάτι τόσο μεγάλο στην υπηρεσία cloud της Azure χωρίς να το σπάσει.
Το OpenAI προσπαθούσε να εκπαιδεύσει ένα διαρκώς αυξανόμενο σύνολο προγραμμάτων τεχνητής νοημοσύνης που ονομάζονταν μοντέλα, τα οποία προσλάμβαναν μεγαλύτερους όγκους δεδομένων και μάθαιναν όλο και περισσότερες παραμέτρους, τις μεταβλητές που ανακάλυψε το σύστημα τεχνητής νοημοσύνης μέσω της εκπαίδευσης και της επανεκπαίδευσης. Αυτό σήμαινε ότι το OpenAI χρειαζόταν πρόσβαση σε ισχυρές υπηρεσίες υπολογιστικού νέφους για μεγάλες χρονικές περιόδους.
Για να αντιμετωπίσετε αυτή την πρόκληση, Η Microsoft έπρεπε να βρει τρόπους να συνδέσει δεκάδες χιλιάδες τσιπ γραφικών NVIDIA A100 και αλλάξτε τον τρόπο με τον οποίο συγκεντρώνετε διακομιστές για να αποφύγετε διακοπές ρεύματος.
«Χτίσαμε μια αρχιτεκτονική συστήματος που θα μπορούσε να λειτουργήσει και να είναι αξιόπιστη σε μεγάλη κλίμακα. Αυτό έκανε το ChatGPT δυνατό», δήλωσε ο Nidhi Chappell, γενικός διευθυντής της Microsoft για την υποδομή AI Azure. «Είναι ένα μοτίβο που προήλθε από εκεί. Θα υπάρξουν πολλά, πολλά άλλα».
Η τεχνολογία επέτρεψε στο OpenAI να λανσάρει το ChatGPT, το viral chatbot που προσέλκυσε περισσότερους από ένα εκατομμύριο χρήστες εντός ημερών από την IPO του Νοεμβρίου και τώρα απορροφάται από τα επιχειρηματικά μοντέλα άλλων εταιρειών, από αυτά που διευθύνει ο δισεκατομμυριούχος ιδρυτής hedge fund Ken Griffin στο χρόνος παράδοσης.
Καθώς τα εργαλεία δημιουργίας τεχνητής νοημοσύνης όπως το ChatGPT κερδίζουν ενδιαφέρον από επιχειρήσεις και καταναλωτές, θα υπάρξει αυξημένη πίεση στους παρόχους υπηρεσιών cloud όπως η Microsoft, η Amazon και η Google για να διασφαλίσουν ότι τα κέντρα δεδομένων τους μπορούν να παρέχουν την τεράστια υπολογιστική ισχύ που απαιτείται.
Τώρα η Microsoft χρησιμοποιεί τους ίδιους πόρους που κατασκεύασε για το OpenAI για να εκπαιδεύσει και να τρέξει τα δικά της υπέροχα μοντέλα τεχνητής νοημοσύνης, συμπεριλαμβανομένου του νέου ρομπότ αναζήτησης Bing που παρουσιάστηκε τον περασμένο μήνα. Η εταιρεία πουλάει επίσης το σύστημα σε άλλους πελάτες. Ο γίγαντας λογισμικού εργάζεται ήδη για την επόμενη γενιά του υπερυπολογιστή AI, στο πλαίσιο μιας διευρυμένης συμφωνίας με την OpenAI στην οποία η Microsoft έχει προσθέσει 10 δισεκατομμύρια δολάρια στην επένδυσή της.
«Δεν τα κατασκευάζουμε ως έθιμο. ξεκίνησε ως κάτι προσαρμοσμένο, αλλά το χτίζαμε πάντα με τρόπο που γενικευόταν, ώστε όποιος θέλει να εκπαιδεύσει ένα μεγάλο γλωσσικό μοντέλο να μπορεί να επωφεληθεί από τις ίδιες βελτιώσεις». είπε ο Γκάθρι σε συνέντευξή του. «Μας βοήθησε πραγματικά να γίνουμε ένα καλύτερο cloud για την τεχνητή νοημοσύνη συνολικά».
Η εκπαίδευση ενός τεράστιου μοντέλου τεχνητής νοημοσύνης απαιτεί μεγάλο αριθμό μονάδων επεξεργασίας γραφικών συνδεδεμένων σε ένα μέρος, όπως ο υπερυπολογιστής AI που συναρμολογείται από τη Microsoft. Μόλις ένα μοντέλο χρησιμοποιείται, η απάντηση σε όλες τις ερωτήσεις που τίθενται από τους χρήστες (που ονομάζεται συμπέρασμα) απαιτεί μια ελαφρώς διαφορετική ρύθμιση. Η Microsoft αναπτύσσει επίσης τσιπ γραφικών για συμπεράσματα, αλλά αυτοί οι επεξεργαστές (εκατοντάδες χιλιάδες) είναι γεωγραφικά διασκορπισμένοι στις 60 και πλέον περιοχές των κέντρων δεδομένων της εταιρείας. Τώρα η εταιρεία προσθέτει το πιο πρόσφατο τσιπ γραφικών NVIDIA για φόρτους εργασίας AI (το H100) και την πιο πρόσφατη έκδοση της τεχνολογίας δικτύωσης Infiniband της NVIDIA για ακόμα πιο γρήγορη κοινή χρήση δεδομένων.
Η απόφαση της Microsoft να συνεργαστεί με το OpenAI ιδρύθηκε με την πεποίθηση ότι αυτή η άνευ προηγουμένου κλίμακα υποδομής θα παράγει αποτελέσματα (νέες δυνατότητες τεχνητής νοημοσύνης, ένας νέος τύπος πλατφόρμας προγραμματισμού) που η Microsoft θα μπορούσε να μετατρέψει σε προϊόντα και υπηρεσίες που θα προσφέρουν πραγματικά οφέλη στους πελάτες, δήλωσε ο Waymouth. Αυτή η πεποίθηση έχει τροφοδοτήσει τη φιλοδοξία των εταιρειών να ξεπεράσουν όλες τις τεχνικές προκλήσεις για να το κατασκευάσουν και να συνεχίσουν να υπερβαίνουν τα όρια του υπερυπολογιστή με τεχνητή νοημοσύνη.
πηγή: https://news.microsoft.com/
Αναρωτιέμαι όταν αυτό γίνει πραγματικότητα το ποσό της ανεργίας που θα είναι στον κόσμο, αυτοκτονούμε