Корпорація Майкрософт анонсувала нові потужні та високомасштабовані віртуальні машини, які інтегрують новітні графічні процесори NVIDIA H100 Tensor Core і мережу NVIDIA Quantum-2 InfiniBand.
Microsoft витратила сотні мільйонів доларів будівництво величезний суперкомп’ютер, який допоможе працювати чат-боту OpenAI ChatGPT, У звіті Microsoft пояснює, як вона створила потужну інфраструктуру Azure AI, яку використовує OpenAI, і як її системи стають ще надійнішими.
Щоб побудувати суперкомп’ютер, на якому працюють проекти OpenAI, Microsoft стверджує, що підключив тисячі блоки обробки графіки (GPU) NVIDIA до своєї платформи хмарних обчислень Azure. Це, у свою чергу, дозволило OpenAI навчати дедалі потужніші моделі та «розблокувати можливості ШІ» таких інструментів, як ChatGPT і Bing.
Скотт Гатрі, віце-президент із штучного інтелекту та хмари Microsoft, сказав, що компанія витратила на проект кілька сотень мільйонів доларів, йдеться у заяві. І хоча це може здатися краплею в море для Microsoft, яка нещодавно збільшила багатомільярдні багаторічні інвестиції в OpenAI, це, безумовно, це показує, що він готовий інвестувати ще більше грошей у простір ШІ.
Коли Microsoft інвестувала Млрд. 1 на OpenAI у 2019 році погодилися побудувати величезний суперкомп’ютер і найсучаснішим для початку досліджень штучного інтелекту. Єдина проблема: у Microsoft не було нічого, що потрібно OpenAI, і вона не була цілком впевнена, що зможе створити щось таке велике на своїй хмарній службі Azure, не зламавши її.
OpenAI намагався навчити постійно зростаючий набір програм штучного інтелекту, званих моделями, які поглинали все більші обсяги даних і вивчали все більше параметрів, змінних, які система ШІ виявляла під час навчання та перенавчання. Це означало, що OpenAI потребував доступу до потужних сервісів хмарних обчислень протягом тривалого часу.
Щоб впоратися з цим викликом, Microsoft довелося знайти способи зв'язати десятки тисяч графічних чіпів NVIDIA A100 і змініть спосіб розміщення серверів, щоб уникнути відключень електроенергії.
«Ми створили архітектуру системи, яка може працювати та бути надійною у великих масштабах. Саме це зробило ChatGPT можливим», — сказав Нідхі Чаппел, генеральний менеджер Microsoft з інфраструктури Azure AI. «Це шаблон, який пішов звідти. Їх буде багато-багато більше».
Ця технологія дозволила OpenAI запустити ChatGPT, вірусний чат-бот, який за кілька днів після свого IPO в листопаді залучив більше мільйона користувачів і зараз поглинається в бізнес-моделі інших компаній, починаючи з тих, якими керує засновник хедж-фонду мільярдера Кен Гріффін. час доставки.
Оскільки генеративні інструменти штучного інтелекту, такі як ChatGPT, зацікавляться компаніями та споживачами, зростатиме тиск на постачальників хмарних послуг, таких як Microsoft, Amazon і Google, щоб переконатися, що їхні центри обробки даних можуть забезпечити необхідну величезну обчислювальну потужність.
Тепер Microsoft використовує той самий набір ресурсів, який створила для OpenAI, щоб навчати та запускати власні чудові моделі ШІ, включаючи нового пошукового бота Bing, представленого минулого місяця. Компанія також продає систему іншим клієнтам. Гігант програмного забезпечення вже працює над наступним поколінням суперкомп’ютера зі штучним інтелектом у рамках розширеної угоди з OpenAI, у рамках якої Microsoft додала 10 мільярдів доларів до своїх інвестицій.
«Ми не будуємо їх на замовлення; це починалося як щось особливе, але ми завжди створювали його таким чином, щоб воно було узагальненим, щоб будь-хто, хто хоче навчити велику мовну модель, міг скористатися тими самими вдосконаленнями». – сказав Гатрі в інтерв’ю. «Це дійсно допомогло нам стати кращою хмарою для ШІ в цілому».
Навчання масивної моделі ШІ вимагає великої кількості графічних процесорів, з’єднаних в одному місці, як суперкомп’ютер ШІ, зібраний Microsoft. Після того, як модель використовується, відповіді на всі запитання, поставлені користувачами (так звані висновки), потребують дещо інших налаштувань. Корпорація Майкрософт також розгортає графічні чіпи для висновків, але ці процесори (сотні тисяч) географічно розосереджені в більш ніж 60 регіонах центрів обробки даних компанії. Тепер компанія додає найновіший графічний чіп NVIDIA для робочих навантажень штучного інтелекту (H100) і останню версію мережевої технології NVIDIA Infiniband для ще швидшого обміну даними.
Рішення Microsoft стати партнером з OpenAI була заснована на переконанні, що цей безпрецедентний масштаб інфраструктури дасть результати (нові можливості штучного інтелекту, новий тип платформи програмування), які Microsoft може перетворити на продукти та послуги, які принесуть реальні переваги клієнтам, сказав Веймут. Це переконання підживлює амбіції компаній подолати всі технічні проблеми, щоб створити його та продовжувати розширювати межі суперкомп’ютерів ШІ.
Фуенте: https://news.microsoft.com/
Цікаво, коли це стане реальністю, кількість безробіття, яка буде у світі, ми вбиваємо себе