OpenAI подписала соглашение с Cerebras Systems на сумму более $10 миллиардов, сообщает Wall Street Journal. Компания намерена закупить до 750 мегаватт вычислительных мощностей в течение трех лет.
Чипы Cerebras будут использоваться для работы ChatGPT. Глава OpenAI Сэм Альтман лично инвестировал в Cerebras. Из судебных документов известно, что OpenAI и Cerebras рассматривали возможность сотрудничества еще в 2017 году.
OpenAI утверждает, что теперь у нее свыше 900 миллионов пользователей каждую неделю. Руководство не раз говорило о «сильной нехватке» вычислительных ресурсов.
Cerebras разрабатывает уникальные чипы. Компания не собирает множество маленьких процессоров, а делает единый чип на целой пластине кремния — Wafer Scale Engine (WSE).
Wafer Scale Engine содержит сотни тысяч ядер, оптимизированных для ИИ, которые быстро обмениваются данными внутри одного чипа. Такая архитектура избавляет от узких мест, возникающих при обмене информацией между отдельными GPU. WSE-1 вышел в 2020 году, WSE-2 — примерно через год, а третье поколение WSE-3 имеет 900 тысяч ядер и 4 триллиона транзисторов.
Cerebras позиционирует свои системы как быструю альтернативу кластерам GPU, которые предлагают такие производители, как Nvidia. По данным компании, один CS-3 может заменить крупные кластеры из сотен или тысяч отдельных видеокарт.
Однако пока Cerebras мало заметна на рынке чипов. При подаче заявки на IPO главным клиентом была компания G42 из Абу-Даби. Компания отказалась от размещения акций и привлекла $1,1 млрд частных инвестиций. Сейчас Cerebras оценивает себя в $22 млрд и строит дата-центры в Северной Америке и Европе.
Сделка с Cerebras — часть серии шагов OpenAI по поиску дешевых альтернатив чипам Nvidia. Также идет разработка собственного чипа совместно с Broadcom и заключено соглашение на поставку чипов AMD MI450.
Для Nvidia договор OpenAI и Cerebras — признак роста конкуренции на рынке чипов для ИИ. Nvidia также подписала с OpenAI предварительное соглашение на десять гигаватт чипов, но оно пока не окончательно. В декабре Nvidia соглашалась на покупку у Groq лицензии на $20 млрд — этот стартап тоже делает чипы для ИИ, близкие по концепции к разработке Cerebras. 90% сотрудников Groq переходят в Nvidia.
