Суперкомпьютер Colossus 2, разработанный компанией xAI, начал параллельное обучение семи значительным языковым и мультимодальным моделям, как сообщил Илон Маск. В данный момент в процессе тренировки находятся следующие модели: Imagine V2, которая представляет собой усовершенствованную генеративную одель для создания изображений и видео, две модели с объёмом 1 трлн параметров, две модели с 1,5 трлн параметров, а также модели на 6 трлн и 10 трлн параметров. Маск отметил, что предварительное обучение самой крупной модели, содержащей 10 трлн параметров, займет около двух месяцев. Кроме того, Colossus 2 стал первым в мире ИИ-кластером с энергопотреблением в 1 ГВт, что превышает пик энергозатрат крупного города, например, Сан-Франциско. Суперкомпьютер предназначен не только для обучения Grok, но и для выполнения других задач.