Компании SpaceX и xAI разрабатывают серверную систему Kessel. В основе платформы лежат 36 центральных процессоров NVIDIA® Vera™ и 72 графических ускорителя Rubin™, но вместо стандартных медных кабельных сборок NVLink инженеры решили использовать единую 84-слойную печатную плату. Проект адаптирован для эксплуатации как в «земных» ЦОД, так и на орбите.
Компоновка стойки и отказ от кабелей NVLink
По данным SemiAnalysis, система Kessel сохраняет базовую вычислительную топологию Vera™ Rubin™ NVL72. Внутри одной стойки размещаются 36 процессоров Vera™ и 72 ускорителя Rubin™ (в 18 вычислительных узлах), объединенные через 9 коммутационных модулей NVLink. Самое интересное в этой конструкции — способ их соединения.
В стандартной реализации от NVIDIA связь между вычислительными узлами и коммутаторами обеспечивается за счет внутренних кабельных картриджей NVLink. Инженеры SpaceX отказываются от этой схемы и размещают вычислительные и коммутационные лотки тыльной стороной друг к другу (back-to-back, так сказать) вокруг пассивной объединительной печатной платы. Подобный подход перекликается со стоечной архитектурой Kyber™, где внутри одной стойки также применяется бескабельное соединение модулей через общую объединительную панель (мидплейн).
Источник.
84-слойная плата
Основной элемент конструкции Kessel — 84-слойная печатная плата, изготовленная с применением фольгированного диэлектрика класса M10 с ультранизкими потерями сигнала. Для сравнения: в архитектуре NVIDIA® Kyber™ используется значительно более сложная 156-слойная объединительная панель на базе M9. Снижение количества слоев почти вдвое повышает технологичность производства и процент выхода годных изделий, хотя переход на более дорогой M10 увеличивает себестоимость материалов.
Изготовление 84-слойной платы сопряжено с высокими производственными рисками. В современных серверных материнских платах обычно применяется от 14 до 20 слоев, а в отладочных стендах — немногим более 20 слоев для минимизации паразитных электрических эффектов. При выпуске 84-слойной панели любой дефект травления или совмещения на внутренних слоях приводит к браку всей заготовки. Отказ от сложных кабельных жгутов упрощает финальную сборку стойки, однако итоговая эффективность Kessel в экономическом плане будет зависеть от того, покроет ли экономия на кабелях и самостоятельных закупках затраты на сложные многослойные платы.
Арендуйте сервер с доставкой на вашу площадку
Предоставим мощные серверы для запуска проекта on-premise с помесячной оплатой, полным контролем над железом на этапе запуска и возможностью выкупа.
Арендовать →
Переход на прямые закупки чипов
Помимо изменений в топологии соединений, проект меняет модель взаимодействия с поставщиком. С выходом Vera™ Rubin™ производитель планирует поставлять партнерам преимущественно готовые вычислительные платы уровня L6 или полностью собранные серверные узлы уровня L10. SpaceX намерена закупать у NVIDIA непосредственно корпусированные процессоры, графические ускорители, микросхемы коммутаторов и сетевые контроллеры, а проектирование плат и закупку остальных комплектующих взять на себя.
Такой подход позволяет напрямую выбирать контрактных производителей печатных плат, адаптировать конструкции под требования орбитального развертывания (учитывая в том числе специфику теплоотвода в «вакуумных» условиях и вибронагрузок при запуске) и снизить наценку за готовую интеграцию. При этом SpaceX берет на себя все задачи по валидации, контролю качества и управлению цепочками поставок, включая поиск дефицитной памяти.
Значение для рынка
Для NVIDIA переход крупного заказчика на закупку отдельных чипов вместо готовых серверных сборок означает снижение маржинальности с каждой стойки. Однако успешная реализация проекта Kessel может подтолкнуть других крупных игроков рынка ИИ к созданию собственных серверных платформ на базе ускорителей NVIDIA, что укрепит позиции компании в условиях растущей конкуренции со стороны специализированных ИИ-процессоров, разрабатываемых гиперскейлерами.
Источник: habr.com