Что входит в программный комплект ускорителей MetaX и что собирается самостоятельно
Состав поставляемого комплекта MXMACA, что собирается на объекте, где возникают расхождения версий и что проверяется до закупки ускорителей MetaX.
Ускоритель без программного окружения не считает. Для ускорителей MetaX это окружение называется MXMACA и включает драйвер, системную среду выполнения, библиотеки линейной алгебры и вычислений, средства профилирования и слои совместимости с распространёнными средами обучения. Часть этого набора поставляется готовой, часть — собирается под конкретную конфигурацию узла, а часть прикладной обвязки всегда остаётся на стороне заказчика.
Ниже — что входит в поставляемый комплект, что собирается на объекте, где возникают расхождения версий и что проверяется до закупки. Направление описано на странице GPU MetaX.
Что входит в поставляемый комплект
- Драйвер ускорителя под поддерживаемые версии операционной системы и ядра. Это первая точка совместимости: драйвер собирается под конкретную ветку ядра, и произвольное обновление ядра требует пересборки или новой версии драйвера.
- Системная среда выполнения, через которую прикладные программы обращаются к ускорителю.
- Библиотеки вычислений: линейная алгебра, свёртки и операции нейронных сетей, работа с разреженными структурами, генерация случайных чисел, преобразования.
- Библиотека обмена между картами и между узлами — она нужна для обучения на нескольких ускорителях и определяет, насколько эффективно используется межкарточная связь MetaXLink.
- Компилятор и средства сборки для собственного вычислительного кода.
- Средства наблюдения и профилирования: загрузка ускорителя, занятость памяти, температура, потребление, разбор времени выполнения операций.
- Слои совместимости с распространёнными средами обучения — именно они позволяют переносить существующие задачи без переписывания кода.
- Средства виртуализации и разделения ресурсов, позволяющие держать на одном сервере несколько параллельных задач.
Что собирается на объекте
- Образы контейнеров под конкретные задачи. Базовые образы поставляются, но набор библиотек, версии сред обучения и прикладные зависимости собираются под проект.
- Сборка прикладных сред обучения из исходного кода, если нужна версия, для которой готовой сборки нет.
- Интеграция с планировщиком задач. Распределение ускорителей между задачами и очередями настраивается под принятую на объекте схему.
- Квотирование и разделение карт между командами: правила, кто и сколько ресурсов получает, задаются администратором.
- Подключение к системе наблюдения объекта. Показатели ускорителей выводятся в ту систему, которой уже пользуется служба эксплуатации.
- Хранилище данных обучения и его подключение к узлам. Это часть инфраструктуры, а не комплекта ускорителя.
- Правила обновления. Порядок, в котором обновляются драйвер, среда выполнения и прикладные образы, задаётся регламентом объекта.
- Проверочные задачи. Набор задач, на которых подтверждается работоспособность после каждого обновления, составляется под конкретные модели заказчика.
Что поставляется, а что собирается
| Составная часть | Поставляется | Собирается на объекте |
|---|---|---|
| Драйвер и среда выполнения | Да, под поддерживаемые версии ядра | Пересборка при нестандартном ядре |
| Вычислительные библиотеки | Да | Нет |
| Библиотека обмена между картами | Да | Настройка топологии под конфигурацию узла |
| Среды обучения | Готовые сборки под распространённые версии | Нужные версии, которых нет в комплекте |
| Контейнерные образы | Базовые | Прикладные под проект |
| Планировщик и квоты | Нет | Да, под схему объекта |
| Наблюдение и оповещения | Средства снятия показателей | Интеграция с системой объекта |
| Проверочные задачи | Нет | Да, на моделях заказчика |
Где возникают расхождения версий
- Ядро операционной системы и драйвер. Обновление ядра штатными средствами системы может вывести драйвер из строя, поэтому ядро фиксируется, а обновления согласуются с версией драйвера.
- Среда выполнения и прикладная среда обучения. Сборка среды обучения рассчитана на определённую версию системной среды выполнения, и их обновление идёт согласованно.
- Библиотека обмена и топология узла. При изменении конфигурации — добавлении карт, смене схемы связи — настройки обмена пересматриваются.
- Версия прошивки ускорителя. Она обновляется отдельно от драйвера и имеет собственные требования к совместимости.
- Образы контейнеров. Образ, собранный под прежнюю версию среды выполнения, на обновлённом узле может не запуститься, поэтому образы пересобираются вместе с обновлением узла.
- Разнородный парк. Если на объекте стоят ускорители разных производителей, окружения разделяются по узлам, а распределение задач между ними решается планировщиком.
Что проверяется до закупки
- Перечень поддерживаемых операционных систем и версий ядра — он сопоставляется с принятым на объекте стандартом.
- Версии сред обучения, для которых есть готовые сборки, и сроки их обновления.
- Поддержка нужных типов вычислений и форматов данных для ваших моделей.
- Состав библиотеки обмена и поддерживаемые схемы масштабирования: межкарточная связь внутри узла и сеть между узлами.
- Возможности виртуализации и разделения карт между задачами, если на одном сервере планируется несколько команд.
- Средства наблюдения и перечень показателей, которые можно вывести во внешнюю систему.
- Порядок получения обновлений и условия технической поддержки.
- Состав работ по вводу в эксплуатацию: кто собирает образы, настраивает планировщик и проводит проверочные задачи.
- Перечень проверочных задач, на которых подтверждается работоспособность конфигурации при приёмке.
Частые вопросы
Нужно ли переписывать код под MetaX? Экосистема MXMACA ориентирована на совместимость с привычными средами и последовательностями обработки, поэтому перенос существующих задач упрощается. Объём доработок зависит от того, насколько код опирается на особенности прежней платформы; это выясняется проверкой на пилотной конфигурации до основной закупки.
Можно ли держать несколько задач на одном сервере? Да, виртуализация и разделение ресурсов предусмотрены — на одном сервере работают параллельные задачи с выделенными долями ускорителей. Правила разделения настраиваются администратором под принятую схему квот.
Что делать с обновлениями операционной системы? Ядро фиксируется на версии, поддерживаемой драйвером, а обновления безопасности применяются в рамках этой ветки. Переход на новое ядро планируется вместе с обновлением драйвера и пересборкой образов.
Кто собирает контейнерные образы под задачи? Базовые образы входят в комплект, прикладные собираются под проект — силами службы заказчика либо в рамках работ по вводу в эксплуатацию. Это разделение фиксируется в договоре, а не оставляется на усмотрение.
Что прислать для подбора? Используемые среды обучения и их версии, перечень моделей и типы вычислений, принятую операционную систему и версию ядра, схему планировщика и квот, число команд и задач на узел, требования к наблюдению и к регламенту обновлений.
Что мы делаем
Сверяем состав программного комплекта с вашим окружением, проверяем поддержку нужных версий ядра и сред обучения, планируем пилот для проверки переноса задач, разделяем работы по сборке образов и настройке планировщика между сторонами, подбираем конфигурацию узла и схему масштабирования. Направления — GPU MetaX и GPU NVIDIA.
Пришлите перечень сред обучения и моделей на sale@tkasiatorg.ru — проверим совместимость, предложим состав пилота и назовём сроки поставки.

