AWS запустила расширения для кластеров HyperPod: мониторинг и учётные записи

AWS в ноябре 2026 года запустила для сервиса HyperPod управляемые расширения, сообщает блог компании. HyperPod держит кластеры Slurm: группы компьютеров, между которыми Slurm распределяет задачи при обучении больших моделей.
Командам с общим кластером проще вести мониторинг и учётные записи: настройки проверяются до применения, а состояние видно по каждому узлу. Для собственных программ по-прежнему нужны образы и скрипты.
Коротко
- Расширения ставят, меняют и удаляют через программные команды или веб-консоль SageMaker AI.
- За сами расширения AWS плату не берёт, платят за связанные ресурсы.
- Прямой доступ к компьютерам кластера, включая управляющий, остаётся.
Скрипты плохо справляются с программами, которые меняются
По описанию AWS, скрипт срабатывает только при подготовке узла — отдельного компьютера кластера. Каждая правка требует изменить скрипт и заменить узлы или перезапустить его везде. Отчёта об установленном нет, поэтому узлы со временем расходятся.
Расширение проверяют по схеме при отправке: опечатка в настройке отклоняется до того, как дойдёт до узла. Его применяют на всех узлах, включая новые и замененные, а статус виден по каждому.
Два расширения закрывают метрики и учётные записи
Расширение sagemaker-observability собирает показатели узлов, видеокарт, сети, заданий и самого Slurm. Оно отправляет их в CloudWatch или Managed Service for Prometheus — сервисы AWS для приёма метрик.
Расширение sagemaker-user-management создаёт пользователей и группы с одинаковыми номерами на всех узлах. Оно задаёт, кто может входить удалённо и использовать sudo, то есть права администратора. Кластер можно связать с корпоративным каталогом сотрудников.
Права на каждое расширение выдают отдельно
У каждого расширения свой идентификатор, поэтому права раздельные: команда платформы меняет пользователей, команда мониторинга — метрики, служба безопасности только читает.
В примере AWS администратор одним запросом узнаёт, у кого есть sudo на управляющем узле, не заходя на сам узел. Если настройки не подходят новой версии, запрос на обновление отклоняется без изменений.
Что это значит для вас
- Настройки мониторинга и пользователей можно передать AWS, а собственные программы оставить в образах и скриптах.
- Проверить, кто имеет права администратора, можно запросом, без входа на узлы.
Что делать
- Если вы уже управляете кластером HyperPod, откройте вкладку Extensions на странице кластера в консоли SageMaker AI.
- Решите, что останется в скриптах: ваши программы и особая подготовка узлов.
- Выдайте отдельным ролям доступ только к нужному расширению.
- Посчитайте расходы на ресурсы, которые подключите: сами расширения бесплатны, а платить придётся за используемые сервисы, например CloudWatch или Secrets Manager.
Чего пока неизвестно
Список регионов в блоге не приведён: расширения доступны везде, где работает HyperPod. О работе и оплате из России источник не говорит.
Редакция «Применяй ИИ» · Как мы готовим новости




