Перейти к содержанию
ERITKOM
ОблакаНовость

Google Cloud Batch перевела выбор нескольких типов машин в общую доступность

Instance flexibility вышла из Preview 16 ноября. Для одного задания можно задать несколько подходящих типов VM и приоритеты выбора, но совместимость ресурсов остаётся обязательной.

Реальные серверные стойки NERSC на архивном снимке, не виртуальные машины или инфраструктура Google Batch
Derrick Coetzee, NERSC, 14.10.2011, CC0 1.0. Историческая иллюстрация вычислительной инфраструктуры, не Google. Изменены размер и JPEG → WebP.

Не привязывать очередь к единственной конфигурации

Google Cloud Batch 16 ноября объявила общую доступность instance flexibility. Механизм позволяет разрешить одному пакетному заданию использование нескольких типов виртуальных машин и при необходимости расставить их по приоритетам. Ранее, с июля, возможность находилась в Preview. Одновременно Google сообщила о создании таких заданий через облачную консоль.

Задача функции — повысить вероятность получения подходящих вычислительных ресурсов. Если задан только один тип машины, отсутствие свободной ёмкости именно этого типа может задержать запуск. Разрешённые альтернативы дают планировщику дополнительный выбор. Компания также приводит сценарий поиска Spot VM, для которых меньше вероятность прерывания. Это не обещание отсутствия остановок или гарантированного срока окончания любого задания, а расширение допустимого набора ресурсов.

Как устроен приоритет выбора

В конфигурации используются наборы instance selections с типами машин. У каждого набора должно быть собственное имя и уникальный ранг; меньший номер означает более высокий приоритет. Один тип машины нельзя повторять в нескольких наборах. В консоли настройка расположена в разделе ресурсов задания и называется Flexible machine types.

Для выбора более доступных ресурсов внутри одного ранга нужны несколько типов машин в соответствующем наборе. Если каждому рангу соответствует единственный тип, механизм даёт только последовательные альтернативы. Поэтому наличие списка вариантов ещё не означает оптимизацию выбора внутри группы: важна структура набора, а не только его длина.

Гибкость не отменяет ограничения совместимости

Документация ограничивает задание пятьюдесятью наборами выбора и двумястами уникальными типами машин. При таком способе конфигурации нельзя одновременно указывать обычное поле machineType. Для каждой альтернативы должны подходить регион размещения, требования отдельной задачи к вычислениям, диски, образы, сеть и дополнительные параметры экземпляра. Иначе ошибка может возникнуть уже после отправки задания.

Механизм несовместим с FLEX_START и RESERVATION_BOUND, а также со специально адресованным резервом. Это не взаимозаменяемые способы получения ёмкости. Для задания с несколькими типами GPU-машин руководство требует Google Cloud CLI или API Batch; одной новой формы консоли недостаточно.

Выбор конфигурации — одна часть доступности ресурсов

Общее руководство Batch рассматривает получение ёмкости отдельно от цены, допустимой длительности работы и поддержки нужных машин. Резервы дают более высокую определённость наличия ресурсов, но оплачиваются и в периоды простоя. On-demand с instance flexibility и Flex-start занимают разные места в этой модели; у последнего есть ожидание старта и ограничение продолжительности выполнения.

Другой параметр — допустимые зоны размещения. По умолчанию ресурсы задания могут находиться во всех зонах его региона. Искусственное сужение этого набора ограничивает варианты планировщика независимо от числа выбранных типов машин.

Для нагрузки из независимых этапов Google описывает и другой подход: отделять требовательные вычисления от лёгких операций, использовать зависимые задания и уменьшать минимальный размер одновременно запрашиваемого ресурса. Эти рекомендации не появились впервые 16 ноября и приведены как контекст. Новость относится именно к переходу instance flexibility в общую доступность и поддержке настройки в консоли, а не к полной замене остальных механизмов планирования Batch.

Источники

Принципы журнала и исправления.

ERITKOM / НОВЫЙ ПРОЕКТ

Расскажите о задаче и оставьте контакты. Мы свяжемся с вами, чтобы обсудить проект.

  1. 01 Контакты
  2. 02 Ваша задача