Создание инстанса MLflow

В статье приведены примеры создания инстанса MLflow при помощи Terraform.

При создании инстанса используются:

• ресурс vkcs_mlplatform_mlflow;
• ресурс vkcs_mlplatform_jupyterhub;
• ресурс vkcs_networking_network;
• источник данных vkcs_compute_flavor;
• источник данных vkcs_networking_network.

1. Ознакомьтесь с доступными ресурсами и квотами для региона, в котором планируется создать инстанс. Для разных регионов могут быть настроены разные квоты.

   Если вы хотите увеличить квоты, обратитесь в техническую поддержку.

2. Установите Terraform и настройте провайдер, если этого еще не сделано.

3. Для работы потребуется провайдер версии 0.6.0 или выше. Убедитесь, что версия провайдера в файле vkcs_provider.tf не ниже. Если версия провайдера ниже, обновите провайдер.

В примере ниже инстанс создается в следующей конфигурации:

• регион по умолчанию, зона доступности GZ1;
• тип диска SSD, размер — 50 ГБ;
• тип диска данных SSD, размер — 60 ГБ. Создайте файл конфигурации Terraform main.tf с содержимым:

Скопировать
resource "vkcs_mlplatform_mlflow" "mlflow" {  name              = "tf-example"  flavor_id         = data.vkcs_compute_flavor.basic.id  jh_instance_id    = vkcs_mlplatform_jupyterhub.jupyterhub.id  demo_mode         = true  availability_zone = "GZ1"  boot_volume = {    size        = 50    volume_type = "ceph-ssd"  }  data_volumes = [    {      size        = 60      volume_type = "ceph-ssd"    },  ]  networks = [    {      network_id = vkcs_networking_network.default.id    },  ]}

Здесь:

• flavor_id — идентификатор типа ВМ. Идентификатор можно прописать в манифесте или получить из источника данных.

  Примеры

• jh_instance_id — идентификатор инстанса JupyterHub для совместной работы. Можно создать новый инстанс или использовать существующий.

  Примеры

• demo_mode — демо-режим. Если true, все данные будут храниться на ВМ инстанса. Если false, для хранения данных будет подключен бакет S3 с базой данных DBaaS Postgres.

• network_id — идентификатор сети, в которой будет размещен инстанс. Инстанс может быть размещен в существующей сети или в новой. Идентификатор можно указать в манифесте, получить из источника данных или ресурса.

  Примеры

Создайте файл конфигурации Terraform flavor.tf c описанием нужного типа ВМ:

Скопировать
data "vkcs_compute_flavor" "basic" {  name = "STD2-4-4"}

Указанный в файле тип ВМ будет использоваться для создания инстанса MLflow в вашем проекте Terraform.

Создайте файл конфигурации Terraform jh_instance.tf c описанием инстанса JupyterHub.

Создайте файл конфигурации Terraform network.tf с описанием сетевой инфраструктуры для инстанса:

Скопировать
data "vkcs_networking_network" "default" {  name = "default"  sdn = "neutron"}

1. Поместите файлы конфигурации Terraform в одну директорию:

   • vkcs_provider.tf;
   • main.tf;
   • flavor.tf (если создавался);
   • jh_instance.tf(если создавался);
   • network.tf(если создавался).

2. Перейдите в эту директорию.

3. Убедитесь, что конфигурационные файлы корректны и содержат нужные изменения:

   Скопировать
   terraform validate && terraform plan

4. Примените изменения:

   Скопировать
   terraform apply

   При запросе подтверждения введите yes.

5. Дождитесь завершения операции.

Убедитесь, что инстанс MLflow был успешно создан:

1. Перейдите в личный кабинет VK Cloud.
2. Перейдите в раздел ML Platform → Инстансы. Убедитесь, что инстанс MLflow создан и активен.

Если созданные с помощью Terraform ресурсы вам больше не нужны, удалите их:

1. Перейдите в директорию с файлами конфигурации Terraform.

2. Выполните команду:

   Скопировать
   terraform destroy

   При запросе подтверждения введите yes.

3. Дождитесь завершения операции.