Gerenciamento de pipelines

Criação de pipelines

Na página Pipelines, clique no botão Criar novo. A página Criar nova execução do pipeline é exibida.

Como alternativa, nos Detalhes do pacote de ML de um pacote específico, selecione as Execuções do pipeline e, em seguida, clique no botão Criar novo. A página Criar nova execução do pipeline é exibida.
Na página Criar nova execução do pipeline, selecione o tipo da execução do pipeline. As opções disponíveis são Execução de treinamento, Execução de avaliação e Execução do pipeline completo.
Selecione o pacote para a execução do pipeline.
Selecione as versões principal e secundária do pacote.
Selecione os conjuntos de dados. De acordo com o tipo de pipeline selecionado, os seguintes conjuntos de dados devem ser especificados:
- Para pipeline de treinamento, especifique o conjunto de dados de entrada.
- Para pipeline de avaliação, especifique o conjunto de dados de avaliação.
- Para a execução do pipeline completo, especifique o conjunto de dados de entrada e o conjunto de dados de avaliação.
(Opcional): insira parâmetros para as execuções do pipeline. Clique em Adicionar novo para exibir a seção Parâmetros e, em seguida, insira a variável de ambiente e seu valor correspondente. Vários parâmetros são aceitos.
Selecione se o pipeline requer uma GPU; por padrão, é definido como Não.
Opcional: alterne Habilitar configurações de infraestrutura se desejar personalizar os recursos e o tamanho do armazenamento para a implantação específica. Se estiver habilitado, os seguintes campos podem ser personalizados:
- O tamanho de solicitação e tamanho limite para a RAM (GB).
- O tamanho de solicitação e tamanho limite para a CPU.
- Tamanho do armazenamento (GB).
Selecione quando o pipeline deve ser executado. As opções possíveis são:
- Executar agora — o pipeline começa a ser executado imediatamente após sua criação.
- Com base no tempo — o pipeline começa a ser executado na data e na hora que você especificar nos campos Data e Hora.
- Recorrente - o pipeline começa a ser executado de acordo com o agendamento recorrente que você configurou na janela Definir agendamento recorrente. É possível configurá-lo para ser executado em dias úteis específicos em um determinado momento ou é possível usar expressões CRON.
Leia aqui mais informações sobre o agendamento de pipelines.
Clique em Criar para criar o pipeline ou em Cancelar para anular o processo. A página Criar nova execução do pipeline é fechada.

O pipeline é criado e exibido juntamente com seus detalhes na página Pipelines e na guia Execuções do pipeline dos Detalhes do pecote de ML do pipeline selecionado. O pipeline é executado de acordo com o período de tempo que você escolheu ao criá-lo.

Agendamento de pipelines

Durante a criação, qualquer tipo de pipeline pode ser agendado em uma única data e hora futura ou com um agendamento recorrente. Por exemplo, um agendamento pode ser definido para que um pipeline seja executado aos domingos à 1h. Isso permite que os modelos sejam atualizados continuamente, pois os dados são enviados de volta às tarefas com participação de seres humanos e, adicionalmente, permite o uso mais eficiente das licenças AI Units.

⏲ Para criar um pipeline a ser agendado em uma única data futura, selecione a opção Baseado no tempo na página Criar nova execução do pipeline.

📅 Para criar um pipeline com um agendamento recorrente, selecione a opção Recorrente na página Criar nova execução do pipeline.

⚙ Um agendamento mais complexo do que o diário em algum momento pode ser definido selecionando a guia Avançado na janela Definir agendamento recorrente e inserindo uma expressão CRON. Há muitas ferramentas online gratuitas para gerar facilmente expressões CRON.

Edição dos pipelines agendados

É possível editar apenas pipelines que ainda não foram executados.

Acesse a página Detalhes do pipeline.
- Na página Pipelines, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes.
- Em Detalhes do pacote de ML de um pacote específico, selecione a guia Execuções do pipeline, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes. A página Detalhes do pipeline é exibida.
Clique em Editar pipeline. A página Editar execução do pipeline é exibida.
É possível alterar o diretório de dados do pipeline agendado, bem como o agendamento recorrente.
Clique em Enviar para salvar as alterações. O pipeline agendado é exibido na página Pipelines com suas informações atualizadas.

Remoção de pipelines

Remover um pipeline.
- Na página Pipelines, clique em ⁝ ao lado de um pipeline e selecione Remover.
- Nos Detalhes do pacote de ML de um pacote específico, selecione a aba Execuções do pipeline, clique em ⁝ ao lado de um pipeline e selecione Remover. Uma caixa de diálogo de confirmação é exibida.
Clique em OK para excluir o pipeline.

Observação:
A remoção de um pipeline Empacotando, Aguardando recursos ou Executando, primeiro o interrompe e, em seguida, o remove.

Se você apenas quiser interromper um pipeline Empacotando, Aguardando recursos ou Executando e olhar para os seus logs, clique em ⁝ ao lado dele e selecione a opção Detalhes para navegar até a página Detalhes do pipeline correspondente. É possível interromper o pipeline dali.

Visualização de detalhes do pipeline

É possível consultar mais informações sobre um pipeline específico ou executar outras ações.

Na página Pipelines, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes.
Em Detalhes do pacote de ML de um pacote específico, selecione a guia Execuções do pipeline, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes. A página Detalhes do pipeline é exibida.
Ou, se um pacote de ML for gerado por um pipeline, você poderá acessar todas as informações relacionadas ao pipeline diretamente da janela Pacote de ML, clicando no menu de três pontos ⁝ e em Detalhes do pipeline. Isso está disponível apenas para novos pipelines.

As informações exibidas e as ações que você pode executar aqui dependem do status do pipeline.

Detalhes do pipeline agendado

A página Detalhes do pipeline para pipelines agendados mostra uma guia Informações.

É possível executar as seguintes ações:

Excluir o pipeline.

Editar o pipeline. Na página Editar execução do pipeline exibida, quaisquer campos podem ser atualizados. Selecionar Executar agora não cria um novo pipeline; em vez disso, ele executa esse pipeline imediatamente, removendo-o da lista de pipelines agendados.

Detalhes do pipeline Pacotes

A página Detalhes do pipeline para pipelines Pacotes mostra uma guia Informações.

É possível executar a seguinte ação:

Eliminar o pipeline. Isso interrompe a execução do pipeline; assim, ele não será executado e não consumirá AI Units. Seu status muda para Eliminado.

Detalhes do pipeline Aguardando recursos

A página Detalhes do pipeline para pipelines Aguardando recursos mostra uma guia Informações.

É possível executar a seguinte ação:

Eliminar o pipeline. Isso remove o pipeline da fila; portanto, ele não será executado e não consumirá AI Units. Seu status muda para Eliminado.

Detalhes do pipeline em execução

A página Detalhes do pipeline para pipelines em execução mostra uma guia Informações e logs em tempo real.

É possível executar a seguinte ação:

Eliminar o pipeline. Isso interrompe o pipeline e muda seu status para Eliminado. Os logs mostram o instantâneo no momento em que a ação de eliminação foi executada.

Detalhes do pipeline com falha

A página Detalhes do pipeline para pipelines com falha mostra uma guia Informações e logs. Dependendo do estágio no qual esse pipeline falhou, as saídas do pipeline (parciais) são exibidas.

É possível executar a seguinte ação:

Reinicie o pipeline. Isso adiciona um novo pipeline à fila, exatamente com os mesmos parâmetros com os quais ele foi criado. Se a fila estiver vazia, o pipeline começa imediatamente a ser executado.

Detalhes do pipeline eliminado

A página Detalhes do pipeline para pipelines Eliminados mostra uma guia Informações. Além disso, dependendo do ponto no qual esse pipeline foi eliminado, a página Detalhes do pipeline também pode incluir logs.

É possível executar as seguintes ações:

Reiniciar o pipeline.

Remover o pipeline.