Gerenciamento de pipelines

Criação de pipelines

1. Na página Pipelines, clique no botão Criar novo. A página Criar nova execução do pipeline é exibida.

   Como alternativa, nos Detalhes do pacote de ML de um pacote específico, selecione as Execuções do pipeline e, em seguida, clique no botão Criar novo. A página Criar nova execução do pipeline é exibida.

2. Na página Criar nova execução do pipeline, selecione o tipo da execução do pipeline. As opções disponíveis são Execução de treinamento, Execução de avaliação e Execução do pipeline completo.
3. Selecione o pacote para a execução do pipeline.
4. Selecione as versões principal e secundária do pacote.
5. Selecione os conjuntos de dados. De acordo com o tipo de pipeline selecionado, os seguintes conjuntos de dados devem ser especificados:
   • Para pipeline de treinamento, especifique o conjunto de dados de entrada.
   • Para pipeline de avaliação, especifique o conjunto de dados de avaliação.
   • Para a execução do pipeline completo, especifique o conjunto de dados de entrada e o conjunto de dados de avaliação.
6. (Opcionalmente) Insira parâmetros para as execuções do pipeline. Clique em Adicionar novo para exibir a seção Parâmetros e, em seguida, insira a variável de ambiente e seu valor correspondente. Vários parâmetros são aceitos.
7. Selecione se o pipeline requer uma GPU; por padrão, é definido como Não.
8. (Opcionalmente) Ative a opção Habilitar configurações de infraestrutura se quiser personalizar os recursos e tamanho de armazenamento para esta implantação específica. Se as configurações de infraestrutura estiverem habilitadas, os seguintes campos podem ser personalizados:
   • O tamanho de solicitação e tamanho limite para a RAM (GB).
   • O tamanho de solicitação e tamanho limite para a CPU.
   • Tamanho de armazenamento (GB).
   Observação: só altere esses valores se tiver certeza de que são os corretos.

   
9. Selecione quando o pipeline deve ser executado. As opções possíveis são:
   • Executar agora — o pipeline começa a ser executado imediatamente após sua criação.
   • Com base no tempo — o pipeline começa a ser executado na data e na hora que você especificar nos campos Data e Hora.
   • Recorrente - o pipeline começa a ser executado de acordo com o agendamento recorrente que você configurou na janela Definir agendamento recorrente. É possível configurá-lo para ser executado em dias úteis específicos em um determinado momento ou é possível usar expressões CRON. Leia aqui mais informações sobre o agendamento de pipelines.
10. Clique em Criar para criar o pipeline ou em Cancelar para anular o processo. A página Criar nova execução do pipeline é fechada.
    
    

    

    
    

O pipeline é criado e exibido juntamente com seus detalhes na página Pipelines e na guia Execuções do pipeline dos Detalhes do pecote de ML do pipeline selecionado. O pipeline é executado de acordo com o período de tempo que você escolheu ao criá-lo.

Agendamento de pipelines

Durante a criação, qualquer tipo de pipeline pode ser agendado em uma única data e hora futura ou com um agendamento recorrente. Por exemplo, um agendamento pode ser definido para que um pipeline seja executado aos domingos à 1h. Isso permite que os modelos sejam atualizados continuamente pois os dados são enviados de volta às tarefas com participação de seres humanos e, adicionalmente, permite o uso mais eficiente das licenças do AI Robot.

Para criar um pipeline a ser agendado em uma única data futura, selecione a opção Com base no tempo na página Criar nova execução do pipeline.

Para criar um pipeline com um agendamento recorrente, selecione a opção Recorrente na página Criar nova execução do pipeline.

Um agendamento mais complexo do que o diário em algum momento pode ser definido selecionando a guia Avançado na janela Definir agendamento recorrente e inserindo uma expressão CRON. Há muitas ferramentas online gratuitas para gerar facilmente expressões CRON.

Edição dos pipelines agendados

É possível editar apenas pipelines que ainda não foram executados.

1. Na página Pipelines, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes.

   Ou então, em Detalhes do pacote de ML de um pacote específico, selecione a aba Execuções do pipeline, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes. A página Detalhes do pipeline é exibida.

2. Clique em Editar pipeline. A página Editar execução do pipeline é exibida.
3. É possível alterar o diretório de dados do pipeline agendado, bem como o agendamento recorrente.
4. Clique em Enviar para salvar as alterações. O pipeline agendado é exibido na página Pipelines com suas informações atualizadas.
   
   

   

   
   

Remoção de pipelines

1. Na página Pipelines, clique em ⁝ ao lado de um pipeline e selecione Remover.

   Ou então, em Detalhes do pacote de ML de um pacote específico, selecione a aba Execuções do pipeline, clique em ⁝ ao lado de um pipeline e selecione Remover. Uma caixa de diálogo de confirmação é exibida.

2. Clique em OK para excluir o pipeline.
   Observação: a remoção de um pipeline enfileirado ou em execução, primeiro o interrompe e depois o remove.

   Se você apenas quiser interromper um pipeline enfileirado ou em execução e verificar seus logs, clique em ⁝ ao lado dele e selecione a opção Detalhes para navegar até sua página Detalhes do pipeline correspondente. É possível interromper o pipeline dali.

Visualização de detalhes do pipeline

É possível consultar mais informações sobre um pipeline específico ou executar outras ações.

• Na página Pipelines, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes.
• Ou, em Detalhes do pacote de ML de um pacote específico, selecione a guia Execuções do pipeline, clique em ⁝ ao lado de um pipeline agendado e selecione Detalhes. A página Detalhes do pipeline é exibida.

As informações exibidas e as ações que você pode executar aqui dependem do status do pipeline.

Detalhes do pipeline agendado

A página Detalhes do pipeline para pipelines agendados mostra uma guia Informações.

É possível executar as seguintes ações:

• Excluir o pipeline.
• Editar o pipeline. Na página Editar execução do pipeline exibida, quaisquer campos podem ser atualizados. Selecionar Executar agora não cria um novo pipeline; em vez disso, ele executa esse pipeline imediatamente, removendo-o da lista de pipelines agendados.

Detalhes do pipeline enfileirado

A página Detalhes do pipeline para pipelines enfileirados mostra uma guia Informações.

É possível executar a seguinte ação:

• Eliminar o pipeline. Isso remove o pipeline da fila; portanto, ele não será executado e não consumirá os AI Robots. Seu status muda para Eliminado.

Detalhes do pipeline em execução

A página Detalhes do pipeline para pipelines em execução mostra uma guia Informações e logs em tempo real.

É possível executar a seguinte ação:

• Eliminar o pipeline. Isso interrompe o pipeline e muda seu status para Eliminado. Os logs mostram o instantâneo no momento em que a ação de eliminação foi executada.

Detalhes do pipeline com falha

A página Detalhes do pipeline para pipelines com falha mostra uma guia Informações e logs. Dependendo do estágio no qual esse pipeline falhou, as saídas do pipeline (parciais) são exibidas.

É possível executar a seguinte ação:

• Reinicie o pipeline. Isso adiciona um novo pipeline à fila, exatamente com os mesmos parâmetros com os quais ele foi criado. Se a fila estiver vazia, o pipeline começa imediatamente a ser executado.

Detalhes do pipeline eliminado

A página Detalhes do pipeline para pipelines Eliminados mostra uma guia Informações. Além disso, dependendo do ponto no qual esse pipeline foi eliminado, a página Detalhes do pipeline também pode incluir logs.

É possível executar as seguintes ações:

• Reiniciar o pipeline.
• Remover o pipeline.

Detalhes do pipeline bem-sucedido

A página Detalhes do pipeline para pipelines Bem-sucedidos mostra uma guia Informações, logs e saídas do pipeline.

É possível executar as seguintes ações:

• Excluir o pipeline.
• Remover o pipeline.
• Reiniciar o pipeline.