Gestion des pipelines

Création de pipelines

1. Dans la page Pipelines, cliquez sur le bouton Créer nouveau (Create new). La page Créer une nouvelle exécution de pipeline (Create new pipeline run) s'affiche.

   Sinon, dans les Détails du paquet ML (ML Package Details) d'un package spécifique, sélectionnez Exécutions du pipeline (Pipeline Runs), puis cliquez sur le bouton Créer nouveau (Create new). La page Créer une nouvelle exécution de pipeline (Create new pipeline run) s'affiche.

2. Dans la page Créer une nouvelle exécution de pipeline (Create new pipeline run), sélectionnez le type d'exécution de pipeline. Les options disponibles sont Exécution d'apprentissage(Training run), Exécution d'évaluation (Evaluation run) et Exécution complète du pipeline (Full pipeline run).

3. Sélectionnez le package pour l'exécution du pipeline.

4. Sélectionnez les versions majeure et mineure du package.

5. Sélectionnez des ensembles de données. Selon le type de pipeline sélectionné, les ensembles de données suivants doivent être spécifiés :

   • Pour le pipeline d'entraînement, spécifiez l'ensemble de données d'entrée.
   • Pour le pipeline d'évaluation, spécifiez l'ensemble de données d'évaluation.
   • Pour une exécution complète de pipeline, spécifiez l'ensemble de données d'entrée et l'ensemble de données d'évaluation.

6. (Facultatif) Saisissez les paramètres des exécutions de pipeline. Cliquez sur Ajouter nouveau (Add new) pour afficher la section des paramètres, puis saisissez la variable d'environnement et sa valeur correspondante. Plusieurs paramètres sont acceptés.

7. Sélectionnez si le pipeline nécessite un GPU, par défaut il est défini sur No.

8. (Facultatif) Activez l'option Activer les paramètres infrarouges ( Enable Infra Settings ) si vous souhaitez personnaliser les ressources et la taille de stockage pour ce déploiement spécifique. Si les paramètres infra sont activés, les champs suivants peuvent être personnalisés :

   Remarque :

   Only change these values if you are sure they are the correct ones.

   

   • Les tailles de requête et de limite pour la RAM (Go).
   • Les tailles de requête et de limite pour le processeur.
   • Taille de stockage (Go).

9. Sélectionnez quand le pipeline doit s'exécuter. Les options possibles sont :

   • Exécuter maintenant (Run now) : le pipeline commence à s'exécuter immédiatement après sa création.
   • Basé sur l'heure (Time based) - le pipeline commence à s'exécuter à la date et à l'heure que vous spécifiez dans les champs Date et Heure (Time).
   • Recurring - the pipeline starts running according to the recurring schedule you set up in the Set Recurring Schedule window. You can set it up to run on specific weekdays at a certain time, or you can use cron expressions. Read here more information about scheduling pipelines.

10. Cliquez sur Créer (Create) pour créer le pipeline ou sur Annuler (Cancel) pour abandonner le processus. La page Créer une nouvelle exécution de pipeline (Create new pipeline run) se ferme.

    

Le pipeline est créé et affiché avec ses détails dans la page Pipelines et dans l'onglet Exécutions du pipeline (Pipeline Runs) de la page Détails du paquet ML (ML Package Details) du package sélectionné. Le pipeline s'exécute selon la période que vous avez choisie lors de sa création.

Planification des pipelines

Lors de la création, tout type de pipeline peut être soit planifié à une date et une heure futures, soit avec une planification récurrente. Par exemple, une planification peut être définie pour qu'un pipeline s'exécute le dimanche soir à 1 heure du matin. Cela permet aux modèles d'être continuellement mis à jour au fur et à mesure que les données sont renvoyées à partir des tâches d'Intervention humaine et permet en outre une utilisation plus efficace des licences AI Robot.

To create a pipeline to be scheduled at a single future date, select the Time based option in the Create new pipeline run page.

To create a pipeline with a recurring schedule, select the Recurring option in the Create new pipeline run page.

A more complex schedule than daily at some time can be set by selecting the Advanced tab in the Set Recurring Schedule window and entering a cron expression. There are many free online tools to easily generate cron expressions.

Modification des pipelines programmés

Vous ne pouvez modifier que les pipelines qui n'ont pas encore été exécutés.

1. In the Pipelines page, click ⁝ next to a scheduled pipeline and select Details.

   Alternatively, in the ML Package Details of a specific package, select the Pipeline Runs tab, click ⁝ next to a scheduled pipeline and select Details. The Pipeline Details page is displayed.

2. Cliquez sur Modifier le pipeline (Edit pipeline). La page Modifier l'exécution du pipeline (Edit pipeline run) s'affiche.

3. Vous pouvez modifier le répertoire de données du pipeline planifié, ainsi que la planification récurrente.

4. Cliquez sur Soumettre (Submit) pour enregistrer le nom modifié. Le pipeline planifié s'affiche dans la page Pipelines avec ses informations mises à jour.

   

Suppression de pipelines

1. In the Pipelines page, click ⁝ next to a pipeline and select Remove.

   Alternatively, in the ML Package Details of a specific package, select the Pipeline Runs tab, click ⁝ next to a pipeline and select Remove. A confirmation dialog is displayed.

2. Cliquez sur OK pour supprimer le pipeline.

   Remarque :

   La suppression d'un pipeline en attente ou en cours d'exécution l'arrête d'abord, puis le supprime.

   If you just want to stop a queued or running pipeline and look at its logs, click ⁝ next to it and select the Details option to navigate its corresponding Pipeline Details page. You can stop the pipeline from there.

Afficher les détails du pipeline

Vous pouvez consulter plus d'informations sur un pipeline spécifique ou effectuer d'autres actions.

• In the Pipelines page, click ⁝ next to a scheduled pipeline and select Details.
• Or, in the ML Package Details of a specific package, select the Pipeline Runs tab, click ⁝ next to a scheduled pipeline and select Details. The Pipeline Details page is displayed.

The information displayed and the actions you can perform here depend on the pipeline status.

Détails du pipeline planifié

La page Détails du pipeline (Pipeline Details) pour les pipelines planifiés affiche un onglet d'informations.

Vous pouvez effectuer les actions suivantes :

• Supprimer (Delete) le pipeline.
• Modifier (Edit) le pipeline. Dans la page Modifier l'exécution du pipeline (Edit pipeline run) affichée, tous les champs peuvent être mis à jour. Cliquer sur Exécuter maintenant (Run Now) ne crée pas de nouveau pipeline, mais exécute ce pipeline immédiatement, le supprimant ainsi de la liste des pipelines planifiés.

Détails du pipeline en attente

La page Détails du pipeline (Pipeline Details) pour les pipelines en attente affiche un onglet d'informations.

Vous pouvez effectuer l'action suivante :

• Kill the pipeline. This removes the pipeline from the queue, so it won't be executed and it won't consume AI Robots. Its status changes to Killed.

Détails du pipeline en cours d'exécution

La page Détails du pipeline pour les pipelines en cours d'exécution affiche un onglet d'informations et des journaux en temps réel.

Vous pouvez effectuer l'action suivante :

• Forcez l'arrêt (Kill) du pipeline. Cela arrête immédiatement le pipeline et change son statut sur Arrêté de force (Killed). Les journaux affichent l'instantané au moment où l'action d'arrêt forcé a été exécutée.

Détails du pipeline échoué

La page Détails du pipeline (Pipeline Details) pour les pipelines échoués affiche un onglet d'informations et des journaux. Selon l'étape à laquelle ce pipeline a échoué, les sorties (partielles) du pipeline sont affichées.

Vous pouvez effectuer l'action suivante :

• Redémarrer le pipeline. Cela ajoute un nouveau pipeline à la file d'attente, avec exactement les mêmes paramètres avec lesquels il a été créé. Si la file d'attente est vide, le pipeline commence immédiatement à s'exécuter.

Détails du pipeline en arrêt forcé

La page Détails du pipeline (Pipeline Details) pour les pipelines en arrêt forcé affiche un onglet d'informations. De plus, selon le point auquel ce pipeline a été arrêté, la page des détails du pipeline peut également inclure des journaux.

Vous pouvez effectuer les actions suivantes :

• Redémarrer le pipeline.
• Supprimer le pipeline

Détails du pipeline réussi

La page Détails du pipeline (Pipeline Details) pour les pipelines réussis affiche un onglet d'informations, des journaux et des sorties de pipeline.

Vous pouvez effectuer les actions suivantes :

• Supprimer (Delete) le pipeline.
• Supprimer le pipeline
• Redémarrer le pipeline.