Migração de projetos clássicos

Use as instruções desta página para migrar um projeto baseado no AI Center. Há duas etapas principais na migração de um projeto:

1. Exporte o conjunto de dados do projeto baseado no AI Center.
2. Importar o conjunto de dados para o projeto moderno.

Limitações atuais

• Atualmente, a importação de conjuntos de dados maiores que 3000 páginas não é compatível. Apenas as 3000 páginas iniciais serão importadas com sucesso, com quaisquer páginas adicionais falhando ao fazê-lo. Por exemplo, se seu conjunto de dados consistir em 2999 páginas e você tentar importar um documento de quatro páginas, o processo não será bem-sucedido.
• Os nomes de lote e os resultados de lote correspondentes não estão disponíveis no momento. Se seus dados forem organizados em lotes, essas informações ainda não serão exibidas, mas serão salvas.
• As exportações do AI Center não são compatíveis. Apenas exportações do Document Manager são compatíveis.

Exportar um conjunto de dados de um projeto com base no AI Center

1. Open AI Center and navigate to the Data Labeling page.

2. Select the Data Labeling Session you want to migrate.

   

3. Once Document Manager is open, from the Filter documents drop-down list, select Training and validation set.

   Figure 1. Training and validation set

   

4. Selecione Exportar.

5. Leave Current search results selected and fill in a name for your export job.

6. Select Download.

   Figure 2. Download export

   

Importação de um conjunto de dados

1. Navegue até e abra o projeto para o qual você deseja importar dados.

2. Select Add document type and create a new custom document type.

   Figure 3. Add document type

   

3. On the new custom document type, select Upload and choose the zip file of the classic project you exported. Wait for the upload to finish.

   Observação:

   As exportações do AI Center não são compatíveis. Apenas exportações do Document Manager são compatíveis.

   Figure 4. Upload processing

   

Depois que o upload for concluído, os documentos estarão disponíveis para treinamento.

Treinamento do modelo

Once the dataset is imported, the model training starts. After the training is complete, the model score is displayed. To check detailed model scores, select the score, and then Detailed model scores.

This action takes you to the Measure page where you can access detailed model metrics.

Quando o mesmo conjunto de dados é usado para treinar um ML duas vezes, você pode observar métricas de modelos ligeiramente diferentes. Isso pode ocorrer devido a alguns motivos:

• Initialization: Machine learning uses optimization methods that need initial guesses to trigger the optimization algorithms. Different initial guesses during each training could lead to various outcomes due to the unpredictable nature of these algorithms.
• Random state: Some algorithms use randomness in their operations. For instance, when training a neural network, procedures like stochastic gradient descent and mini-batch gradient descent introduce randomness. Therefore, even with identical initial model parameters and datasets, the performance of models may vary in different runs.
• Regularization: Certain algorithms include a penalty term that encourages the model to maintain smaller weights. Due to the randomness involved, the model could operate with a different weight set each time.

No entanto, é vital observar que essas diferenças menores não implicam necessariamente que um modelo é superior ou inferior a outro. Mesmo com métricas ligeiramente variadas, a capacidade dos modelos de compreender dados permanece essencialmente a mesma, desde que as diferenças não sejam significativamente grandes. Além disso, repetir esse processo várias vezes e obter uma média deve render métricas de desempenho semelhantes.

Alterar o modelo base no Gerenciador de tipos de Documentos

Se houver uma diferença significativa entre os resultados do modelo de seu projeto clássico e o moderno, isso poderia ser causado por um modelo base diferente. de Para alterar o modelo base, prossiga com as seguintes etapas:

1. Select the three-dot menu from your custom document type and choose Document type manager.

   

2. Navigate to the Settings tab.

3. Select the desired model from the Base model drop-down list.

   

4. After making your selection, select Save. To exit, select Back.

Tipos de exportação

For classic projects, there are various methods for exporting data. Not all types of exported data are compatible for importing into modern projects. To compare the model results across both project types,filter documents by Training and validation set and select Choose search results to export the dataset. For more information on each option, check the following table.

Table 1. Types of export

Tipo de exportação	Dados exportados	O que acontece com dados importados
Resultados da pesquisa atual	Exports the current filtered dataset. Use it together with the Training and validation set filter.	Documents tagged as training are used to train the model. Documents tagged as validation are used to measure the model performance. Tip: To compare model results between two project types, always export and import the dataset as Train and validation .
Tudo rotulado	Exporta todos os documentos anotados do conjunto de dados: Conjunto de treinamento Conjunto de validação Conjunto de avaliação	Documents tagged as training are used to train the model. Documents tagged as validation are used to measure the model performance. Documents tagged as evaluation are ignored.
Esquema	Exporta a lista de campos e suas respectivas configurações.	Um esquema é importado se não houver nenhum. Se um esquema já estiver definido, a importação falhará.
Todos	Exporta todos os documentos anotados e não anotados.	Documents tagged as training are used to train the model. Documents tagged as validation are used to measure the model performance. Documents tagged as evaluation are ignored. Documentos não anotados são pré-anotados e tratados como não confirmados.

Importação de esquemas

Você pode importar esquemas junto com conjuntos de dados para projetos modernos. Siga estas etapas para importar um esquema:

1. Create a custom document type in the Build section.
2. Importe o arquivo zip que contém o esquema.

Observação:

• As importações de esquema são limitadas a tipos de documentos personalizados sem esquemas pré-existentes.
• Se você importar um esquema para um tipo de documento que já contém um esquema, a importação falhará.