Migração de projetos clássicos

Use as instruções desta página para migrar um projeto baseado no AI Center. Há duas etapas principais na migração de um projeto:

1. Exporte o conjunto de dados do projeto baseado no AI Center.
2. Importar o conjunto de dados para o projeto moderno.

Limitações atuais

• Atualmente, a importação de conjuntos de dados maiores que 3000 páginas não é compatível. Apenas as 3000 páginas iniciais serão importadas com sucesso, com quaisquer páginas adicionais falhando ao fazê-lo. Por exemplo, se seu conjunto de dados consistir em 2999 páginas e você tentar importar um documento de quatro páginas, o processo não será bem-sucedido.
• Os nomes de lote e os resultados de lote correspondentes não estão disponíveis no momento. Se seus dados forem organizados em lotes, essas informações ainda não serão exibidas, mas serão salvas.
• As exportações do AI Center não são compatíveis. Apenas exportações do Document Manager são compatíveis.

Exportar um conjunto de dados de um projeto com base no AI Center

1. Abra o AI Center e acesse a página Rotulagem de dados.

2. Selecione a Sessão de rotulagem de dados que você deseja migrar.

   

3. Depois que o Document Manager for aberto, na lista suspensa Filtrar documentos, selecione Conjunto de treinamento e validação.

   Figura 1. Conjunto de treinamento e validação

   

4. Selecione Exportar.

5. Deixe os resultados da pesquisa atual selecionados e preencha um nome para seu trabalho de exportação.

6. Select Download.

   Figure 2. Download export

   

Importação de um conjunto de dados

1. Navegue até e abra o projeto para o qual você deseja importar dados.

2. Selecione Adicionar tipo de documento e crie um novo tipo de documento personalizado.

   Figure 3. Add document type

   

3. No novo tipo de documento personalizado, selecione Carregar e escolha o arquivo zip do projeto clássico que você exportou. Aguarde o upload finalizar.

   Observação:

   As exportações do AI Center não são compatíveis. Apenas exportações do Document Manager são compatíveis.

   Figura 4. Carregar processamento

   

Depois que o upload for concluído, os documentos estarão disponíveis para treinamento.

Treinamento do modelo

Depois que o conjunto de dados é importado, o treinamento do modelo começa. Depois que o treinamento é concluído, a pontuação do modelo é exibida. Para verificar pontuações detalhadas do modelo, selecione a pontuação e, em seguida, Pontuações detalhadas do modelo.

Essa ação leva você para a página Medir, onde você pode acessar métricas detalhadas do modelo.

Quando o mesmo conjunto de dados é usado para treinar um ML duas vezes, você pode observar métricas de modelos ligeiramente diferentes. Isso pode ocorrer devido a alguns motivos:

• Initialization: Machine learning uses optimization methods that need initial guesses to trigger the optimization algorithms. Different initial guesses during each training could lead to various outcomes due to the unpredictable nature of these algorithms.
• Random state: Some algorithms use randomness in their operations. For instance, when training a neural network, procedures like stochastic gradient descent and mini-batch gradient descent introduce randomness. Therefore, even with identical initial model parameters and datasets, the performance of models may vary in different runs.
• Regularization: Certain algorithms include a penalty term that encourages the model to maintain smaller weights. Due to the randomness involved, the model could operate with a different weight set each time.

No entanto, é vital observar que essas diferenças menores não implicam necessariamente que um modelo é superior ou inferior a outro. Mesmo com métricas ligeiramente variadas, a capacidade dos modelos de compreender dados permanece essencialmente a mesma, desde que as diferenças não sejam significativamente grandes. Além disso, repetir esse processo várias vezes e obter uma média deve render métricas de desempenho semelhantes.

Alterar o modelo base no Gerenciador de tipos de Documentos

Se houver uma diferença significativa entre os resultados do modelo de seu projeto clássico e o moderno, isso poderia ser causado por um modelo base diferente. de Para alterar o modelo base, prossiga com as seguintes etapas:

1. Selecione o menu de três pontos no seu tipo de documento personalizado e escolha Gerenciador de tipos de documento.

   

2. Navegue até a guia Configurações.

3. Selecione o modelo desejado na lista suspensa Modelo base.

   

4. Depois de fazer sua seleção, escolha Salvar. Para sair, selecione Voltar.

Tipos de exportação

Para projetos clássicos, há vários métodos para exportar dados. Nem todos os tipos de dados exportados são compatíveis para importação para projetos modernos. Para comparar os resultados do modelo em ambos os tipos de projeto, filtre documentos por Conjunto de treinamento e validação e selecione Escolher resultados da pesquisa para exportar o conjunto de dados. Para obter mais informações sobre cada opção, consulte a tabela a seguir.

Tabela 1. Tipos de exportação

Tipo de exportação	Dados exportados	O que acontece com dados importados
Resultados da pesquisa atual	Exporta o conjunto de dados filtrado atual. Use-o junto com o filtro de Conjunto de treinamento e validação.	Documents tagged as training are used to train the model. Documents tagged as validation are used to measure the model performance. Tip: To compare model results between two project types, always export and import the dataset as Train and validation .
Tudo rotulado	Exporta todos os documentos anotados do conjunto de dados: Conjunto de treinamento Conjunto de validação Conjunto de avaliação	Documentos marcados como treinamento são usados para treinar o modelo. Documentos marcados como validação são usados para medir o desempenho do modelo. Documentos marcados como avaliação são ignorados.
Esquema	Exporta a lista de campos e suas respectivas configurações.	Um esquema é importado se não houver nenhum. Se um esquema já estiver definido, a importação falhará.
Todos	Exporta todos os documentos anotados e não anotados.	Documentos marcados como treinamento são usados para treinar o modelo. Documentos marcados como validação são usados para medir o desempenho do modelo. Documentos marcados como avaliação são ignorados. Documentos não anotados são pré-anotados e tratados como não confirmados.

Importação de esquemas

Você pode importar esquemas junto com conjuntos de dados para projetos modernos. Siga estas etapas para importar um esquema:

1. Crie um tipo de documento personalizado na seção Criar.
2. Importe o arquivo zip que contém o esquema.

Observação:

• As importações de esquema são limitadas a tipos de documentos personalizados sem esquemas pré-existentes.
• Se você importar um esquema para um tipo de documento que já contém um esquema, a importação falhará.