Incremental extraction

Por padrão, todas as extrações que você pode baixar para seu modelo de aplicativo são extrações completas. Para configurar extrações incrementais, você precisa reconfigurar as tabelas para as quais deseja habilitar a extração incremental no Xtract Universal Designer. As extrações incrementais são úteis principalmente para tabelas de dados transacionais, pois essas normalmente contêm grandes quantidades de dados.

A seção Tabelas e campos de entrada na página de documentação do modelo de aplicativo contém uma lista das tabelas transacionais para o modelo de aplicativo. Consulte Modelos de aplicativo.

Observação:

Ao usar extrações completas, as junções às vezes são aplicadas para filtrar propriedades que não estão disponíveis na própria tabela (por exemplo, datas de criação, que geralmente são armazenadas no nível do cabeçalho. Ao unir à tabela de cabeçalho, as tabelas de nível de item também podem ser filtradas).

Com extrações incrementais, apenas uma única tabela pode ser extraída. Isso pode resultar em mais dados sendo carregados durante a execução inicial, o que pode aumentar o tempo de execução.

Dica:

Se você encontrar um problema com uma extração incremental no Theobald Xtract Universal, poderá redefinir as configurações incrementais abrindo a extração e selecionando Excluir recursos do CDC.

Isso remove o registro da última extração bem-sucedida. Na próxima vez em que a extração for executada, ela realizará um carregamento completo da tabela. As extrações subsequentes serão executadas de forma incremental novamente.

Você também pode usar essa opção ao modificar a configuração de extração (por exemplo, ao adicionar um novo campo).

1. Configurando extração incremental para tabelas (transacionais)

Observação: você precisa configurar a extração incremental para tabelas transacionais no Xtract Universal Designer.

Importante: certifique-se de configurar a extração incremental para todas as tabelas definidas na configuração extraction_tables_incremental no script de extração. Confira Configuração do script de extração para obter mais informações.

Siga estas etapas para configurar uma extração incremental para uma tabela (transacional).

1. Remova a extração existente.
2. Crie uma nova extração.
   1. Selecione sua conexão de origem.
   2. Defina o mesmo nome que antes para a extração.
   3. Selecione Tabela CDC na lista Extratores RFC.
   4. Selecione OK.
3. Na caixa de diálogo CDC da tabela , selecione primeiro a tabela Origem .
   Dica: Pesquise a tabela e selecione-a.
4. Certifique-se de que Extrair tabela na primeira execução esteja selecionado.
5. Certifique-se de que apenas os campos obrigatórios estejam marcados na seção de campos.
   Observação: os campos obrigatórios estão listados na seção Tabelas e campos de entrada da página Documentação do modelo de aplicativo. Modelos de app.
6. Acesse a aba da cláusula ONDE e crie a cláusula WHERE .
   Observação: a condição para cada tabela está listada na documentação do modelo de aplicativo. Modelos de app.
   Observação: você pode usar um campo data para definir uma data de início para as extrações.

   • Certifique-se de que a data de início seja a mesma em todas as extrações.
   • Selecione cuidadosamente a data de início especificada. Você não pode fazer nenhuma alteração na cláusula WHERE após a tabela ter sido inicializada.
   • As datas são especificadas no formato yyyymmdd .
7. Selecione OK para salvar as configurações e fechar a caixa de diálogo Tabela CDC .
8. Selecione sua extração recém-adicionada e abra as configurações de Destino .
   1. Selecione a configuração de destino correta a ser usada.
   2. Certifique-se de que o Nome do arquivo esteja definido como Personalizado. Preencha o nome do arquivo a ser extraído e certifique-se de inserir o nome da tabela (por exemplo "CDPOS").
   3. Certifique-se de que Converter datas esteja desativada.

2. Configuração da extração incremental no Process Mining

Importante: defina as configurações de extração incremental para o aplicativo que você criou, após o conjunto de dados inicial (completo) ter sido carregado com sucesso.

Siga estas etapas:

1. Acesse Transformações de dados e selecione Gerenciar dados de entrada. ConfiraGerenciamento de dados de entrada para obter mais informações.
2. Para cada tabela que você definiu como incremental, atualize as configurações:
   1. Selecione Incremental como o tipo de carga.
   2. Adicione as chaves primárias para a tabela.
      Observação: as chaves primárias para cada tabela estão listadas na documentação do modelo de aplicativo. Modelos de app.
   3. Para o campo de carimbo de data/hora, selecione TS_TIMESTMP.