Perguntas frequentes do treinamento do modelo

As informações nesta página estão divididas nas seguintes seções:

• Treinamento geral do modelo
• Treinamento de rótulo

Treinamento geral do modelo

Qual é o objetivo de treinar um modelo?

O objetivo do treinamento de um modelo é criar um conjunto de dados de treinamento que seja o mais representativo possível do conjunto de dados como um todo, para que a plataforma possa prever com precisão e confiança os rótulos relevantes e campos gerais para cada mensagem. Os rótulos e campos gerais dentro de um conjunto de dados devem estar intrínsecos aos objetivos gerais do caso de uso e fornecer valor de negócio significativo.

Por que não consigo ver nada no Discover se eu acabava de carregar dados na plataforma?

Assim que os dados são carregados na plataforma, a plataforma inicia um processo chamado aprendizado não supervisionado, por meio do qual grupos de mensagens em clusters de intenção semântica semelhante. Esse processo pode levar até algumas horas, dependendo do tamanho do conjunto de dados, e os clusters aparecerão após a conclusão.

Quantos dados históricos preciso para treinar um modelo?

Para poder treinar um modelo, você precisa de uma quantidade mínima de dados históricos existentes. Isso é usado como dados de treinamento para fornecer à plataforma as informações necessárias para prever com confiança cada um dos conceitos relevantes para sua análise e/ou automação.

A recomendação para qualquer caso de uso é de um mínimo de 12 meses de dados históricos, para capturar adequadamente qualquer Sazonalidade ou irregularidade nos dados, como processos de final de mês e períodos movimentados.

Preciso salvar meu modelo toda vez que fizer uma alteração?

Não, você não precisa salvar seu modelo após fazer qualquer alteração. Toda vez que você treina a plataforma em seus dados, ou seja, anotando qualquer mensagem, uma nova versão do modelo é criada para seu conjunto de dados. As estatísticas de desempenho para versões de modelo mais antigas podem ser visualizadas na página Validação .

Como saber qual é o desempenho do modelo?

Confira a página Validação na plataforma, que relata várias medidas de desempenho e fornece uma classificação abrangente da integridade do modelo. Esta página é atualizada após cada evento de treinamento e pode ser usada para identificar áreas em que o modelo pode precisar de mais exemplos de treinamento ou algumas correções de rótulos para garantir a consistência.

Para obter explicações completas sobre o desempenho do modelo e como melhorá-lo, consulte Validação .

Por que há apenas 30 clusters disponíveis e podemos defini-los individualmente?

Os clusters são uma maneira útil de ajudar você a criar rapidamente sua taxonomia, mas os usuários passarão a maior parte do tempo de treinamento na página Explorar em vez de na página Discover.

Se os usuários gastam muito tempo anotando por meio de clusters, existe o risco de sobreajuste o modelo para procurar mensagens que só se encaixam nesses clusters ao fazer previsões. Quanto mais exemplos variados houver para cada rótulo, melhor será o modelo para encontrar as diferentes maneiras de expressar a mesma intenção ou conceito. Esse é um dos principais motivos pelos quais mostramos apenas 30 clusters de cada vez.

Depois que o treinamento for concluído ou um volume significativo de dados for adicionado à plataforma, o Discover faz um novo treinamento. Quando ele é treinado novamente, ele leva em consideração o treinamento existente até o momento e tentará apresentar novos clusters que não são bem cobertos pela taxonomia atual.

Para obter mais detalhes, consulte Discover.

Quantas mensagens há em cada cluster?

Há 30 clusters no total, cada um contendo 12 mensagens. Na plataforma, é possível filtrar o número de mensagens exibidas na página em incrementos entre 6 e 12 por página. Nossa recomendação é anotar seis de cada vez para garantir que você reduza o risco de anotar parcialmente qualquer mensagem.

O que significa precisão e recall?

Precisão e recall são métricas usadas para medir o desempenho de um modelo de aprendizado de máquina. Uma descrição detalhada de cada uma pode ser encontrada na seção Usando a validação de nossos guias de instruções.

Posso voltar para uma versão anterior do meu modelo?

Você pode acessar a visão geral da validação de modelos anteriores passando o mouse sobre Versão do modelo na página Validação . Isso pode ser útil para rastrear e comparar o progresso à medida que você treina seu modelo.

Se você precisar reverter seu modelo para uma versão fixada anterior, consulte Reversão do modelo para obter mais detalhes.

Treinamento de rótulo

Posso alterar o nome de um rótulo mais tarde?

Sim, é muito fácil de fazer. Você pode acessar as configurações de cada rótulo e renomeá-lo em qualquer momento. Para obter mais detalhes, consulte Edição de rótulos.

Como posso saber o número de mensagens que anotei?

Informações sobre seu conjunto de dados, incluindo quantas mensagens foram anotadas, são exibidas na página Configurações de conjuntos de dados . Para obter mais detalhes de como acessá-lo, consulte Corrigir configurações do conjunto de dados.

Um dos meus rótulos está apresentando baixo desempenho. O que posso fazer para melhorá-lo?

Se a página Validação mostrar que seu rótulo está apresentando um desempenho ruim, há várias maneiras de melhorar seu desempenho. Para entender mais, confira Entendendo e melhorando o desempenho do modelo.

O que o mostrador vermelho ao lado do meu rótulo ou campo geral indica? Como posso me livrar dele?

Os pequenos seletores vermelhas ao lado de cada rótulo/campo geral indicam se mais exemplos são necessários para a plataforma estimar com precisão o desempenho do rótulo/campo geral. Os seletores começam a desaparecer à medida que você fornece mais exemplos de treinamento e desaparecerão completamente quando você atingir 25 exemplos.

Depois disso, a plataforma poderá avaliar com eficiência o desempenho de um determinado rótulo/campo geral e pode retornar um aviso de desempenho se o rótulo ou campo geral não estiver íntegro.

Posso evitar anotar mensagens vazias ou não informativas?

A plataforma é capaz de aprender com mensagens vazias e mensagens não informativas, desde que sejam anotadas corretamente. No entanto, vale a pena observar que rótulos não informativos provavelmente precisarão de um número significativo de exemplos de treinamento, além de serem ligeiramente agrupados por conceito, para garantir o melhor desempenho.