Usar padrões para localizar termos
Reconhecer termos que são mencionados em sentenças que correspondem a um padrão sintático que você ensina Discovery para reconhecer.
IBM Cloud Padrões é um recurso beta que está disponível apenas em implementações gerenciada O recurso está disponível apenas para documentos de língua inglesa.
Inclua um recurso de Padrões para ensinar Discovery para reconhecer padrões em seus dados. O Feature Patterns usa a indução de padrões, o que gera padrões de extração a partir de exemplos que você fornece como dados de treinamento. Depois de especificar alguns exemplos, Discovery sugere mais regras que você pode revisar e aceitar para completar o padrão.
Os padrões produzem um modelo usando um processo em loop humano. Você não é solicitado a construir um grande conjunto de dados de treinamento lá na frente. Em vez disso, você fornece alguns exemplos e, em seguida, participa de um processo interativo para definir os dados de treinamento. Você aceita passivamente ou rejeita sugestões inteligentes que são propostas pelo sistema.
O reconhecimento de padrões funciona melhor em texto com estrutura consistente em valores de maiúscula e minúscula, comprimento, texto ou numérico. Exemplos de padrões que você pode ensinar o Discovery a identificar em seus documentos:
- Números de normas, como
ISO 45001,ISO 22000. - Referências de moeda, como
$50.5 million,$29 million. - Referências de data, como
8 September 2019,12 June 2020.
Se você precisar identificar termos ou textos específicos, como nomes de produtos, inclua um dicionário.
Para obter mais informações, leia as seguintes postagens do blog:
- Extraindo Padrões de Texto com Destaques do Usuário com Indução de Padrão
- Indução de Padrão: As melhores práticas para a Extrair Padrões de Texto
Para definir um padrão, conclua as etapas a seguir:
-
A partir da seção Conceitos de domínio Teach do painel Ferramentas de Melhoramento, escolha Padrões.
-
Clique em Novo.
-
Escolha como você quer escolher documentos.
-
Permitir Discovery para escolher 10 documentos aleatórios para você.
-
Escolha os documentos você mesmo (até 20 podem ser selecionados).
Cada documento deve ter menos de 5.000 caracteres de comprimento. Os documentos que excedem o limite são truncados para 5.000 caracteres.
-
-
Clique em Próximo.
-
Comece a selecionar palavras ou frases de exemplo que se encaixem no padrão que você deseja definir.
Por exemplo, se você tiver uma coleção de artigos que discutem os padrões do site
ISO, poderá começar a destacar os números dos padrões em cada documento.Se você anotar alguma coisa, e então mudar de ideia, passe o mouse sobre a seleção e, em seguida, clique em
xpara excluí-la. -
Continue selecionando exemplos.
Depois de identificar exemplos suficientes, Discovery mostra uma lista de exemplos sugeridos para você revisar e determinar que sejam exemplos válidos ou não válidos. Exemplos sugeridos são retirados do campo configurado para serem usados em resultados de pesquisa. Se a fonte de conteúdo do resultado estiver configurada para serem passagens, o campo
textserá usado. Para mais informações, consulte Alterando o conteúdo do resultado. -
Escolha Sim ou Não para cada sugestão.
Clique no ícone Preview documento se você quiser ver o exemplo em contexto antes de fazer uma escolha.
-
Continue destacando exemplos e validando sugestões até que uma mensagem seja exibida para informá-lo que você identificou exemplos suficientes.
-
Clique na guia Review examples (Revisar exemplos ) para revisar as listas de exemplos que foram identificados por você e Discovery.
-
Se os exemplos estiverem corretos, clique em Salvar padrão.
Se Discovery não puder discernficar um padrão consistente e válido com base nas informações fornecidas, o botão Salvar padrão nunca é ativado. Um padrão pode não ser criado se você fornecer exemplos contraditórios, por exemplo. Para recomeçar, clique no botão Reconfigurar. Os documentos são devolvidos ao seu estado original e quaisquer exemplos que você tenha identificado anteriormente são removidos.
-
Para aplicar o padrão imediatamente, escolha a coleção e o campo onde deseja aplicar os enriquecimentos a partir do modelo e, em seguida, clique em Aplicar.
Quando Discovery encontra texto em um documento que corresponde a um padrão que você definiu, ele é anotado no campo enriched_{fieldname}.entities. Você pode encontrá-lo verificando o campo enriched_{fieldname}.entities.model_name para o seu nome de padrão.
Download de um padrão
Para fazer o download de um padrão, conclua a etapa a seguir:
-
Na exibição Padrões, clique no ícone de download.
O download de um modelo de padrão é feito como um arquivo ZIP.
Você pode importar o arquivo ZIP baixado como a fonte de um recurso de modelo de regras avançadas. Para obter mais informações, consulte Modelos de regras avançadas.
Limites de padrões
O número de padrões que você pode definir por instância de serviço depende do seu tipo de plano Discovery.
| Plano | Padrões por instância de serviço |
|---|---|
| Premium | 100 |
| Enterprise | 100 |
| Mais (inclui Trial) | 20 |