Enviando dados para o Elasticsearch

Visão geral

In this topic you can learn how to leverage the Insights real-time data export feature to send data to ElasticSearch and use it to populate real-time monitoring data into Kibana dashboard.

Pré-requisitos

Antes de começar a visualizar os dados de monitoramento em tempo real no Kibana, os seguintes hosts devem ser configurados:

• Configurar um host ElasticSearch
• Configurar um host FileBeat

Configurando um ElasticSearch Host

Você pode optar por hospedar o ElasticSearch por conta própria ou usar a opção de nuvem.

Para obter mais informações, consulte o site oficial do Elastic.

Configurando um Host FileBeat

Visão geral

FileBeat is a tool used to gather data from a source (EventHub in this case) and send it into ElasticSearch.

Instalação

Você precisa hospedar seu próprio servidor FileBeat.

Para instalar o FileBeat, primeiro provisione seus hosts e siga as instruções do site oficial do Elastic para seu sistema operacional.

Configuração

Para configurar o FileBeat, use as seguintes instruções:

1. Abra o arquivo filebeat.yml.
2. Configure uma conexão com o ElasticSearch:

   cloud.id: "cloud:YOUR_CLOUD_ID"
   cloud.auth: "USERNAME:YOUR_PASSWORD"
   

You can get your cloud ID from the Deployments tab in ElasticSearch.

3. Acesse a seção filebeat.inputs no arquivo filebeat.yml . 4. Adicione suas configurações de conexão do EventHub na seção filebeat.inputs .

<ul>
<li>type: azure-eventhub
  enabled: true
  eventhub: <YOUR EVENTHUB>
  consumer_group: "filebeat"
  connection_string: <YOUR CONNECTION STRING>
  storage_account_key: <YOUR STORAGE ACCOUNT KEY>
  storage_account_container: ""
  resource_manager_endpoint: """</li>
</ul>

5. Vá para a seção processors no arquivo filebeat.yml .
6. Adicione as seguintes linhas na seção processors :

   <ul>
   <li>decode_json_fields:
         fields: ["message"]
         process_array: false
         max_depth: 2
         target: ""
         overwrite_keys: false
         add_error_key: true</li>
   </ul>
   

Inicialização do serviço FileBeat

Após instalar e configurar o FileBeat com sucesso, siga o procedimento do site oficial do Elastic para iniciar o serviço.

View data in Kibana

Para visualizar seus dados no Kibana, use as etapas a seguir.

1. Abra ElasticSearch.

2. Expand the Analytics category from the dashboard on the left.

3. Select Discover.

   

4. Set the data view to filebeat-*.

   

Agora você pode visualizar seus dados no Kibana.