Enviando dados para o Elasticsearch

Visão geral

In this topic you can learn how to leverage the Insights real-time data export feature to send data to ElasticSearch and use it to populate real-time monitoring data into Kibana dashboard.

Pré-requisitos

Antes de começar a visualizar os dados de monitoramento em tempo real no Kibana, os seguintes hosts devem ser configurados:

• Configurar um host ElasticSearch
• Configurar um host FileBeat

Configurando um ElasticSearch Host

Você pode optar por hospedar o ElasticSearch por conta própria ou usar a opção de nuvem.

For more information, check the official Elastic website.

Configurando um Host FileBeat

Visão geral

FileBeat is a tool used to gather data from a source (EventHub in this case) and send it into ElasticSearch.

Instalação

Você precisa hospedar seu próprio servidor FileBeat.

To install FileBeat, first provision your hosts and follow the instructions from the official Elastic website for your operating system.

Configuração

Para configurar o FileBeat, use as seguintes instruções:

1. Abra o arquivo filebeat.yml.
2. Configure uma conexão com o ElasticSearch:

   cloud.id: "cloud:YOUR_CLOUD_ID"
   cloud.auth: "USERNAME:YOUR_PASSWORD"
   

You can get your cloud ID from the Deployments tab in ElasticSearch.

3. Go to the filebeat.inputs section in the filebeat.yml file. 4. Add your EventHub connection settings in the filebeat.inputs section.

<ul>
<li>type: azure-eventhub
  enabled: true
  eventhub: <YOUR EVENTHUB>
  consumer_group: "filebeat"
  connection_string: <YOUR CONNECTION STRING>
  storage_account_key: <YOUR STORAGE ACCOUNT KEY>
  storage_account_container: ""
  resource_manager_endpoint: """</li>
</ul>

5. Vá para a seção processors no arquivo filebeat.yml .
6. Adicione as seguintes linhas na seção processors :

   <ul>
   <li>decode_json_fields:
         fields: ["message"]
         process_array: false
         max_depth: 2
         target: ""
         overwrite_keys: false
         add_error_key: true</li>
   </ul>
   

Starting up the FileBeat service

After you successfully installed and configured FileBeat, follow the procedure from the official Elastic website to start the service.

View data in Kibana

Para visualizar seus dados no Kibana, use as etapas a seguir.

1. Abra ElasticSearch.

2. Expand the Analytics category from the dashboard on the left.

3. Select Discover.

   

4. Set the data view to filebeat-*.

   

Agora você pode visualizar seus dados no Kibana.