Enviando dados para o Elasticsearch

Visão geral

In this topic you can learn how to leverage the Insights real-time data export feature to send data to ElasticSearch and use it to populate real-time monitoring data into Kibana dashboard.

Pré-requisitos

Antes de começar a visualizar os dados de monitoramento em tempo real no Kibana, os seguintes hosts devem ser configurados:

• Configurar um host ElasticSearch
• Configurar um host FileBeat

Configurando um ElasticSearch Host

Você pode optar por hospedar o ElasticSearch por conta própria ou usar a opção de nuvem.

Para obter mais informações, consulte o site oficial do Elastic.

Configurando um Host FileBeat

Visão geral

FileBeat is a tool used to gather data from a source (EventHub in this case) and send it into ElasticSearch.

Instalação

Você precisa hospedar seu próprio servidor FileBeat.

Para instalar o FileBeat, primeiro provisione seus hosts e siga as instruções do site oficial do Elastic para seu sistema operacional.

Configuração

Para configurar o FileBeat, use as seguintes instruções:

1. Abra o arquivo filebeat.yml.
2. Configure uma conexão com o ElasticSearch:

   cloud.id: "cloud:YOUR_CLOUD_ID"
   cloud.auth: "USERNAME:YOUR_PASSWORD"
   

You can get your cloud ID from the Deployments tab in ElasticSearch.

3. Go to the filebeat.inputs section in the filebeat.yml file. 4. Add your EventHub connection settings in the filebeat.inputs section.

<ul>
<li>type: azure-eventhub
  enabled: true
  eventhub: <YOUR EVENTHUB>
  consumer_group: "filebeat"
  connection_string: <YOUR CONNECTION STRING>
  storage_account_key: <YOUR STORAGE ACCOUNT KEY>
  storage_account_container: ""
  resource_manager_endpoint: """</li>
</ul>

5. Vá para a seção processors no arquivo filebeat.yml .
6. Adicione as seguintes linhas na seção processors :

   <ul>
   <li>decode_json_fields:
         fields: ["message"]
         process_array: false
         max_depth: 2
         target: ""
         overwrite_keys: false
         add_error_key: true</li>
   </ul>
   

Inicialização do serviço FileBeat

Após instalar e configurar o FileBeat com sucesso, siga o procedimento do site oficial do Elastic para iniciar o serviço.

View data in Kibana

Para visualizar seus dados no Kibana, use as etapas a seguir.

1. Abra ElasticSearch.

2. Expand the Analytics category from the dashboard on the left.

3. Select Discover.

   

4. Set the data view to filebeat-*.

   

Agora você pode visualizar seus dados no Kibana.