많은 데이터를 시각화하는 용이한 도구로서 Kibana는 데이터 분석가나 개발자들 사이에서 매우 인기 있는 도구입니다. Kibana를 사용하면 Elasticsearch 데이터를 기반으로 다양한 그래프를 생성하여 데이터의 트렌드나 패턴을 쉽게 파악할 수 있습니다.

여기서는 파이썬과 Kibana를 연동하여 데이터를 조회하고 그 결과를 그래프로 생성하는 방법에 대해 알아보겠습니다.

1. Kibana 연동 설정

먼저, Kibana와 Elasticsearch를 연동하는 설정을 확인해야 합니다. Kibana의 DevTools에서 Elasticsearch에 접속할 수 있는지 확인하고, 필요한 인덱스와 필드가 제대로 설정되어 있는지 확인해야 합니다.

2. 필요한 라이브러리 설치

파이썬에서 Kibana와 연동하여 데이터를 조회하고 그래프를 생성하기 위해서는 elasticsearch와 matplotlib 라이브러리가 필요합니다. 다음 명령어로 라이브러리들을 설치해주세요.

pip install elasticsearch
pip install matplotlib

3. 데이터 조회 및 그래프 생성

이제 파이썬 스크립트를 작성하여 데이터를 조회하고 그래프를 생성해보겠습니다. 아래는 예시 코드입니다.

from elasticsearch import Elasticsearch
import matplotlib.pyplot as plt

# Kibana와 연결
es = Elasticsearch([{'host': 'localhost', 'port': 9200}])

# 데이터 조회
result = es.search(index='my_index', body={'query': {'match_all': {}}})

# 데이터 가공
data = [hit['_source']['value'] for hit in result['hits']['hits']]

# 그래프 생성
plt.plot(data)
plt.xlabel('Index')
plt.ylabel('Value')
plt.title('My Graph')
plt.show()

위 코드는 Elasticsearch에 접속하여 ‘my_index’ 인덱스의 모든 데이터를 조회하고, ‘value’ 필드의 값을 그래프로 출력하는 예제입니다.

결론

이제 파이썬을 이용하여 Kibana와 연동하여 데이터를 조회하고 그래프를 생성하는 방법에 대해 알아보았습니다. Kibana의 강력한 시각화 기능을 통해 데이터의 트렌드나 패턴을 파악하고 분석할 수 있으니, 데이터 분석 작업에 파이썬과 Kibana를 함께 활용해보시기 바랍니다.

조인타 :파이썬으로 Elasticsearch 데이터 조회하기 - https://joontaek.io/python/elasticsearch-python/

#elasticsearch #kibana