안녕하세요
데이버 분석 목적으로 Elasticsearch kibana 에서 1차 정제를 하려고 합니다.
1차 정제를 elastic kibana를 통해서 실시하고
정제된 데이터를 csv로 다운 받아서 데이터 분석가들이 분석을 하려고 합니다.
이럴 경우 비록 정제가 됐더라도 데이터가 많을 경우 메모리 오류가 날것 같은데
이런 경우 엘라스틱 을 잘못 활용한 케이스가 될까요?
1 Like
Kibana는 시각화 도구입니다. 이미 정제한 데이터를 보는 것에 초점이 맞춰져 있습니다.
만약, "정제"가 주 목적이라면, Logstash와 같이 데이터 전처리를 하기 위해 제공하는 도구를 사용하는 것이 맞다고 봅니다.
시각을 조금 달리 살펴 보면, 데이터 분석가들에게 CSV 로 파일을 전달하려는 이유는, 다른 도구로 CSV 파일을 분석하기 위함으로 보입니다. 차라리, Kibana에서 제공하는 다양한 기능으로 데이터 분석을 Kibana에서 수행하는 것을 고려해보시는게 좋겠습니다.
This topic was automatically closed 28 days after the last reply. New replies are no longer allowed.