Elasticsearch hadoop Elasticsearch hadoop 소개 Elasticsearch에서는 강력한 Aggregation을 지원하지만 Aggregation에서 지원하지 않는 대용량 처리에 있어서는 불편한점이 있다. 예를 들어 event를 분석한다고 했을 때, 데이터를 간단하게 json으로 index한 후에 각 event의 count (term aggergation), event의 시간단위의 count (date histogram) 등을 kibana를 통해 간단하게 볼 수 있다. 하지만 event간의 상관 관계를 분석한다거나, data가 많아져서 data를 aggregation한다던가 할 때에는 어떻게 해야할까??다시말해, HDFS에서 읽어들여서 spark에서 machine learning을 돌리거나 event flow를 연.. 더보기 이전 1 2 3 4 5 6 7 8 ··· 212 다음