Elasticsearch를 로그 수집에 사용하는 이유

JSCODE 시니

2026. 03. 03.

✅ 1. 로그 파일을 저장할 때 DB를 사용하면 안되는 이유

• 로그는 하루에도 수천만 건씩 쌓이는 엄청난 양의 텍스트 데이터임

• MySQL과 같은 관계형 DB는 이런 방대한 텍스트에서 특정 단어를 검색하는 게 매우 오래 걸림

• 따라서 Elasticsearch와 같은 검색 엔진을 사용하는 것이 더 적절함

✅ 2. 로그 파일을 저장할 때 Elasticsearch가 적절한 이유

• Elasticsearch는 태생부터가 검색 엔진이다. (쉽게 구글 검색창을 생각하면 됨)

• 관계형 DB의 경우 특정단어를 찾기 위해 첫 페이지부터 끝까지 넘기면서 해당 단어를 찾게됨

• Elasticsearch의 경우 Index를 활용하여 데이터를 아주 빠르게 찾음
• 데이터가 1억 건 이어도 0.1초 만에 Index를 보고 찾아냄
• 이 개념을 Inverted Index(역인덱스)라고 부름