로그 늪과 작별하고 Streams를 맞이하세요

로그는 스택에서 가장 널리 사용되고, 컨텍스트가 풍부한 신호입니다. 모든 시스템은 로그를 생성합니다. 로그는 문제가 발생한 이유와 이를 해결하는 방법을 정확히 이해하는 데 필요한 상세한 원시 정보를 제공합니다. 그러한 이유로, 로그는 문제 해결 및 조사에 있어 주된 진실의 원천입니다.

애플리케이션이 더욱 복잡해짐에 따라 로그의 양과 다양성이 폭발적으로 증가했습니다. 너무 비싸서 저장할 수도 없고 가치를 추출하는 것도 너무 어려운 상황입니다. 업계는 상세한 로그 데이터를 짐짝처럼 여기며, 중요한 컨텍스트를 무시하고, 노이즈와 함께 신호를 버리는 방식으로 대응했습니다. 이제 팀은 필요한 답에 대한 이유를 제공하지 않는 대시보드와 알림 속에서 허우적거리며 문제를 해결하는 대신 취약한 파이프라인을 유지관리하는 데 시간을 쓰고 있습니다.

Streams는 로그를 메트릭과 추적의 보조로 취급하는 기존의 통합 가시성 솔루션과 달리, 로그를 탐지와 조사의 주요 신호로 만들어 문제를 더 빠르게 해결할 수 있도록 도와줍니다. AI 기반 워크플로우는 로그를 사용 가능하고 실행 가능한 상태로 만들어 기존의 통합 가시성 도구에서 누락된 '이유'를 강조합니다. 덕분에 SRE는 데이터 엔지니어링과 복잡한 파이프라인 구축에 몇 주를 소비하지 않고도 인시던트를 더 빨리 해결할 수 있습니다.

Significant Events는 메모리 부족 오류, 서버 충돌, 이벤트 시작/종료 및 기타 운영 변경 사항과 같은 로그에서 중요한 이상 징후 및 패턴을 자동으로 탐지하여 SRE에 조기 경고와 명확한 조사 시작점을 제공합니다. 이벤트는 시스템(예: Apache Spark)에 특화되어 있으며 컨텍스트에 따라 플래그가 자동으로 지정됩니다. UI에서 직접 필터링, 그룹화, 탐색할 수 있습니다.

Streams는 AI를 사용하여 구문 분석, 데이터 강화, 분할 및 스키마 업데이트를 단순화하기 때문에 복잡한 Grok 패턴이나 사용자 정의 파이프라인을 유지관리할 필요가 없습니다. SRE는 파이프라인 설정과 데이터 엔지니어링에 몇 주를 소비하지 않고 몇 분 안에 문제에 대한 조사를 시작할 수 있습니다.

Streams는 가장 중요한 로그를 드러내고 데이터를 자동으로 구조화하여 저장 공간이 효율적으로 유지됩니다. SRE가 중요한 정보를 삭제하지 않고도 고가치 데이터를 보존할 수 있기 때문에 전체 저장 공간 비용이 절감됩니다.

아니요. Streams는 기존 데이터 소스 및 수집 지점에서 작업할 수 있습니다. 현재 워크플로우를 중단하지 않으면서도 시간의 흐름에 따라 파이프라인을 강화하거나 교체할 수 있습니다.

네. Streams를 사용하면 복잡한 파이프라인, 고비용 수집, 수동 로그 상관관계 분석이 필요 없게 됩니다. 즉각적인 인사이트, AI 기반 이벤트 탐지, 비용 효율적인 저장 공간을 제공하여 레거시 솔루션을 현대적으로 대체합니다.