가정에서 IT 실천하기: 로깅

가정을 진지한 비즈니스 환경처럼 만드는 시리즈를 이어나가며 이번에는 로그 수집에 대해 이야기하고 싶습니다. “가정에서 IT 실천하기: 티켓팅 및 모니터링”에서 Spiceworks가 어느 정도의 Windows 이벤트 수집을 한다고 언급했습니다. 그러나 그것은 주제에 대한 매우 가벼운 처리였으며 진지한 “홈 IT” 사용자라면 더 강력하고 엔터프라이즈급의 솔루션을 원할 것입니다.

엔터프라이즈 로그 수집, 검색 및 보고는 지난 10년간 틈새 분야에서 핵심 IT 도구로 발전했으며, 그 흐름을 이끈 것은 어디서나 볼 수 있는 Splunk입니다. 이 카테고리에 다양한 정도의 기능과 견고함을 가진 많은 제품들이 잠재적으로 포함됩니다. 전통적인 “구식” 로깅 시스템은 Spiceworks, Windows Event Collector, ManageEngine EventLog Analyzer 같은 Windows 이벤트 수집기 카테고리에 속하는 경향이 있습니다. UNIX 세계와 네트워킹 하드웨어 세계에서는 Rsyslog 및 Solarwinds Kiwi Syslog Server 같은 syslog 호환 시스템을 주로 사용합니다. 그러나 이 제품들은 제한적인 플랫폼에만 집중되어 있어 상당히 제한적이며, 종종 비용이 매우 많이 들거나(Kiwi) 좋은 사용자 경험이 부족합니다(Rsyslog). 홈 랩을 탐색하면서 이러한 제품들 중 일부를 사용해보는 것도 의미가 있습니다. 하지만 로깅을 한 단계 높이기 위해서는 이러한 모든 데이터 소스와 그 이상을 처리하고 확장 가능하며 데이터를 수집할 뿐만 아니라 검색 가능하고 시각화할 수 있도록 설계된 훨씬 더 강력한 플랫폼을 살펴봐야 합니다. 이상적으로는 열성적인 홈 시스템 관리자만이 아닌 더 많은 사람들이 사용할 수 있어야 합니다.

이 새로운 세대의 로그 수집 시스템의 선두주자는 Splunk입니다. Splunk는 주로 온프레미스 독점 소프트웨어 패키지이지만 홈 IT 애호가에게 일반적으로 완벽한 “무료” 옵션으로도 제공됩니다. 무료 에디션은 일일 로그 수집량을 제한하고 여러 사용자를 지원하지 않는데, 이는 홈 사용에서는 실질적인 걸림돌이 될 가능성이 낮습니다. 현재 수집 한도는 하루 500MB로 엄청난 양의 로그입니다. Splunk는 유료 고객이 항상 대량의 로그 볼륨을 가진 대형 업체일 것을 알기 때문에 소규모 업체와 개인 사용자에게 무료로 제품을 제공하는 것이 실제로 수익에 도움이 됩니다. 이는 제품에 대한 더 넓은 경험과 지식을 장려하기 때문입니다. Splunk는 비교적 복잡하여 설정하는 데 어느 정도 노력이 필요하지만 매우 강력하고 기능이 풍부합니다.

Splunk가 온프레미스 로그 처리의 유일한 선택지는 아닙니다. 오픈 소스 영역에서는 로그 수집 및 보고를 중심으로 활발한 활동이 있으며, 대부분 Elasticsearch NoSQL 데이터 플랫폼을 기반으로 합니다. 핵심적인 것은 세 가지 주요 구성요소인 Elasticsearch, Logstash, Kibana를 지칭하는 “ELK” 스택입니다. 일반적인 대안은 스택을 유지하되 데이터 분석 인터페이스인 Kibana를 역시 오픈 소스인 Graylog2로 교체하는 것입니다. ELK 또는 유사한 스택은 Splunk 제한 없이 “Splunk와 유사한” 기능을 제공합니다. Splunk는 오늘날 기업에서 더 인기 있는 선택이지만 ELK는 인지도 면에서 상당한 성과를 거두고 있으며 기술 스타트업, 연구 기관 및 대형 호스팅 서비스와 같은 보다 혁신적인 기업에서 가장 많이 볼 수 있습니다(Dreamhost가 주목할 만한 후원사입니다).

온프레미스 로그 관리 프로젝트를 진행하는 것은 집 안에 쌓여 있는 여분의 하드웨어를 활용할 좋은 기회가 될 것이며, 관리하고 유지해야 할 더 많은 “서버”가 있기 때문에 더 깊은 시스템 관리 경험을 제공할 것입니다. 비즈니스와 달리 가정에서 IT를 실천할 때는 기술 확산과 의도적으로 더 어려운 길을 택하는 것에 상당한 이점이 있습니다. 우리는 적극적으로 도전을 추구하며 실제 가치를 생산하는 의미 있는 홈 시스템을 운영하고 있습니다. 로그 분석은 네트워크가 이미 생성하고 있는 데이터를 활용하여 문제를 미리 예측하고, 사후 문제를 추적하고, 보안을 극적으로 향상시킬 수 있는 가치를 추가하기에 탁월한 영역입니다. 네트워크와 장치에서 일어나는 일을 파악하는 것은 큰 가치가 있으며 Windows 이벤트와 UNIX syslog를 수동으로 파싱하는 것은 지루하고 오류가 발생하기 쉽습니다. 그래픽 데이터를 보는 것이 더 효과적이고 신뢰할 수 있습니다. 또한 로깅 플랫폼은 로깅 이벤트를 기반으로 알림을 보낼 수도 있습니다.

온프레미스 로그 관리만이 유일한 옵션은 아닙니다. 로그 관리는 서비스형 소프트웨어(SaaS) 비즈니스 모델로도 제공되며, 두 가지 주요 플레이어가 있습니다. Splunk의 “Splunk Storm” 서비스와 시장 선두주자인 Loggly입니다. 이 두 벤더 모두 홈 IT 사용자에게 필요한 것보다 훨씬 더 많은 기능을 제공하는 완전히 무료의 용량 제한 버전을 제공합니다. 이 서비스들을 통해 어떤 투자도 없이, 시간도, 돈도, 하드웨어도 없이 몇 분 만에 엔터프라이즈 로그 관리를 시작하고 실행할 수 있습니다. 목표가 시스템 관리 학습보다 순수하게 좋은 로그 관리에 집중하는 것이거나 집에 여분의 IT 서비스를 의도적으로 만드는 것을 유발하는 랙에 넣을 하드웨어가 단순히 부족하다면 호스팅 로그 관리가 최선의 선택일 가능성이 높습니다. 개발, 네트워크 관리 또는 기타 IT 분야에 집중하는 분들에게는 이것이 더 유용한 옵션일 것입니다. 특히 Loggly는 누구든지 쉽게 가입하고 로그 데이터를 보내기 시작할 수 있으며 오늘날 선도적인 호스팅 로그 관리 제품입니다.

홈 네트워크가 크고 활발해질수록 좋은 로그 수집 및 관리의 가치가 높아집니다. 로그는 네트워크에 대한 심층적인 통찰력을 제공하며, 좋은 로그 관리 솔루션은 데이터에 대한 높은 수준의 뷰를 제공할 뿐만 아니라 실시간 로그 데이터의 전통적인 보기를 대체하는 데도 유용합니다. 현재 이벤트를 보더라도 매력적인 웹 인터페이스에서 작업하는 것이 수동으로 로그를 뒤지는 것보다 일반적으로 훨씬 더 효과적입니다. 그리고 일부 로그 관리 솔루션은 비중앙화 솔루션에서는 종종 부족한 장기적인 로그 보존을 위한 좋은 기능도 제공합니다.

좋은 로그 관리는 점점 더 중요해지고 있으며 비즈니스에서 기대되는 서비스가 되고 있습니다. 5년 전만 해도 매우 큰 기업도 이러한 종류의 도구를 아직 채택하지 않은 경우가 흔했습니다. 오늘날에는 합리적인 규모의 모든 회사가 견고하고 성숙한 로깅 솔루션, 거의 확실히 Splunk를 갖추고 있다고 가정합니다. ELK와 Loggly의 진입 장벽이 점점 낮아짐에 따라 엔터프라이즈 로깅이 점점 더 작은 기업들에게도 확산되는 것을 볼 수 있습니다. 가정에서 로깅을 실천하는 것은 개인 포트폴리오를 향상시키고, 지식과 기술 기반을 확장하며, 이력서를 구축하는 탁월한 방법입니다. 지금 바로 로깅을 시작하십시오!