YG Tech Blog

🔹 개요이번 글에서는 Istio에서 로그 데이터를 중앙화하고 Fluentd를 활용하여 로그를 효율적으로 수집, 저장 및 분석하는 방법을 살펴보겠습니다.마이크로서비스 환경에서는 각 서비스가 개별적인 로그를 생성하기 때문에, 로그를 중앙에서 관리하는 것이 중요합니다.Istio는 Envoy Proxy를 통해 모든 네트워크 트래픽을 로깅할 수 있으며, 이를 Fluentd와 연동하면 로그 분석이 더욱 용이해집니다.이 글에서는 Istio의 로그 수집 구조, Fluentd 연동 방법 및 실전 예제를 설명하겠습니다.🔹 1. Istio 로그 데이터 중앙화의 필요성✅ 1.1 로그 중앙화가 필요한 이유마이크로서비스 환경에서는 각 Pod가 독립적으로 실행되며 개별적인 로그를 생성합니다.따라서 로그 데이터를 중앙에서 관리하..

1️⃣ 개요 StatefulSet을 사용하여 대규모 데이터를 효율적으로 관리하려면, 단순한 리더-팔로워(Replica) 방식만으로는 한계가 있습니다.특히, 데이터가 지속적으로 증가하고, 높은 트래픽을 처리해야 하는 경우 Sharding(샤딩) 기법이 필수적입니다. 이번 글에서는 StatefulSet에서 Sharding을 적용하는 방법과, 데이터베이스(MongoDB, Elasticsearch, Kafka) 및 분산 시스템에서의 샤딩 활용 전략을 설명하겠습니다. 🚀 2️⃣ Sharding(샤딩)이란? 📌 Sharding(샤딩)의 개념Sharding은 데이터를 여러 개의 작은 단위(Shard)로 나누어 저장하고 관리하는 기술입니다.이를 통해 수평 확장(Scalability) 이 가능해지고, 대규모 데이터베..

1️⃣ 개요 쿠버네티스 환경에서 Pod를 운영할 때 로그(Log)와 모니터링(Monitoring)은 필수적인 요소입니다.Pod가 정상적으로 동작하는지 확인하고, 장애가 발생했을 때 원인을 파악하려면 적절한 로그 수집 및 모니터링 시스템을 구축해야 합니다. 쿠버네티스에서 기본적으로 kubectl logs 명령어를 활용하여 Pod의 로그를 확인할 수 있지만, 운영 환경에서는 중앙 집중식 로그 관리 및 실시간 모니터링이 필요합니다.이번 글에서는 Pod의 로그를 효과적으로 관리하는 방법과 모니터링을 최적화하는 전략을 정리하겠습니다. 2️⃣ Pod 로그 관리 방식 비교 Pod의 로그는 다양한 방법으로 수집할 수 있으며, 운영 환경에 맞는 최적의 방식이 필요합니다. 📌 Pod 로그 수집 방식 비교로그 수집 방식설..