AWS CloudWatch 모니터링

[kyum-q]

모니터링 툴 종류

선택한 모니터링 툴

무엇을 모니터링 해야할까?

EC2 관련

로그 관련

[kyum-q]

모니터링 툴 종류

[kyum-q]

Amazon CloudWatch

Amazon CloudWatch는 애플리케이션을 모니터링하고, 성능 변화에 대응하고, 리소스 사용을 최적화하며, 운영 상태에 대한 인사이트를 제공하는 서비스

기본 수집 정보

EC2에 별다른 조작을 하지 않더라도 다음 지표는 기본적으로 수집

• CPU 사용률(CPUUtilization)
• 네트워크 사용률(NetworkIn, NetworkOut)
• 디스크 성능(DiskReadOps, DiskWriteOps)
• 디스크 읽기/쓰기(DiskReadBytes, DiskWriteBytes)
• 상태 확인 지표(StatusCheckFailed, StatusCheckFailed_Instance, StatusCheckFailed_System)

가격

10.5 USD = 14,540.61 원

12.53 USD = 17,353.05 원

모니터링 대시보드

https://docs.aws.amazon.com/ko_kr/AmazonRDS/latest/AuroraUserGuide/metrics_dimensions.html

[kyum-q]

Kibana(키바나)

대시보드

https://www.elastic.co/kr/kibana

[kyum-q]

Grafana (그라파나)

대시보드

https://learn.microsoft.com/ko-kr/azure/synapse-analytics/spark/use-prometheus-grafana-to-monitor-apache-spark-application-level

[kyum-q]

선택한 모니터링 툴

Amazon CloudWatch

이유

• 가격때문에 고민했었지만, 예상 비용은 20$ 이하일 것으로 추정
  • 문제 없다고 생각
• 기본적으로 제공해주는 ec2 지표가 잘 되어있다

[kyum-q]

Amazon CloudWatch로 모니터링 할 수 있는 지표

[kyum-q]

CPUUtilization

• 설명: 인스턴스의 CPU 사용률을 백분율로 나타냅니다.

• 이유: CPU 사용량을 모니터링하여 과부하를 방지하고, 리소스 확장이 필요할 때를 판단할 수 있습니다.

• 권장 여부: 대부분의 경우 필요. 인스턴스 성능의 기본 지표입니다.

NetworkIn

• 설명: 인스턴스가 수신한 네트워크 트래픽의 바이트 수를 나타냅니다.
• 이유: 인스턴스의 수신 트래픽을 모니터링하여 네트워크 대역폭 사용을 관리하고, 비정상적인 트래픽 패턴을 감지할 수 있습니다.

NetworkOut

• 설명: 인스턴스가 전송한 네트워크 트래픽의 바이트 수를 나타냅니다.
• 이유: 인스턴스의 송신 트래픽을 모니터링하여 대역폭 사용량을 관리하고, 필요에 따라 리소스 조정을 할 수 있습니다.

NetworkPacketsIn

• 설명: 인스턴스가 수신한 네트워크 패킷의 수를 나타냅니다.
• 필요 여부: 네트워크 트래픽의 패킷 수를 모니터링하여 네트워크 성능 및 패킷 손실 여부를 확인할 수 있습니다.

NetworkPacketsOut

• 설명: 인스턴스가 전송한 네트워크 패킷의 수를 나타냅니다.
• 필요 여부: 네트워크 패킷의 수를 모니터링하여 송신 패킷의 빈도를 확인할 수 있습니다.

StatusCheckFailed

• 설명: 인스턴스의 상태 확인 실패를 나타냅니다.

• 필요 여부: 인스턴스의 헬스 체크를 통해 가용성을 모니터링하고 문제를 조기에 감지할 수 있습니다.

• 세부 지표:

  • StatusCheckFailed_Instance: 인스턴스 자체의 상태 확인 실패를 나타냅니다.
  • StatusCheckFailed_System: AWS 인프라의 상태 확인 실패를 나타냅니다.

• 권장 여부: 기본적으로 필요. 인스턴스의 헬스 체크와 관련된 문제를 모니터링하는 것은 시스템 안정성을 유지하는 데 중요합니다.

StatusCheckFailed_System

• 설명: AWS 시스템에 의해 수행된 시스템 상태 체크 실패를 나타냅니다.
• 필요 여부: AWS 인프라의 문제를 감지하여 시스템 가용성을 모니터링하는 데 중요합니다.

StatusCheckFailed_Instance

• 설명: AWS 시스템에 의해 수행된 인스턴스 상태 체크 실패를 나타냅니다.
• 필요 여부: AWS 인프라의 문제를 감지하여 시스템 가용성을 모니터링하는 데 중요합니다.

모니터링 지표 (EC2)

DiskReadBytes

• 설명: 인스턴스가 읽은 디스크 데이터의 바이트 수를 나타냅니다.

• 이유: 디스크 읽기 작업의 양을 모니터링하여 스토리지 성능을 최적화하고, 디스크 I/O 병목 현상을 탐지할 수 있습니다.

• 권장 여부: 디스크 I/O가 중요한 애플리케이션(예: 데이터베이스 서버)에서는 필요. 디스크 I/O가 적은 애플리케이션에서는 덜 중요할 수 있습니다.

DiskWriteBytes

• 설명: 인스턴스가 디스크에 쓴 데이터의 바이트 수를 나타냅니다.

• 이유: 디스크 쓰기 작업의 양을 모니터링하여 스토리지 성능을 관리하고, 디스크 사용량을 최적화할 수 있습니다.

• 권장 여부: 디스크 I/O가 중요한 애플리케이션(예: 데이터베이스 서버)에서는 필요. 디스크 I/O가 적은 애플리케이션에서는 덜 중요할 수 있습니다.

DiskReadOps

• 설명: 인스턴스가 수행한 디스크 읽기 작업의 수를 나타냅니다.

• 이유: 디스크 I/O 작업의 빈도를 모니터링하여 성능 문제를 식별할 수 있습니다.

• 권장 여부: 디스크 작업이 많은 애플리케이션에서는 필요. 파일 서버나 데이터베이스 서버에서는 중요할 수 있습니다.

DiskWriteOps

• 설명: 인스턴스가 수행한 디스크 쓰기 작업의 수를 나타냅니다.

• 이유: 디스크 I/O 작업의 빈도를 모니터링하여 스토리지 성능을 최적화할 수 있습니다.

• 권장 여부: 디스크 작업이 많은 애플리케이션에서는 필요. 파일 서버나 데이터베이스 서버에서는 중요할 수 있습니다.

[kyum-q]

무엇을 모니터링 해야할까?

[kyum-q]

기본 제공 지표

CPUUtilization

• 설명: 인스턴스의 CPU 사용률을 백분율로 나타냅니다.

NetworkIn

• 설명: 인스턴스가 수신한 네트워크 트래픽의 바이트 수를 나타냅니다.

NetworkOut

• 설명: 인스턴스가 전송한 네트워크 트래픽의 바이트 수를 나타냅니다.

StatusCheckFailed_System

• 설명: AWS 시스템에 의해 수행된 시스템 상태 체크 실패를 나타냅니다.

StatusCheckFailed_Instance

• 설명: AWS 시스템에 의해 수행된 인스턴스 상태 체크 실패를 나타냅니다.

[kyum-q]

CWAgent 로 모니터링 지표 추가

메모리 사용량

디스크 사용량

[kyum-q]

EC2에 CloudWatch CWAgent 설정

[kyum-q]

CWAgent 준비

ec2 서버 접속
서버 환경 : 리눅스 ARM64

$ cd /var

$ sudo wget https://amazoncloudwatch-agent.s3.amazonaws.com/amazon_linux/arm64/latest/amazon-cloudwatch-agent.rpm

$ sudo apt install rpm

$ sudo apt-get install -f

$ sudo rpm -U --nodeps ./amazon-cloudwatch-agent.rpm

$ sudo /opt/aws/amazon-cloudwatch-agent/bin/amazon-cloudwatch-agent-config-wizard

[kyum-q]

상태 확인

$ sudo /opt/aws/amazon-cloudwatch-agent/bin/amazon-cloudwatch-agent-ctl -m ec2 -a status

[kyum-q]

실행

$ sudo /opt/aws/amazon-cloudwatch-agent/bin/amazon-cloudwatch-agent-ctl -m ec2 -a start

[kyum-q]

로그 확인

$ cd /opt/aws/amazon-cloudwatch-agent/logs/

$ more amazon-cloudwatch-agent.log