tencent cloud

Cloud Object Storage

동향 및 공지
릴리스 노트
제품 공지
제품 소개
제품 개요
기능 개요
적용 시나리오
제품 장점
기본 개념
리전 및 액세스 도메인
규격 및 제한
제품 요금
과금 개요
과금 방식
과금 항목
프리 티어
과금 예시
청구서 보기 및 다운로드
연체 안내
FAQ
빠른 시작
콘솔 시작하기
COSBrowser 시작하기
사용자 가이드
요청 생성
버킷
객체
데이터 관리
일괄 프로세스
글로벌 가속
모니터링 및 알람
운영 센터
데이터 처리
스마트 툴 박스 사용 가이드
데이터 워크플로
애플리케이션 통합
툴 가이드
툴 개요
환경 설치 및 설정
COSBrowser 툴
COSCLI 툴
COSCMD 툴
COS Migration 툴
FTP Server 툴
Hadoop 툴
COSDistCp 툴
HDFS TO COS 툴
온라인 도구 (Onrain Dogu)
자가 진단 도구
실습 튜토리얼
개요
액세스 제어 및 권한 관리
성능 최적화
AWS S3 SDK를 사용하여 COS에 액세스하기
데이터 재해 복구 백업
도메인 관리 사례
이미지 처리 사례
COS 오디오/비디오 플레이어 사례
데이터 다이렉트 업로드
데이터 보안
데이터 검증
빅 데이터 사례
COS 비용 최적화 솔루션
3rd party 애플리케이션에서 COS 사용
마이그레이션 가이드
로컬 데이터 COS로 마이그레이션
타사 클라우드 스토리지 데이터를 COS로 마이그레이션
URL이 소스 주소인 데이터를 COS로 마이그레이션
COS 간 데이터 마이그레이션
Hadoop 파일 시스템과 COS 간 데이터 마이그레이션
데이터 레이크 스토리지
클라우드 네이티브 데이터 레이크
메타데이터 가속
데이터 레이크 가속기 GooseFS
데이터 처리
데이터 처리 개요
이미지 처리
미디어 처리
콘텐츠 조정
파일 처리
문서 미리보기
장애 처리
RequestId 가져오기
공용 네트워크로 COS에 파일 업로드 시 속도가 느린 문제
COS 액세스 시 403 에러 코드 반환
리소스 액세스 오류
POST Object 자주 발생하는 오류
보안 및 컴플라이언스
데이터 재해 복구
데이터 보안
액세스 관리
자주 묻는 질문
인기 질문
일반 문제
과금
도메인 규정 준수 문제
버킷 설정 문제
도메인 및 CDN 문제
파일 작업 문제
로그 모니터링 문제
권한 관리
데이터 처리 문제
데이터 보안 문제
사전 서명 URL 관련 문제
SDK FAQ
툴 관련 문제
API 관련 문제
Agreements
Service Level Agreement
개인 정보 보호 정책
데이터 처리 및 보안 계약
연락처
용어집
문서Cloud Object Storage데이터 레이크 스토리지데이터 레이크 가속기 GooseFSOPS 가이드모니터링 가이드GooseFS 모니터링 지표 가져오기

GooseFS 모니터링 지표 가져오기

PDF
포커스 모드
폰트 크기
마지막 업데이트 시간: 2024-12-26 21:20:41
Goosefs는 Coda Hale Metrics Library를 기반으로 모니터링 데이터를 기록하고 명령 라인, 콘솔, 파일 등 여러 경로를 통한 지표 획득을 지원합니다. 현재 지원되는 지표 획득 방법은 다음과 같습니다.
MetricsServlet: Json 형식으로 사용자에게 모니터링 지표를 제공합니다.
CsvSink: CSV 파일을 통해 모니터링 지표를 표시합니다. 설정 후 모니터링 지표를 기록하는 CSV 파일은 주기적으로 생성됩니다.
PrometheusMetricsServlet: Prometheus에서 정의한 형식으로 사용자에게 모니터링 지표를 제공합니다.
상기 모니터링 지표의 설정은 구성 파일을 통해 지정할 수 있습니다. GooseFS 모니터링 지표 구성 파일의 기본 파일 경로는 $ GooseFS_HOME/conf/metrics.properties이며, goosefs.metrics.conf.file을 통한 사용자 정의 모니터링 구성 파일 지정을 지원합니다. GooseFS는 설정 가능한 모든 속성을 포함하는 기본 템플릿 metrics.properties.template을 사용자에게 제공합니다.

모니터링 지표 가져오기

다음은 모니터링 지표를 얻는 세 가지 기본 경로를 소개합니다.

1. JSON 형식으로 모니터링 지표 가져오기

GooseFS가 모니터링 지표를 얻는 기본 방법은 MetricsServlet 설정 항목에 해당하는 JSON 형식으로 풀링하는 것입니다. 명령 라인에서 GooseFS의 Leading Master 노드에 대한 HTTP 요청을 제안하여 필요한 모니터링 지표를 풀링합니다. 그 중 master의 metrics 포트는 9201이고 worker의 metrics 포트는 9204입니다. 요청 명령어 형식은 다음과 같습니다. 
$ curl <LEADING_MASTER_HOSTNAME>:<MASTER_WEB_PORT>/metrics/json
상기 예시에서 은 올바른 MASTER 노드의 IP여야 하고 는 활성화된 포트여야 합니다.
WORKER 노드의 모니터링 지표를 가져와야 하는 경우 다음과 같은 방법으로 얻을 수 있습니다.
$ curl <WORKER_HOSTNAME>:<WORKER_WEB_PORT>/metrics/json

2. CSV 파일로 모니터링 지표 가져오기

GooseFS는 CSV 형식 파일로 데이터 내보내기를 지원합니다. 이 기능을 통해 모니터링 지표를 얻으려면 먼저 모니터링 지표를 저장할 디렉터리를 준비해야 합니다.
$ mkdir /tmp/goosefs-metrics
스토리지 경로를 준비한 후 구성 파일 conf/metrics.properties를 수정하여 CsvSink 능력을 활성화합니다.
sink.csv.class=goosefs.metrics.sink.CsvSink # CsvSink 기능 활성화

sink.csv.period=1 # 모니터링 지표 내보내기 주기 설정
sink.csv.unit=senconds # 모니터링 지표 내보내기 주기 단위 설정

sink.csv.directory=/tmp/goosefs-metrics # 모니터링 지표 내보내기 경로 설정
설정이 완료된 후 설정을 적용하려면 노드를 재시작해야 합니다. 설정이 적용된 후 모니터링 지표는 주기적으로 CSV 형식으로 내보내기되고 지정된 경로에 저장됩니다.
주의：
GooseFS는 모니터링 설정 템플릿을 준비했습니다. conf/metrics.properties.template 파일을 참고하십시오.
GooseFS가 클러스터에 배포된 경우 지정된 지표 스토리지 경로를 모든 노드에서 읽을 수 있도록 보장되어야 합니다.

3. Prometheus 모니터링 지표 풀링

GooseFS master와 worker의 Prometheus 모니터링 지표는 다음과 같은 명령어로 조회할 수 있습니다. 그 중 master의 metrics 포트는 9201이며, worker의 metrics 포트는 9204입니다.
curl <LEADING_MASTER_HOSTNAME>:<MASTER_WEB_PORT>/metrics/prometheus/
# HELP Master_CreateFileOps Generated from Dropwizard metric import (metric=Master.CreateFileOps, type=com.codahale.metrics.Counter)
...

curl <WORKER_IP>:<WOKER_PORT>/metrics/prometheus/
# HELP pools_Code_Cache_max Generated from Dropwizard metric import (metric=pools.Code-Cache.max, type=com.codahale.metrics.jvm.MemoryUsageGaugeSet$$Lambda$51/137460818)
...

이전 주제: GooseFS-FUSE 기능다음 주제: Prometheus를 기반으로 GooseFS 모니터링 시스템 구축

도움말 및 지원

문제 해결에 도움이 되었나요?

피드백