안녕하세요, 

베스핀글로벌 GCP Support팀입니다.


이번 아티클에서는 주제로 "Cloud Composer 2의 환경 사전 설정 규모 설정 방법"을 다루고자 합니다.



Cloud Composer 2 환경 사전 설정 규모 설정


Google Cloud Console에서 Cloud Composer 2를 생성 시 세 가지 환경 사전 설정 중 하나를 선택 할 수 있습니다.

※ 세 가지 외에도 Custom 환경을 구성하여 필요한 만큼의 리소스를 할당 할 수 있습니다.



위 환경 사전 설정 중 기준을 선택하기 위해 구글에서 제공하는 권장 추정치를 확인 하여 사용합니다.



단,  위 기준은 평균 리소스 소비를 기준으로 한 추정치 임으로 DAG가 더 많은 리소스를 소비할 것으로 예상 될 경우 추정치를 조정해야 합니다.


Composer 생성 후 환경의 Monitoring Dashboard를 통해 환경의 성능 측정항목을 모니터링 하여 적절한 리소스를 사용 중인지 확인 할 수 있습니다.


또한 Cloud Composer 2 환경은 다음과 같이 실행된 DAG 및 태스크의 요구에 따라 자동으로 확장/축소되는 것을 참고하시기 바랍니다.

  • 환경에 과부하가 발생하는 경우 Cloud Composer는 환경의 작업자 수를 자동으로 늘립니다.
  • 환경에서 일부 작업자를 사용하지 않는 경우 환경 리소스와 비용을 절약하기 위해 이러한 작업자가 삭제됩니다.
  • 환경의 최소 및 최대 작업자 수를 설정할 수 있습니다. Cloud Composer는 설정된 한도 내에서 환경을 자동으로 확장합니다. 이 한도는 언제든지 조정할 수 있습니다.

참조링크


[1] Composer 2 사전 환경 구성

https://cloud.google.com/composer/docs/composer-2/optimize-environments#presets



관련 문의사항이 있으시면 Support Portal에 문의해 주시기 바랍니다.


감사합니다.