Hide

기존에 ECS를 사용하여 docker-compose를 배포하는 방법(https://hides.tistory.com/1016)에 대해 포스팅했었다. 일반적인 ECS는 EC2 인스턴스 위에 컨테이너가 돌아가는 형태이므로 EC2에 대한 디펜던시를 가져갈 수 밖에 없다. 하지만 큰 문제가 없어서 계속 사용을 하던 중 Fargate의 비용 인하 소식을 듣게 되었다. (https://aws.amazon.com/ko/about-aws/whats-new/2019/01/announcing-aws-fargate-price-reduction-by-up-to-50-/) 최대 50% 요금을 인하한다고 하는데, 그래도 EC2를 이용하는 ECS보단 가격이 있는 편이다. EC2 Container Service와 Fargate Con..

목적아마존 AWS에 Docker-compose.yml파일을 통해 배포하는 방법에 대해 기술한다. 추가적으로 ALB(Application Load Balancer)를 통해 로드밸런싱을 진행하고 서비스/인스턴스에 Auto Scailing을 걸어서 자동으로 스케일업/다운할 수 있도록 한다. 작업 순서1. ECS 클러스터 생성2. ALB(Application Load Balancer) 생성3. 도커 이미지 ECR에 저장4. 작업 정의(Task Definition) 생성5. CloudWatch 경보 생성6. 서비스(Service) 생성7. 인스턴스 스케일링 적용 1. ECS 클러스터 생성먼저 ECS클러스터부터 생성해야한다. 클러스터를 생성할 때 지정한 인스턴스의 개수에 따라 EC2 인스턴스가 실행되며 해당 인스턴..

운영중인 서비스에 업데이트 사항이 생기고 배포를 진행하다보면 지속적인 배포를 어떻게 해야할까 라는 의문점이 들기 마련이다. 가장 중요한점은 사용자가 서버의 중단을 느끼지 못하는 것이기에 관련된 사항을 찾아보던 중 Blue/Green Deploy라는 것을 발견했다. 예를 들어 총 4대의 서비스가 존재한다면 2대의 서비스를 로드밸런서에서 끊고 서비스를 업데이트한 이후 다시 로드밸런서에 붙임과 동시에 기존 서비스 2대를 로드밸런서에서 끊는다. 마찬가지로 2대의 서비스도 업데이트를 진행하고 다시 로드밸런서에 붙인다. 이렇게 된다면 실제로는 서비스의 중단이 일어났다고 볼 수 있겠지만 사용자의 경험에서는 서비스의 중단을 느낄 수 없다. Blue/Green에 대한 자세한 사항은 인터넷에 많이 나와있으니 찾아보도록 하..

목적Django를 배포할때는 Uwsgi를 통해 Nginx 또는 Apache웹서버와 엮어서 배포한다.이러한 경우에서 만약 AWS ECS를 사용한다면 Docker-compose를 통해 컨테이너화 시켜주는 작업이 필요하고그러한 과정에 대해 기술한다.구현먼저 docker-compose파일은 다음과 같이 총 3개로 나뉜다.docker-compose-dev.ymlversion: '3.7' services: nginx: build: context: . dockerfile: docker/nginx/Dockerfile container_name: nginx hostname: nginx ports: - '80:80' networks: - backend restart: on-failure links: - web_servic..

목적ECS에 도커 컨테이너를 배포할 때 AWS Secret Manager를 통해 환경변수를 관리하는 방법에 대해 기술한다. IAM으로 권한 주기기본적으로 awscli를 통해 접근하려면 credential관련한 설정이 필요하다.하지만 도커 컨테이너를 빌드할 때 해당 자료를 같이 넘겨주면 의미가 없으므로 IAM을 통해 권한을 설정해줘야 한다.해당 방법을 사용하면 특별한 crendential 설정이 필요없이 awscli를 통해 접근이 가능하다.먼저 IAM - 역할로 들어가서 역할 만들기를 누른다.우리는 ECS 관련한 역할을 만들것이므로 AWS서비스 - EC2를 선택하고 다음을 누른다. SecretManagerReadWrite를 선택하고 다음을 누른다.태그 추가는 그냥 넘어간다.역할 이름에 원하는 이름을 적고 ..

목적AWS ECS를 사용하여 서비스를 배포할 때 Auto Scailing을 적용하는 방법에 대해 기술한다.배경지식먼저 ECS가 어떠한 형태로 돌아가는지 부터 살펴봐야 한다.ECS가 돌아가기 위해서는 다음과 같은 4개가 필요하다. ClusterServiceTask DefinitionEC2 Instance(Launched by Cluster) 기본적으로 Cluster부터 생성한다.Cluster를 생성할 때 원하는 인스턴스의 개수를 정할 수 있는데, 이때 정의한 개수만큼 클러스터 생성과 동시에 EC2 Instance가 구동된다.Service는 정의한 Task Definition을 묶어서 실행해준다고 보면 될 것 같다.Task Definition은 그냥 쉽게 생각해서 Docker-compose라고 생각해도 될 ..

AWS Lambda란 Amazon Web Service에서 제공하는 서버리스(Serverless) 기능이다.한마디로 서버가 없고 코드만 존재한다는 뜻이다.예를 들어서 크롤링을 진행하여 데이터베이스에 적재하는 코드의 경우 24시간 떠있을 필요가 없이Crontab등을 통해 주기적으로 실행하면 된다.이러한 경우 EC2를 사용하는것은 리소스 낭비이므로 lambda를 사용하는것이 적절하다.또한 100만건의 요청까지는 무료로 제공되므로 EC2보다 비용면에서도 이득이라고 볼 수 있다.먼저 AWS Lambda 콘솔로 - 함수로 들어간다. 새로 작성을 선택하고 이름과 런타임을 지정한다.나는 파이썬으로 작업할 예정이므로 Python 3.6을 선택했다. 또한 역할을 선택할 수 있는데, RDS와 통신해야하므로 RDS에 접근할..

목적ECS를 사용하여 서비스를 구성할 때 여러개의 인스턴스를 구동하고 해당 인스턴스를 ALB를 통해 로드밸런싱 해주는 방법에 대해 기술한다.전제 조건구현에서 사용할 이미지들은 모두 ECR에 푸시해놓은 상태라고 가정한다.본문에서는 docker-compose를 통해 이미지를 빌드하고 푸시하는 과정에 대해서는 생략한다.사전 지식ALB는 설정해놓은 로드밸런싱 그룹에 인스턴스가 포함되면 자동으로 해당 인스턴스도 라우팅 목록에 포함시킨다.따라서 우리는 ECS 서비스를 생성할 때 미리 생성해놓은 로드밸런서와 로드밸런싱 그룹을 설정해줘야 한다.추가적으로 배포할 때 어떠한 형태로 진행하는지 미리 숙지할 필요가 있다.2가지의 방법이 존재할 것이다. 방법 1기존에 A와 B라는 인스턴스가 돌고 있다고 가정한다.C, D인스턴스..

목적소스의 변경이 일어나면 바로 도커 컨테이너에 적용되는 Hot reload에 대해 기술한다. 일반적으로 도커를 사용하여 개발할 때 배포환경/개발환경 두가지로 나눠서 작업한다.배포환경에서는 큰 문제가 없지만 개발환경에서는 소스의 변경이 잦으므로 변경을 자동으로 탐지하여변경된 내용을 반영하여 재시작해주는 플로우가 필요하다.보통 로컬의 파일을 컨테이너에 적용하기위해 아래와 같은 코드를 사용한다. (Dockerfile) COPY . ./home WORKDIR home 현재 폴더를 컨테이너의 /home 디렉토리로 복사하고 해당 디렉토리로 이동하여 작업하는 형태이다.하지만 위처럼 정의를 해버리면 한번 빌드한 컨테이너의 내용을 수정하기 까다롭다는 단점이 있다.(직접 도커에 붙어서 수정해야하지만, 이미지를 다시 빌드..

이전 포스팅에서는 단일 도커파일(Dockerfile)을 ECS에 배포하는 방법에 대해 다뤘었다.하지만 실제 프로덕션 단계에서는 docker-compose를 통해 여러개의 도커를 하나로 엮어서 사용하는 경우가 많다.ECS는 EC2서비스 위에 도커가 돌아가는 형태인데, docker-compose를 통해 배포해준다면하나의 EC2위에 여러개의 도커 컨테이너가 돌아간다고 생각하면 된다.먼저 aws와 ecs-cli를 설치해줘야 한다.나는 OSX를 사용하므로 모든 명령어를 맥북 기준으로 설명한다.아래의 명령어를 통해 aws cli를 설치해준다. pip3 install awscli 다음으로 아래의 명령어로 ecs-cli를 설치한다. sudo curl -o /usr/local/bin/ecs-cli https://s3.a..