Docker

Intro::

Docker 를 사용하는 방법에 대해 공부해보자.

도커란 ?

도커의 장점

1. 개발 환경의 일관성: 도커를 사용하면 개발, 테스트, 프로덕션 환경 사이의 차이를 줄일 수 있다. 모든 환경에서 동일한 이미지를 사용하기 때문에, "내 컴퓨터에서는 잘 되는데요" 같은 문제를 방지할 수 있다.

2. 배포 속도 향상: 애플리케이션과 그 종속성을 컨테이너에 패키징하면, 배포 프로세스가 간소화되고 자동화하기 쉬워진다. 이로 인해 배포 속도가 빨라진다.

3. 이식성 향상: 도커 컨테이너는 어디서든 실행될 수 있어. 리눅스, 윈도우, macOS 상관없이, 온프레미스나 클라우드 상관없이 실행가능하다.

4. 분리 및 관리 용이: 도커를 사용하면 애플리케이션을 서비스별로 분리해서 관리할 수 있다. 이는 마이크로서비스 아키텍처와 잘 맞는다. 각 컨테이너는 독립적으로 업데이트하고 관리할 수 있어서 유지보수가 편리하다.

5. 리소스 효율성: 컨테이너는 가벼워서 빠르게 시작할 수 있고, 가상 머신(VM)에 비해 적은 양의 메모리와 CPU를 사용한다. 이는 시스템 리소스를 더 효율적으로 사용할 수 있게 해준다.

기본 구성 요소

• 이미지(Image): 애플리케이션을 실행하는 데 필요한 모든 파일과 설정을 포함하는 불변의 템플릿. 이미지는 컨테이너를 생성하는 데 사용된다.

• 컨테이너(Container): 이미지를 기반으로 생성되며, 실제로 애플리케이션을 실행하는 격리된 환경. 각 컨테이너는 독립적으로 실행되며, 다른 컨테이너나 호스트 시스템과 격리돼 있다.

• 도커 데몬(Docker Daemon): 도커 이미지와 컨테이너를 관리하는 백그라운드 프로세스. 사용자나 도커 API의 요청을 받아 처리한다.

• 도커 클라이언트(Docker Client): 사용자가 도커 데몬과 통신할 때 사용하는 주요 인터페이스. 명령어를 입력하면, 도커 클라이언트가 이 명령어를 도커 데몬에게 전달한다.

Dockerfile

FROM python:3.9-slim # 사용할 BaseImage
WORKDIR /app # 작업 디렉토리
COPY main.py . # 필요한 파일들을 docker 이미지에 복사
COPY ./requirements.txt .

RUN pip install --no-cache-dir -r requirements.txt # 필요한 패키지를 다운

CMD ["python3", "main.py"] # 컨테이너가 올라갈때 실행

Build

docker build -t docker-ex:1.0 .

Run

docker run --name {container-name} -d {image:tag}

ENTRYPOINT

컨테이너가 시작될 때 실행해야 할 기본 명령(또는 프로그램)을 설정합니다. 이 명령은 컨테이너 실행 시 변경할 수 없으므로 "불변"한 부분으로 볼 수 있습니다.

CMD

ENTRYPOINT에 의해 실행되는 프로그램에 대한 기본 인자를 제공하거나, ENTRYPOINT가 없을 때 실행할 기본 명령을 정의합니다. 그리고 CMD는 docker run 명령어에 추가적인 인자가 주어질 경우에 대체될 수 있습니다.

docker compose

1. 도커 파일 작성

• MySQL 도커 파일: MySQL은 이미 공식 도커 이미지가 있기 때문에 별도의 도커 파일을 작성할 필요가 없습니다. 환경 변수를 사용하여 초기 설정(예: 데이터베이스 이름, 사용자 이름, 비밀번호 등)을 할 수 있습니다.

• 스프링 애플리케이션 도커 파일: Java와 Maven(또는 Gradle)을 기반으로 한 스프링 부트 애플리케이션을 빌드하고 실행하기 위한 도커 파일을 작성합니다.

• 파이썬 애플리케이션 도커 파일: 파이썬 애플리케이션에 필요한 의존성을 설치하고 애플리케이션을 실행하기 위한 도커 파일을 작성합니다.

2. 도커 컴포즈 파일 작성

version: '3'
services:
  mysql:
    image: mysql:latest
    container_name: mysql
    environment:
      MYSQL_DATABASE: 'db'
      MYSQL_USER: 'user'
      MYSQL_PASSWORD: '1234'
      MYSQL_ROOT_PASSWORD: 'root1234'
      TZ: 'Asia/Seoul'
      MYSQL_CHARSET: utf8mb4
      MYSQL_COLLATION: utf8mb4_unicode_ci
    ports:
      - "3306:3306"
    volumes:
      - db-data:/var/lib/mysql
      - ./my.cnf:/etc/mysql/conf.d/custom.cnf

  spring-app:
    build:
      context: ./newsHabit
      dockerfile: dockerfile
    restart:
      on-failure
    ports:
      - "8080:8080"
    environment:
      SPRING_DATASOURCE_URL: jdbc:mysql://mysql:3306/news_habit?useUnicode=true&characterEncoding=utf8
      SPRING_DATASOURCE_USERNAME: "user"
      SPRING_DATASOURCE_PASSWORD: "1234"
      TZ: "Asia/Seoul"
    depends_on:
      - mysql

  python-app:
    build:
      context: ./crawling
      dockerfile: Dockerfile
    environment:
      TZ: "Asia/Seoul"
    command: python3 ./src/main.py
    volumes:
      - ./crontab:/crawling/crontab
    depends_on:
      - mysql

volumes:
  db-data:

#my.cnf
[client]
default-character-set=utf8mb4

[mysql]
default-character-set=utf8mb4

3. 네트워크 설정

4. 실행 및 테스트

docker-compose up --build

DB 저장 시 한글 깨짐 현상

ec2 이미지 빌드 호환 문제

docker build --platform linux/amd64 -t aoleejohn/crawl:latest .// 와같이 빌드해야한다.

References::

도커 파일 작성 기본 예제(파이썬 프로젝트 예시)

프로젝트 파일을 도커로 빌드하기 위해서는 Dockerfile 작성이 필요합니다. 이번 글에서는 간단한 Python 프로젝트에 대한 Dockerfile 작성 예제를 다루면서 도커 파일 작성 방법에 대한 기초를 살펴보도록 하겠습니다. Dockerfile 작성 방법 예시 다음과 같은 디렉토리 구조로 구성된 파이썬 프로젝트가 있다고 가정해 보겠습니다. /project-directory /utils util_file.py main.py Dockerfile requirements.txt 위의 프로젝트를 도커 환경에서 실행하기 위한 Dockerfile 예시 스니펫은 아래와 같습니다. # 사용할 Base Image 선택 FROM python:3.9-slim # 작업 디렉토리 설정 WORKDIR /app # 필요한 파일..

https://jimmy-ai.tistory.com/408

[Docker] 도커 이미지와 컨테이너 삭제 방법

도커 이미지는 docker images 명령어로 보면 점점 늘어나는 것을 확인할 수 있다. 이것들은 어떻게 하면 삭제할 수 있는지를 정리했다. 컨테이너 삭제 동작중인 컨테이너 확인 $ docker ps 정지된 컨테이너 확인 $ docker ps -a 컨테이너 삭제 $ docker rm [컨테이너id] 삭제된 것 확인 $ docker ps -a 복

https://brunch.co.kr/@hopeless/10

Docker - 도커에 Spring Boot(Gradle) 구축하기

우리가 도커를 이해해야 하는 이유는 호스팅 서비스를 이용하기 위해서는 특정한 서버 환경에 배포를 해야하기 때문에 그에 따른 설정을 맞춰줘야 됩니다. 하지만 매번 다른 웹서비스를 이용할 때 마다 설정을 해야하며, 서버마다 각각의 설정을해줘야 하여 많은 자원 남이가 있습니다. 이런 다른 환경에서의 작업을 규격화하여 정의를 하기 위해 도커를 사용합니다. #️⃣ 도커 실행 순서 1. spring boot 개발 2. jar 파일 생성 3. dockerfile 만들기 4. docker image생성 5. docker container실행 먼저 실습을 하기앞서 도커가 설치가 되어있어야 합니다. 도커 설치법 1️⃣Spring Boot 개발 해당 포스팅은 도커를 중점으로 하는 내용이기 때문에 spring 프로젝트는 간단..

https://yooooonnf.tistory.com/5

docker-compose로 SpringBoot + MySql DB 서버 구동

UserEntity를 가지고 CURD를 하는 SpringBoot RESTAPI 프로젝트를 만들어보았습니다. 이 프로젝트를 MySql DB와 연동을 해야 하는데 docker-compose.yml 파일로 쉽게 연동할 수 있음을 실습해보겠습니다.build.gradleUser

https://velog.io/@mooh2jj/docker-compose로-SprongBoot-JPA-MySql-DB-서버만들기

[Docker] 이미지를 깨끗하게 재빌드하는 방법

도커 이미지를 깨끗하게 재빌드하려면 다음과 같은 단계를 따르면 됩니다. 1. 컨테이너 및 이미지 삭제 우선 해당 이미지를 사용하는 모든 컨테이너를 중지하고 삭제해야합니다. 이는 다음 명령을 통해 수행할 수 있습니다. docker stop [container_name] docker rm [container_name] 이미지를 직접 삭제하려면 다음과 같이 입력합니다. docker rmi [image_name] 2. 캐시된 빌드 삭제 이전 빌드에서 캐시가 사용될 가능성이 있으므로 빌드 캐시를 삭제해야합니다. 다음 명령을 사용하여 모든 캐시를 삭제할 수 있습니다. docker builder prune 3. 새로운 이미지 빌드 모든 이전 이미지 및 캐시가 제거되었으므로 새 이미지를 빌드할 수 있습니다. 다음 명령..

https://kimjingo.tistory.com/228

[Docker] 이미지 빌드 플랫폼 호환성 관련 에러 (linux/amd64)

왜 로컬에서 잘 실행되던 Docker Image 가 클라우드 Linux 서버에서는 실행되지 않을까?

https://velog.io/@msung99/Docker-이미지-빌드-플랫폼-호환성-관련-에러-linuxamd64