Connecting

카프카에 대해서 다시 한번 용어를 정리하면 다음과 같다. 프로듀서 : 카프카로 메시지를 보내는 역할 카프카 : 프로듀서가 보낸 메시지를 저장하는 역할 컨슈머 : 카프카에 저장되어 있는 메시지를 가져오는 역할 주키퍼 : 카프카가 분산 코디네이터인 주키퍼와 연결하여 메타 데이터 및 클러스터 노드 관리 카프카를 활용하기 위해서는 클러스터 구성이 반드시 필요하다. 일반적으로 주키퍼 replication 방식이 홀수를 유지해야 하기 때문에 최소 3대를 구성해야 한다. 왜 홀수로 구성해야 하는지에 대한 내용을 설명하도록 한다. 들어가기 전에... 카프카를 사용하기 위해서는 주키퍼(Zookeeper) 사용이 필수적이다. 주키퍼는 분산 시스템에서 필수적인 계층 구조인 Key-Value 저장 구조를 통해서 대규모 시스템..

PART 1 Shell Script Basic Shell Script 쉘 스크립트는 리눅스/유닉스에서 실행하기 위해 고안된 오픈소스 프로램이다. 쉘 스크립트에서는 여러 명령을 작성하여, 반복적이고 단순한 형태의 작업을 프로그래밍하고 실행 가능한 파일 형태로 저장하여 사용할 수 있도록 한다. 쉘이란 사용자와 운영체제 간의 인터페이스를 지칭하는 유닉스 용어이다. 쉘을 통해 사용자에게 인터페이스를 제공하고 사람이 해석할 수 있는 명령을 시스템이 해석할 수 있는 명령으로 변환하여 사용자가 원하는 명령을 실행할 수 있도록 한다. 위의 그림에서 확인할 수 있듯이 커널은 운영체제가 동작하기 위한 가장 핵심적인 부분으로 하드웨어와 운영체제간의 통신을 위해 사용되며, 쉘은 사용자의 입력받은 명령은 운영체제에 전달하고 이..

실전 연습 - Docker Compose 애플리케이션 배포하기 위에서 docker-compose.yml 작성 방법에 대해 알아보았다. 이번 시간에는 실제 docker-compose.yml 파일을 작성하고 실행하여 서비스 동작 과정을 실습한다. XpressEngine 3와 mariadb 연동하기 위에 고급 실습을 통해서 XpressEngine 3의 Dockerfile를 만들었고 정상적으로 실행하기 위한 데이터베이스 연결과정을 작성해 보도록 하겠다. version: '3.4' services: xpressengine: image: jusk2/xpressengine ports: - 10001:80 restart: always database: image: mariadb environment: M..

Overview of Docker Compose Docker가 주는 독립된 애플리케이션 실행 환경 덕분에 많은 이득을 얻은 덕분에 개발환경도 빠르게 구축하기 위한 프로젝트인 fig 프로젝트가 나오게 되었다. 초창기 단순 Docker 명령을 한 번에 실행하기 위한 서드파티 도구였지만 인기를 얻자 Docker가 이를 흡수하여 Docker Compose 도구를 개발하게 되었다. 이를 활용하면 컨테이너를 실행하는데 필요한 옵션과 의존성 및 실행 순서를 한 번에 정의하여 작성하고 실행할 수 있다. Docker Compose install 기본적으로 윈도우, Mac 사용자의 경우 위에서 Docker를 설치하게 되면 같이 Docker Compose도 같이 설치되기 때문에 따로 설정이 필요가 없으나, 리눅스 사용자의 ..

실전 연습 - Dockerfile로 이미지 만들고 push 하기 위에서 학습한 내용을 가지고 Dockerfile을 작성하고 실습을 진행하도록 한다. 프로그래밍 언어별로 예제를 만들어 보았으니, 확인 후 테스트하길 바란다. Simple Web Application with bootstrap 간단한 방법으로 정적 웹페이지를 만들어보는 실습을 진행한다. $ mkdir docker-bootstrap && cd docker-bootstrap $ git clone https://github.com/ThemesGuide/bootstrap-themes.git $ mv bootstrap-themes pages$ vi DockerfileFROM nginx LABEL seongwon "seongwon@edu.hanbat.a..

Docker backup & restore Docker를 사용하다 보면 해당 이미지 혹은 컨테이너를 직접 백업하고 복구하는 상황이 생길 수 있다. 이때는 다음과 같은 명령을 통해서 시도할 수 있다. docker export 컨테이너를 백업하는 명령이다. $ docker ps -a CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES f70cd32010d3 hello-dockerfile "cat /hello-docker.t…" 29 minutes ago Exited (0) 29 minutes ago $ docker export f70cd32010d3 > ./hello-dockerfile.tar # 컨테이너 ID 혹은 이름으로 지정docker import 출력된 컨..

Dockerfile 작성하기 What is Dockerfile ? Dockerfile은 Docker image를 만들기 위한 설정 파일로, 아래에서 설명할 여러 명령어를 통해 작성하면 image를 만들어서 Docker Hub에 업로드할 수 있다. 따라서 이미지가 어떻게 만들어지고 어떠하나 특성을 가지고 있는지 알고 싶다면 Dockerfile을 해석할 수 있다는 뜻이 된다. FROM Docker image를 만드는데 필요한 가장 기본인 베이스 이미지를 지정하는 부분이다. FROM ubuntu:20.04 LABEL Dockerfile를 작성한 개발자의 정보를 작성한다. 기존 명령어인 MAINTAINER와 동일한 역할을 담당한다. 단, MAINTAINER는 공식적으로 deprecated 되었기 때문에 사용하지..

Docker 데이터 저장하기 리눅스 컨테이너 즉 docker는 프로세스 형태로 자원을 격리하여 사용하기 때문에 컨테이너가 삭제되면 기존에 저장되었던 데이터는 사라진다. 이를 예방하기 위해서 docker volume을 사용하거나 로컬 컴퓨터 파일에 마운트 하여 docker 내부에 생성되는 데이터를 저장하는 과정이 필요하다. 이번에는 postgres 데이터베이스를 통해서 실습을 진행하도록 하겠다. $ docker run -p 5432:5432 --name postgres -e POSTGRES_PASSWORD=1q2w3e4r -d postgres Unable to find image 'postgres:latest' locally latest: Pulling from library/postgres..

Docker Hub는 많은 개발자들이 Docker 이미지를 개발하여 공개하는 사이트라고 할 수 있다. git이 코드를 관리하기 위한 공간이라면 Docker Hub는 이미지를 관리하는 공간이라고 할 수 있다. 가입을 하지 않더라도 이미지를 다운로드하거나 사용하는데 지장이 없지만 회원가입을 통해서 자기가 만든 이미지를 공개할 수 있다. github와 같이 Public repositories는 무제한이지만 Private repositories를 사용하기 위해서는 무료 계정의 경우 1개, 그 이상을 사용하고 싶다면 별도의 가격을 지불해야 한다. 만약 기업 혹은 그룹에서 별도의 비용을 지불하지 않고 별도의 별도의 Private Docker Registry를 구축하고 싶다면 CNCF에서 인증한 HARBOR를 사용하..

Let's learn how to use Docker 이제 본격적으로 Docker 기본 명령어를 실습하고 사용할 수 있도록 한다. 참고로 리눅스 사용자의 경우 root 혹은 sudo 권한을 통해 명령어를 실행해야 한다. 해당 계정에 권한을 줘서 실행할 수 있지만 권장하지 않는다. docker search Docker에서 이미지를 검색하기 위해 사용한다. $ docker search ubuntu $ docker search centos $ docker search jenkins docker pull Docker를 사용하기 위해 이미지를 받기 위한 과정으로 별도의 버전을 기술하지 않는 경우 최신 버전으로 설정되며, ubuntu와 filebrowser 이미지를 다운로드한다. $ docker pull ubunt..