Docker for Window で稼働しているローカルLinuxコンテナをAWSへ移動させてみた

クライアント端末(Windows 10)必要なソフトをインストールする

Microsoft Windows で AWS Command Line Interface をインストールする
windows10へのdockerインストール
 記事を参考に「Kitematic(カイトマチック)」もインストールした。

Kitematic(カイトマチック)のイメージ



hello-world-nginxのコンテナをローカルで実行する

PS C:\Users\shimizu> docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username (xxxx): xxxx
Password:
Login Succeeded

PS C:\Users\shimizu> docker search hello-world
NAME                                       DESCRIPTION                                     STARS               OFFICIAL            AUTOMATED
hello-world                                Hello World! (an example of minimal Dockeriz…   489                 [OK]
kitematic/hello-world-nginx                A light-weight nginx container that demonstr…   97
...

PS C:\Users\shimizu> docker pull kitematic/hello-world-nginx
Using default tag: latest
latest: Pulling from kitematic/hello-world-nginx
77c6c00e8b61: Pull complete
9b55a9cb10b3: Pull complete
e6cdd97ba74d: Pull complete
7fecf1e9de6b: Pull complete
6b75f22d7bea: Pull complete
e8e00fb8479f: Pull complete
69fad424364c: Pull complete
b3ba6e76b671: Pull complete
a956773dd508: Pull complete
26d2b0603932: Pull complete
3cdbb221209e: Pull complete
a3ed95caeb02: Pull complete
Digest: sha256:ec0ca6dcb034916784c988b4f2432716e2e92b995ac606e080c7a54b52b87066
Status: Downloaded newer image for kitematic/hello-world-nginx:latest

PS C:\Users\shimizu> docker images
REPOSITORY                    TAG                 IMAGE ID            CREATED             SIZE
kitematic/hello-world-nginx   latest              03b4557ad7b9        2 years ago         7.91MB

PS C:\Users\shimizu> docker run --name mydocker -d -p 80:80 kitematic/hello-world-nginx
cfbb354fff9823393377d4e2dfe70cb7962d9732ae8cba089f2da07f934c8724

PS C:\Users\shimizu> docker ps -a
CONTAINER ID        IMAGE                         COMMAND             CREATED             STATUS              PORTS                NAMES
cfbb354fff98        kitematic/hello-world-nginx   "sh /start.sh"      34 seconds ago      Up 33 seconds       0.0.0.0:80->80/tcp   mydocker

PS C:\WINDOWS\system32> docker stop mydocker
mydocker

localhostにアクセスするとコンテナが動作していることがわかる。

AWSユーザを作成し、AWS CLIに認識させる

特定IPアドレスにadministrator権限を与えるIAMポリシーを作成し、ユーザに紐づける。
そのユーザでアクセスキーを作成し、AWS CLIに設定する。

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Sid": "AdministratorAccess",
      "Effect": "Allow",
      "Action": "*",
      "Resource": "*"
    },
    {
      "Sid": "SourceIPRestriction",
      "Effect": "Deny",
      "Action": "*",
      "Resource": "*",
      "Condition": {
        "NotIpAddress": {"aws:SourceIp": "x.x.x.x"}
      }
    }
  ]
}
PS C:\Users\shimizu> aws configure
AWS Access Key ID [None]: AKIAxxxxxxxx
AWS Secret Access Key [None]: 9Qexxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
Default region name [None]: ap-northeast-1
Default output format [None]: json

Amazon Elastic Container Service (ECS)

ECSはEC2が必要であるが、Fargateを利用するとEC2の管理が不要となる。
Fargateは2018年4月現在東京リージョンにないためECSを利用する。

Elastic Container Registryにローカルのimageを登録する

ECRを作成する。

指示に従ってローカルのimageをECRへ登録する。

PS C:\WINDOWS\system32> aws ecr get-login --no-include-email --region ap-northeast-1
docker login -u AWS -p e...z https://377343199566.dkr.ecr.ap-northeast-1.amazonaws.com
PS C:\WINDOWS\system32> docker login -u AWS -p e...z https://377343199566.dkr.ecr.ap-northeast-1.amazonaws.com
WARNING! Using --password via the CLI is insecure. Use --password-stdin.
Login Succeeded

PS C:\WINDOWS\system32> docker images
REPOSITORY                    TAG                 IMAGE ID            CREATED             SIZE
kitematic/hello-world-nginx   latest              03b4557ad7b9        2 years ago         7.91MB
PS C:\WINDOWS\system32> docker tag kitematic/hello-world-nginx 377343199566.dkr.ecr.ap-northeast-1.amazonaws.com/hello-world-nginx
PS C:\WINDOWS\system32> docker images
REPOSITORY                                                            TAG                 IMAGE ID            CREATED             SIZE
377343199566.dkr.ecr.ap-northeast-1.amazonaws.com/hello-world-nginx   latest              03b4557ad7b9        2 years ago         7.91MB
kitematic/hello-world-nginx                                           latest              03b4557ad7b9        2 years ago         7.91MB

PS C:\WINDOWS\system32> docker push 377343199566.dkr.ecr.ap-northeast-1.amazonaws.com/hello-world-nginx:latest
The push refers to repository [377343199566.dkr.ecr.ap-northeast-1.amazonaws.com/hello-world-nginx]
5f70bf18a086: Pushed
b51acdd3ef48: Pushed
3f47ff454588: Pushed
f19fb69b288a: Pushed
b11278aeb507: Pushed
fb85701f3991: Pushed
15235e629864: Pushed
86882fc1175f: Pushed
9e8c93c7ea7e: Pushed
e66f0ebc2eef: Pushed
6a15a6c08ef6: Pushed
461f75075df2: Pushed
latest: digest: sha256:583f0c9ca89415140fa80f70f8079f5138180a6dda2c3ff3920353b459e061a3 size: 3226

クラスターを作成する






タスク定義とクラスターへのタスク登録





EC2インスタンスにアクセスするとコンテナが動作していることがわかる。

参考URL

【初心者向け】Dockerを速習しよう
初心者か゛伝えるDocker超入門
AWS管理コンソールへのアクセスをIPアドレスで制限したい

Error response from daemon: Get https://registry-1.docker.io/v2/library/hello-world/manifests/latest: unauthorized: incorrect username or password.

以下のエラー時はdocker loginすべし。

PS C:\Users\shimizu> docker run hello-world
Unable to find image 'hello-world:latest' locally
C:\Program Files\Docker\Docker\Resources\bin\docker.exe: Error response from daemon: Get https://registry-1.docker.io/v2/library/hello-world/manifests/latest: unauthorized: incorrect username or password.
See 'C:\Program Files\Docker\Docker\Resources\bin\docker.exe run --help'.

PS C:\Users\shimizu> docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username (xxxx): xxxx
Password:
Login Succeeded

PS C:\Users\shimizu> docker run hello-world
... imageのダウンロードが開始される ...

docker Client.Timeout exceeded while awaiting headers

Windows10 の docker でエラーとなったため対応した。

PS C:\Users\shimizu> docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username (xxxxxxxx):
Password:
Error response from daemon: Get https://registry-1.docker.io/v2/: net/http: request canceled while waiting for connection (Client.Timeout exceeded while awaiting headers)

Docker Hubにloginしようとしたら、net/http: request canceled while waiting for connectionを参考に以下画像のように
dockerのDNSサーバに 8.8.8.8 を指定したところ、docker loginが成功するようになった。

Developers Summit 2016に参加した – そのに –

クラウド・ネイティブ時代の2016年だから始めるDocker基礎講座 – 前佛 雅人さん

http://docs.docker.jp/
を作成している方

dockerとは

・アプリケーションを動かすための仕組みを提供
・2016年3月で3歳になる
・それぞれのコンテナは隔離されている(例えばinitは1から開始される)
・それぞれのコンテナについてIPアドレスを持てる
 →ホストとは別のIPアドレスを設定可能、メモリもそれぞれのコンテナで上限を設定可能

ツール類

・Docker Machine
 Docker Engine動作環境や仮想マシン環境・Swarmクラスタを自動的に構築、一元管理する

・Docker compose
 複数のコンテナ管理に有益(dockerコマンドと似ている)、scaleコマンドでコンテナの増減自由自在
 Composeファイルに設定を記載する
・docker SWARM(スウォーム)
 物理サーバや仮想サーバの数に関係なくdockerを操作することができる(まだ開発途上とのこと)
 →少し癖がある。ディスカバリ・バックエンド、ストラテジ、フィルタという概念がある。

Docker

2015-07-02_214621

概要

http://dotinstall.com/lessons/basic_docker
のまとめ。このメモ見るなら本家見たほうがよいです

Dockerとは

・軽量な仮想化環境を作るツール
・Ubuntuにて開発されている

root@ubuntu:/home/shimizu# wget -qO- https://get.docker.com/ | sh
...
The following NEW packages will be installed:
  crda iw libnl-3-200 libnl-genl-3-200 linux-image-3.13.0-55-generic
  linux-image-extra-3.13.0-55-generic linux-image-extra-3.16.0-40-generic
  linux-image-extra-virtual linux-image-generic wireless-regdb
0 upgraded, 10 newly installed, 0 to remove and 32 not upgraded.
Need to get 89.5 MB of archives.
...

root@ubuntu:/home/shimizu# docker -v
Docker version 1.7.0, build 0baf609

イメージ

2015-07-02_223317
Docker Index:Imageの共有サイト
Imageをダウンロード(docker pull)して、Containerとして実行する(docker run)
Containerを別のDockerサーバに移動させるには、ContainerをImageに変換(docker commit)して
Docker Indexに登録する(docker push)

操作方法

### Imageのダウンロード ###
root@ubuntu:/home/shimizu# docker search centos
NAME                          DESCRIPTION                                     STARS     OFFICIAL   AUTOMATED
centos                        The official build of CentOS.                   1092      [OK]
tutum/centos                  Centos image with SSH access. For the root...   13                   [OK]
blalor/centos                 Bare-bones base CentOS 6.5 image                9                    [OK]
torusware/speedus-centos      Always updated official CentOS docker imag...   6                    [OK]
million12/centos-supervisor   Base CentOS-7 with supervisord launcher, h...   5                    [OK]
jdeathe/centos-ssh            CentOS-6 6.6 x86_64 / EPEL Repo. / OpenSSH...   3                    [OK]
layerworx/centos              A general CentOS 6 image with the EPEL6 an...   2                    [OK]
jdeathe/centos-ssh-mysql      CentOS-6 6.6 x86_64 / MySQL.                    2                    [OK]
pdericson/centos              Docker image for CentOS                         0                    [OK]
nathonfowlie/centos-jre       Latest CentOS image with the JRE pre-insta...   0                    [OK]

root@ubuntu:/home/shimizu# docker pull centos
latest: Pulling from centos
f1b10cd84249: Pull complete
c852f6d61e65: Pull complete
7322fbe74aa5: Already exists
centos:latest: The image you are pulling has been verified. Important: image verification is a tech preview feature and should not be relied on to provide security.
Digest: sha256:a4627c43bafc86705af2e8a5ea1f0ed34fbf27b6e7a392e5ee45dbd4736627cc
Status: Downloaded newer image for centos:latest

root@ubuntu:/home/shimizu# docker images
REPOSITORY          TAG                 IMAGE ID            CREATED             VIRTUAL SIZE
centos              latest              7322fbe74aa5        13 days ago         172.2 MB

# 詳細を表示する。IDについては一意であれば何文字でもOK
root@ubuntu:/home/shimizu# docker inspect 73 
...

### Containerを作成する ###
root@ubuntu:/home/shimizu# docker run 73 echo "hello world"
hello world

# 実行が完了したプロセスを表示する
root@ubuntu:/home/shimizu# docker ps -a
CONTAINER ID        IMAGE               COMMAND                CREATED              STATUS                          PORTS               NAMES
6d654c9581e3        73                  "echo 'hello world'"   About a minute ago   Exited (0) About a minute ago                       sharp_kirch

root@ubuntu:/home/shimizu# docker run -d centos free -s 3
29c3e9f265781ab94817e1c8ca2f54bf26d243ad702db0acd1f2631c4332a283

# 実行中のプロセスを表示する
root@ubuntu:/home/shimizu# docker ps
CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS              PORTS               NAMES
29c3e9f26578        centos              "free -s 3"         2 seconds ago       Up 1 seconds                            hungry_jones

root@ubuntu:/home/shimizu# docker logs 29c3e9f26578
              total        used        free      shared  buff/cache   available
Mem:         686628       84136      107884         452      494608      474308
Swap:             0           0           0

              total        used        free      shared  buff/cache   available
Mem:         686628       81572      110440         460      494616      476900
Swap:             0           0           0

              total        used        free      shared  buff/cache   available
Mem:         686628       81572      110440         460      494616      476900
Swap:             0           0           0

              total        used        free      shared  buff/cache   available
Mem:         686628       81560      110440         460      494628      476900
Swap:             0           0           0

              total        used        free      shared  buff/cache   available
Mem:         686628       81560      110440         460      494628      476912
Swap:             0           0           0

root@ubuntu:/home/shimizu# docker kill 29c3e9f26578
29c3e9f26578

root@ubuntu:/home/shimizu# docker ps
CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS              PORTS               NAMES

### ContainerからImageを作成して、正しく動作するか確認する ###
root@ubuntu:/home/shimizu# docker run -i -t centos /bin/bash
[root@ff4b98c69eb6 /]# touch hello.txt
[root@ff4b98c69eb6 /]# ls
bin  dev  etc  hello.txt  home  lib  lib64  lost+found  media  mnt  opt  proc  root  run  sbin  srv  sys  tmp  usr  var
[root@ff4b98c69eb6 /]# exit

root@ubuntu:/home/shimizu# docker ps -a
CONTAINER ID        IMAGE               COMMAND                CREATED             STATUS                       PORTS               NAMES
ff4b98c69eb6        centos              "/bin/bash"            25 seconds ago      Exited (0) 9 seconds ago                         hopeful_pike                    

root@ubuntu:/home/shimizu# docker commit ff4 test/hello
8fac9b012f2d1983a9bd10ad5f1e48ab270b9603963dff46dd22be777ccdb04f

root@ubuntu:/home/shimizu# docker images
REPOSITORY          TAG                 IMAGE ID            CREATED             VIRTUAL SIZE
test/hello          latest              8fac9b012f2d        9 seconds ago       172.2 MB
centos              latest              7322fbe74aa5        13 days ago         172.2 MB

root@ubuntu:/home/shimizu# docker run -i -t test/hello /bin/bash
[root@33f4291501ed /]# ls
bin  dev  etc  hello.txt  home  lib  lib64  lost+found  media  mnt  opt  proc  root  run  sbin  srv  sys  tmp  usr  var