这篇文章初稿是写在迁移服务器上的 GitLab 发布后,因为各种原因(忙碌+拖延症),一直躺在草稿箱种,考虑到使用容器的同学越来越多,系统减肥、数据迁移扩容类数据需求还是有的,所以趁着周末重新整理了一下这篇文章。
一般来说我们需要将系统磁盘和应用数据盘进行分离,除了能够获得更好的性能,最关键的还是能够让数据更安全可靠:多数云服务数据盘支持备份快照、并且支持大容量 SSD 盘。
写在前面
挂载数据盘,可以参考 早些时候的一篇博客,这里不做过的赘述,为了方便描述,我这里使用一台新的主机作为演示,顺手 docker pull
下载了一些常用镜像。
先使用 df
了解下当前机器的分区状况。
# df -h
Filesystem Size Used Avail Use% Mounted on
udev 2.0G 0 2.0G 0% /dev
tmpfs 395M 5.3M 390M 2% /run
/dev/vda1 40G 8.3G 30G 22% /
tmpfs 2.0G 0 2.0G 0% /dev/shm
tmpfs 5.0M 0 5.0M 0% /run/lock
tmpfs 2.0G 0 2.0G 0% /sys/fs/cgroup
/dev/vdb1 20G 45M 19G 1% /data
tmpfs 395M 0 395M 0% /run/user/0
可以看到系统盘有 40G,挂载在 /
根目录,设备是 /dev/vda1
,而数据盘有20G,挂载在 /data
(个人习惯),设备为 /dev/vdb1
。
如果是老机器,有运行中的容器,可能会看到类似下面的输出。
overlay 196G 24G 163G 13% /var/lib/docker/overlay2/69e985e9fbc2bbaee2fbdcd81c514d64c4ed9862233bf4797a75ac10df80ed1e/merged
shm 64M 4.0K 64M 1% /var/lib/docker/containers/14777d5d02f2600ea134a8eff061dc4d2fd440b747c936da6024386f457a9c2c/mounts/shm
在迁移之前,我们需要了解默认的容器数据保存位置。
# docker info | grep "Docker Root Dir"
Docker Root Dir: /var/lib/docker
通过 docker info
我们可以看到默认的安装位置在 /var/lib/docker
,没错,默认是在系统盘,随着下载镜像越来越多,构建镜像、运行容器越来越多,系统盘可能会迅速被它蚕食而发生一些意料之外的事情: 系统无法启动、或者严重变慢,所以强烈建议对它进行迁移。
开始迁移
考虑到有一些同学并不是新机器,所以这里简单启动一个 Nginx 容器,来模拟“有数据”状态,帮助我们验证迁移结果。
docker run -d -p 8080:80 nginx
Nginx 启动之后,我们使用 curl 验证服务是否正常。
# curl 127.0.0.1:8080
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>
<style>
body {
width: 35em;
margin: 0 auto;
font-family: Tahoma, Verdana, Arial, sans-serif;
}
</style>
</head>
<body>
<h1>Welcome to nginx!</h1>
<p>If you see this page, the nginx web server is successfully installed and
working. Further configuration is required.</p>
<p>For online documentation and support please refer to
<a href="http://nginx.org/">nginx.org</a>.<br/>
Commercial support is available at
<a href="http://nginx.com/">nginx.com</a>.</p>
<p><em>Thank you for using nginx.</em></p>
</body>
</html>
接着使用 du 命令来看看,上小节使用 docker info
了解到的 docker 默认数据目录有多大。
# du -hs /var/lib/docker
4.3G /var/lib/docker
如果你确定你的镜像都已经妥善保存好、或者用的都是公开的镜像,容器实例中没有存储特别的东西,可以考虑先执行 docker system prune
给 docker 数据目录先减个肥,再进行迁移。
要进行数据迁移,需要先暂停 docker 服务。
service docker stop
创建迁移目录(用来放新数据的目录),我个人习惯将可备份的用户数据存放于应用分区 /data
下。
mkdir -p /data/docker/
然后使用万能的 rsync 对数据进行迁移。
rsync -avz /var/lib/docker/ /data/docker
在长长的屏幕日志滚动之后,你将会看到类似下面的输出:
docker/tmp/
docker/trust/
docker/volumes/
docker/volumes/metadata.db
sent 1,514,095,568 bytes received 3,096,373 bytes 4,998,984.98 bytes/sec
total size is 3,955,563,885 speedup is 2.61
数据就这样迁移完毕了,完整性由 rsync 保证。接下来要修改 docker 的配置,让 docker 从新的位置进行数据加载和存储。
编辑 /etc/docker/daemon.json
配置文件,如果没有这个文件,那么需要自己创建一个,根据上面的迁移目录,基础配置如下:
{
"data-root": "/data/docker"
}
如果你之前修改过 docker mirror (其他同理),那么你的配置需要修改为这个样子:
{
"data-root": "/data/docker",
"registry-mirrors": [
"http://YOUR_MIRROR_LINK"
]
}
将容器服务启动起来。
service docker start
使用文章开头的命令再次验证下 docker 数据存储设置,可以看到配置已经生效。
# docker info | grep "Docker Root Dir"
Docker Root Dir: /data/docker
还记得这小节开头提到的 Nginx 容器嘛,我们将它重新启动,来验证服务是否可用,先找到这个容器的“尸体”。
# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
fd9b79ae8574 nginx "nginx -g 'daemon of…" 44 minutes ago Exited (0) 31 minutes ago admiring_yalow
接着使用容器基础命令将实例启动。
docker start fd9b79ae8574
最后再使用 curl 验证一下结果:
# curl 127.0.0.1:8080
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>
<style>
body {
width: 35em;
margin: 0 auto;
font-family: Tahoma, Verdana, Arial, sans-serif;
}
</style>
</head>
<body>
<h1>Welcome to nginx!</h1>
<p>If you see this page, the nginx web server is successfully installed and
working. Further configuration is required.</p>
<p>For online documentation and support please refer to
<a href="http://nginx.org/">nginx.org</a>.<br/>
Commercial support is available at
<a href="http://nginx.com/">nginx.com</a>.</p>
<p><em>Thank you for using nginx.</em></p>
</body>
</html>
至此,迁移就大功告成啦。
对了,你还记得我们最开始看到的 /var/lib/docker
目录嘛,它现在已经完全无用了,可以使用 rm -rf /var/lib/docker
将它清理掉啦。
最后
我一直以为这篇文章之前写完发布了,然鹅前几天重新配置新服务器的时候,却发现这篇文章一直安静的待在编辑器草稿箱里,安静的躺了快一年…
看来还是要多给自己下小任务,每周清理下之前的笔记和博客草稿呀。
–EOF