Docker容器的Tengine实践

作为目前最火的应用，docker 确实存在着其独到之处，无论是程序猿还是运维都应该听说过 docker 的大名，docker 已经走过了许多的坑，目前最新版本是 v1.11.0 版本，应该说是完全能承载开发使用和运维监控，这款工具能帮助我们高效的打包、发布和运行承载着应用程序的容器系统。而且收集日志、帮助 app 的快速开发都有很大作用。

容器和虚拟机，经常是被拿出来对比的两款产品，实际上两者有着根本的差别，虚拟机是完全模拟了一台真实计算机，在上面运行的系统可能或者不可能知道自己运行在虚拟化环境下，并且虚拟机承载了将用户指令转换为特权指令的功能，所以虚拟机非常复杂，但是很完备，而 docker 则完全不同。docker 使用主机自身的 linux 内核，然后从镜像中产生磁盘目录和软件，所有的进程都运行在主机上，如果有兴趣的话完全可以 ps aux 查询一下，就能发现在 docker 中运行的进程，只不过 docker 对其做了如同 chroot 差不多概念的封装。

docker 真正用法

在 docker 发展的早期，由于 busybox 等轻量化镜像不完备，所以各大发行版的缩减瘦身镜像得到了更多的使用，特别是由于 docker 本身是在 ubuntu 环境下开发的，所以 ubuntu 和 debian 在很多镜像中作为基镜像，以此作为基础产生目标镜像。但是随着在实践中的使用，其弊端也暴露出来了，就是太过于重量化，比如 systemd 的日志功能和 docker 本身的日志功能被重复使用，镜像很难缩小到 300m 以内。而且 docker 的推荐使用方式就是单进程模型，而并非是多个进程如同一个完备的操作系统一般。所以就产生了 alpine 等轻量级基镜像，alpine 是什么则可以自行百度，这个镜像是 docker 官方推荐的镜像，未来官方镜像将会迁移到 alpine 作为基础的镜像上，所以，我们应当早日熟悉此镜像。

构建 dockerfile

本文讲述的是 docker 容器的 nginx 实践，不过官方实际上已经有了关于 nginx 的 alpine 镜像。而在实际使用过程中，笔者更多的是使用 tengine，所以根据官方 dockerfile 的参考，笔者自行编写了 tengine 镜像的 dockerfile，希望能抛砖引玉，各位能够批评指正。

from alpine:3.3
maintainer chasontang <[e-mail]>

env tengine_version 2.1.2
env config "\
    --prefix=/etc/nginx \
    --sbin-path=/usr/sbin/nginx \
    --conf-path=/etc/nginx/nginx.conf \
    --error-log-path=/var/log/nginx/error.log \
    --http-log-path=/var/log/nginx/access.log \
    --pid-path=/var/run/nginx.pid \
    --lock-path=/var/run/nginx.lock \
    --http-client-body-temp-path=/var/cache/nginx/client_temp \
    --http-proxy-temp-path=/var/cache/nginx/proxy_temp \
    --http-fastcgi-temp-path=/var/cache/nginx/fastcgi_temp \
    --http-uwsgi-temp-path=/var/cache/nginx/uwsgi_temp \
    --http-scgi-temp-path=/var/cache/nginx/scgi_temp \
    --user=nginx \
    --group=nginx \
    --with-http_ssl_module \
    --with-http_realip_module \
    --with-http_addition_module \
    --with-http_sub_module \
    --with-http_dav_module \
    --with-http_flv_module \
    --with-http_mp4_module \
    --with-http_gunzip_module \
    --with-http_gzip_static_module \
    --with-http_random_index_module \
    --with-http_secure_link_module \
    --with-http_auth_request_module \
    --with-mail \
    --with-mail_ssl_module \
    --with-file-aio \
    --with-http_spdy_module \
    --with-ipv6 \
    --with-jemalloc \
    "

add ngx_user.patch /
add repositories /etc/apk/repositories

run \
  addgroup -s nginx \
  && adduser -d -s -h /var/cache/nginx -s /sbin/nologin -g nginx nginx \
  && apk add --no-cache --virtual .build-deps \
    gcc \
    libc-dev \
    make \
    openssl-dev \
    pcre-dev \
    zlib-dev \
    linux-headers \
    curl \
    jemalloc-dev \
  && curl "http://tengine.taobao.org/download/tengine-$tengine_version.tar.gz" -o tengine.tar.gz \
  && mkdir -p /usr/src \
  && tar -zxc /usr/src -f tengine.tar.gz \
  && rm tengine.tar.gz \
  && cd /usr/src/tengine-$tengine_version/src/os/unix/ \
  && mv /ngx_user.patch ./ngx_user.patch \
  && patch ngx_user.c ngx_user.patch \
  && rm ngx_user.patch \
  && cd ../../../ \
#  && cd /usr/src/tengine-$tengine_version \
  && ./configure $config --with-debug \
  && make \
  && mv objs/nginx objs/nginx-debug \
  && ./configure $config \
  && make \
  && make install \
  && rm -rf /etc/nginx/html/ \
  && mkdir /etc/nginx/conf.d/ \
  && mkdir -p /usr/share/nginx/html/ \
  && install -m644 html/index.html /usr/share/nginx/html/ \
  && install -m644 html/50x.html /usr/share/nginx/html/ \
  && install -m755 objs/nginx-debug /usr/sbin/nginx-debug \
  && strip /usr/sbin/nginx* \
  && rundeps="$( \
    scanelf --needed --nobanner /usr/sbin/nginx \
      | awk '{ gsub(/,/, "\nso:", $2); print "so:" $2 }' \
      | sort -u \
      | xargs -r apk info --installed \
      | sort -u \
  )" \
  && apk add --virtual .nginx-rundeps $rundeps \
  && apk del .build-deps \
  && rm -rf /usr/src/nginx-$nginx_version \
  && apk add --no-cache gettext \
  \
  # forward request and error logs to docker log collector
  && ln -sf /dev/stdout /var/log/nginx/access.log \
  && ln -sf /dev/stderr /var/log/nginx/error.log

copy nginx.conf /etc/nginx/nginx.conf
copy nginx.vh.default.conf /etc/nginx/conf.d/default.conf

expose 80 443

cmd ["nginx", "-g", "daemon off;"]

我们知道，docker 可以根据 dockerfile 构建镜像，上面就是笔者写的 dockerfile。首先，使用 from 指令指定此镜像的基镜像为 alpine:3.3，第二行为 dockerfile 维护者声明，然后使用两个 env 指令声明两个环境变量，一个指定 tengine 需要获取的版本号，一个则是编译安装选项。这里暂时不讲解，然后将一个补丁文件和 alpine 镜像源配置文件复制到容器内，实际上是因为 tengine v2.1.2 存在着一个遗留的 glibc bug，会导致编译时出错，上游 nginx 的最新代码已经修复，而 tengine 的开发分支上面也已经修复了这个问题，笔者前不久提 issue 将此补丁修正了 tengine v2.1.3 分支的代码，但是很可惜，v2.1.3 版本尚未有正式发布，所以只能先使用补丁手动修复此问题。至于镜像源，则是因为国内存在着网络问题，导致 apk 包管理命令无法成功下载各个依赖项，所以将其指定为了国内源，如果正式使用则可以移除这两个文件。

然后就是使用 run 命令执行代码，这里大家可以看到笔者使用 && 和 \ 将所有的指令都压缩为了一行，这里是有两个原因：

run 指令不会保存上一条指令的工作路径，每条 run 指令都只会将工作目录指定为 / 目录
一条 dockerfile 中的指令就会产生一次镜像的提交，换言之，减少 dockerfile 中的指令就可以提高镜像的复用水平
然后就是使用 apk 包管理命令下载安装包括编译器等依赖项，并且将这些依赖项标记为 .build-deps 组，便于后面将其卸载清理。然后就是非常常规的思路，./configure && make && make install，编译选项都是非常中规中矩的，基本熟悉 nginx 编译的朋友都能看懂。但是上面可以注意到，nginx 被编译了两次，一次开启了 --with-debug 参数，一次没有，这是因为在很多情况下，我们需要 nginx 提供 debug 级别的监控日志，特别是在开发环境下，所以就编译了两次，便于使用。然后后面使用字符串分析处理将 tengine 的运行时依赖项提取出来，标记为 .nginx-rundeps 然后卸载 .build-deps，最后则是两个符号链接将 accesslog 和 errorlog 链接到标准输入输出，这样我们就能使用 docker logs 命令方便的查看日志了。最后则是复制自定义的 nginx 配置文件，然后使用 nginx -g daemon off; 让 nginx 以前台进程方式运行。

总结

到这里已经讲完了 docker 在生产开发中的正确使用方法，docker 也确实是一样不可多得的好工具，祝愿大家早日使用 docker 提升自己的生产力。