Skip to content

Latest commit

 

History

History
69 lines (43 loc) · 2.52 KB

RUN_IN_DOCKER_CN.md

File metadata and controls

69 lines (43 loc) · 2.52 KB

如何在Docker中运行PaddleServing

(简体中文|English)

Docker最大的好处之一就是可移植性,可在多种操作系统和主流的云计算平台部署。使用Paddle Serving Docker镜像可在Linux、Mac和Windows平台部署。

环境要求

Docker(GPU版本需要在GPU机器上安装nvidia-docker)

该文档以Python2为例展示如何在Docker中运行Paddle Serving,您也可以通过将python更换成python3来用Python3运行相关命令。

CPU版本

获取镜像

参考该文档获取镜像:

以CPU编译镜像为例

docker pull registry.baidubce.com/paddlepaddle/serving:latest-devel

创建容器并进入

docker run -p 9292:9292 --name test -dit registry.baidubce.com/paddlepaddle/serving:latest-devel
docker exec -it test bash

-p选项是为了将容器的9292端口映射到宿主机的9292端口。

安装PaddleServing

镜像里自带对应镜像tag版本的paddle_serving_serverpaddle_serving_clientpaddle_serving_app,如果用户不需要更改版本,可以直接使用,适用于没有外网服务的环境。

如果需要更换版本,请参照首页的指导,下载对应版本的pip包。

GPU 版本

docker pull registry.baidubce.com/paddlepaddle/serving:latest-cuda10.2-cudnn8-devel

创建容器并进入

nvidia-docker run -p 9292:9292 --name test -dit registry.baidubce.com/paddlepaddle/serving:latest-cuda10.2-cudnn8-devel
nvidia-docker exec -it test bash

或者

docker run --gpus all -p 9292:9292 --name test -dit registry.baidubce.com/paddlepaddle/serving:latest-cuda10.2-cudnn8-devel
docker exec -it test bash

-p选项是为了将容器的9292端口映射到宿主机的9292端口。

安装PaddleServing

镜像里自带对应镜像tag版本的paddle_serving_server_gpupaddle_serving_clientpaddle_serving_app,如果用户不需要更改版本,可以直接使用,适用于没有外网服务的环境。

如果需要更换版本,请参照首页的指导,下载对应版本的pip包。最新安装包合集

注意事项

  • 运行时镜像不能用于开发编译。如果想要从源码编译,请查看如何编译PaddleServing
  • 由于Cuda10和Cuda9的环境受限于GCC版本,无法同时运行CPU版本的paddle_serving_server,因此如果想要在GPU环境中同时使用CPU版本的paddle_serving_server,请选择Cuda10.1,Cuda10.2和Cuda11版本的镜像。