国产片侵犯亲女视频播放_亚洲精品二区_在线免费国产视频_欧美精品一区二区三区在线_少妇久久久_在线观看av不卡

腳本之家,腳本語言編程技術(shù)及教程分享平臺!
分類導(dǎo)航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|

香港云服务器
服務(wù)器之家 - 腳本之家 - Python - Docker部署Python爬蟲項目的方法步驟

Docker部署Python爬蟲項目的方法步驟

2020-04-12 12:37_invoker Python

這篇文章主要介紹了Docker部署Python爬蟲項目的方法步驟,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧

1) 首先安裝docker:

?
1
2
# 用 yum 安裝并啟動
yum install docker -y && systemctl start docker

2) 下載自定義鏡像需要用到的基礎(chǔ)鏡像:

?
1
2
# 這里以centos7為例
docker pull centos:centos7

3) 基礎(chǔ)鏡像已經(jīng)準備好了,接下來準備好需要部署的環(huán)境服務(wù),以及python項目:

?
1
2
3
4
5
6
7
8
### 創(chuàng)建 dockerfile 文件
mkdir dockerfile && cd dockerfile
### 下載 python(這里以3.7為例)
wget https://www.python.org/ftp/python/3.7.3/Python-3.7.3.tgz
### 將 python 項目復(fù)制到此目錄
cp ~/test.py .
### 以及 python 項目的依賴庫
cp ~/requirements.txt .

4) 需要自定義docker鏡像的大致內(nèi)容準備好了,接下來編寫dockerfile:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
vim Dockerfile
 
### 以centos:centos7來作為基礎(chǔ)鏡像
FROM centos:centos7
### 下載編譯需要用到的軟件
RUN yum install -y gcc gcc-c++ autoconf automake libtool make zlib* libffi-devel
### 將dockerfile目錄下的python-3.7.3.tgz復(fù)制到docker容器內(nèi)
COPY Python-3.7.3.tgz /usr/local/src
### 編譯安裝 python
WORKDIR /usr/local/src
RUN tar -xf Python-3.7.3.tgz
WORKDIR Python-3.7.3
RUN ./configure --prefix=/usr/local/python37 && make && make install
ENV PATH /usr/local/python37/bin:$PATH
### 創(chuàng)建工作目錄
RUN mkdir /spider
### 將python項目復(fù)制到 /spider工作目錄下
ADD test.py /spider
ADD requirements.txt /spider
### 設(shè)置 /spider 為工作目錄
WORKDIR /spider
### 下載 python 項目的依賴庫
RUN pip3 install -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com -r requirements.txt
### 在創(chuàng)建個爬取的數(shù)據(jù)存放的目錄,這個需要根據(jù)自己代碼里面設(shè)置的目錄來創(chuàng)建,例如:
VOLUME /data
### 最后一步,運行docker鏡像時運行自己的python項目
### 可以多個參數(shù): CMD ["python3","a","main.py"]
CMD ["python3","test.py"]

5) 接下來構(gòu)建鏡像:(就在此目錄下運行)

?
1
2
### docker build -t 鏡像名:版本號   鏡像名:版本號 均為自定義  別忘了末尾的點“.”
docker build -t pythonspider:v1 .

6) 運行鏡像:

?
1
2
3
4
5
6
7
8
9
### 通過 docker images命令就可以看到剛剛創(chuàng)建的鏡像
docker images
 
### 運行
docker run -d --name spider -v /data:/data pythonspider:v1
### -d為后臺運行,--name 后面設(shè)置容器名,-v 是目錄共享,主機目錄和docker容器內(nèi)目錄共享。創(chuàng)建dockerfile的時候,有這一句 VOLUME /data 就是作為共享目錄使用的,“:”前的目錄為主機目錄,后面的目錄為容器內(nèi)目錄。。。 最后一個參數(shù) pythonspider:v1 鏡像名
 
cd /data
### 到此目錄下你就會看到產(chǎn)生的數(shù)據(jù)

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持服務(wù)器之家。

原文鏈接:https://segmentfault.com/a/1190000021617187

延伸 · 閱讀

精彩推薦
1055
主站蜘蛛池模板: 欧美电影在线观看网站 | 日日骚一区| 在线一区观看 | 国产精品久久久久久久久软件 | 日韩精品一区二区三区中文字幕 | 亚洲国产精品久久久 | 亚洲人免费视频 | 亚洲成人一区二区 | 欧美日韩综合 | 久久天堂| 久久精品亚洲精品 | 国产婷婷色一区二区三区 | 国产一区二区三区视频在线观看 | 成人午夜精品一区二区三区 | 欧美日韩国产一区二区三区 | 亚洲免费中文字幕 | 一区二区三区无码高清视频 | 天堂va在线高清一区 | 日韩一区在线视频 | 久久精品国产亚洲 | 在线99热| 国产精品久久久久久久久久99 | 中文字幕一区二区三区日韩精品 | 亚洲生活片 | 精品在线播放 | 日韩高清中文字幕 | 在线成人av | 精品久久久久久久久久 | 日韩视频区| 午夜视频在线免费观看 | 亚洲精品一区二区三区在线 | 91国内精品久久 | 黄视频在线| 亚洲一区二区久久 | 一级视频网站 | 激情小视频 | 日韩三级网 | 国产二区视频 | 久久久久亚洲精品 | 日本三级中国三级99人妇网站 | 国产午夜精品视频 |