标签分类
技术文章
当前位置:主页 > 计算机编程 > python > python fabric实现远程部署

python fabric实现远程部署实例详解

  • 发布时间:
  • 作者:码农之家原创
  • 点击:101

python fabric实现远程部署

这篇文章主要知识点是关于python,fabric,远程部署,python fabric实现远程部署,python三大神器之fabric使用教程 的内容,如果大家想对相关知识点有系统深入的学习,可以参阅以下电子书

Python机器学习经典实例
  • 类型:Python大小:27.3M格式:PDF出版:人民邮电出版社作者:普拉提克·乔西
立即下载

更多相关的学习资源可以参阅 程序设计电子书Python电子书、等栏目。

python fabric实现远程部署

需求描述

在多人协同开发项目的过程中,几乎每天我们都要提交代码到git服务器,然后部署到测试服务器,每天都在敲那重复的几行命令,实在是无趣。怎么办?运维自动化!接下来就说说fabric这玩意儿,替我们完成一些重复繁杂的工作,相信你会跟我一样喜欢上它的!

本文项目背景

我们这次做的项目是用的django框架,每天我们提交代码到git服务器后,都要手动上传代码到测试服务器,然后执行一系列django框架的命令。每天都要浪费10多分钟的时间,做着重复的劳动,这些工作实在不是一个程序员该干的。。。

解决方案

借助Python的fabric模块可以将自动化部署或者多机操作的命令固化到一个脚本里,然后通过此脚本去执行。

安装fabric

注意:本机和目标服务器都要安装一下
sudo easy_install fabric

或者用pip安装:

pip install fabric

编写脚本

local 是在本机执行;run 是在远程机执行

from fabric.api import hosts, run, env, local, cd, get, lcd
from fabric.tasks import execute

env.hosts = ["fab@192.168.1.101:22", "root@192.168.1.101:22"]
env.passwords = {"fab@192.168.1.101:22": "fab", "root@192.168.1.101:22": "tofabor"}


@hosts("ktv@192.168.1.101:22")
def update():
  """更新测试服务器代码"""
  with cd("/opt/project/project"): # 进入测试服务器的项目目录
    run("git pull origin master") # 从git服务器的master分支下拉最新代码
    run("/usr/local/bin/python2.7 /opt/project/project/manage.py makemigrations") # 这是django框架检测数据库变动的命令
    run("/usr/local/bin/python2.7 /opt/project/project/manage.py migrate") # 这是django框架执行数据库变更的命令

@hosts("ktv@192.168.1.101:22")
def restart():
  """重启服务"""
  execute('stop')
  execute('start')


@hosts("root@192.168.1.101:22")
def start():
  """开始服务"""
  with cd("/opt/project/project"):
    run("supervisorctl start dev")

@hosts("ktv@192.168.1.101:22")
def stop():
  """停止服务"""
  pids = run("ps -ef |grep '9001'| awk '{print $2}'")
  pid_list = pids.split('\r\n')
  for i in pid_list[:-2]:
    run('kill -9 %s' % i) # 杀掉运行服务进程

如上脚本保存为fabfile.py (也可保存为其他名称,只是运行命令不一样,下面会详述)

执行脚本

如果你的脚本名称为fabfile.py,那么可以在终端进入你fabfile.py的目录,敲入如下命令回车:

fab update

紧接着,你会看到终端提示你输入git账号及密码,待你输入成功后,将自动下拉git服务器的代码到测试服务器。
之后运行如下命令,重启服务:

fab restart

如果你的文件名为其他名称,比如ab.py, 那么执行 fab update /restart是错误的,怎么云运行呢?

fab -f ab update
fab -f ab restart

注:fabric相当强大,此文只是列举一小功能。如需深入学习,请参见官方文档http://docs.fabfile.org/en/1.6/

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持码农之家。

python三大神器之fabric使用教程

fabric 是一个python包 是一个基于ssh的部署工具包

通常用来对网站 微服务等等的批量部署 例如 我有5台线上服务器 可以通过一台对着5台分发,实现自动部署的目的。

简单介绍下 fabric的常用命令

常用命令 

lcd(dir): 进入本机某目录
local(cmd): 本机上执行命令
cd(dir): 进入服务器某目录
run(cmd):服务器上执行命令

Fabric

Fabric是一个python的远程执行shell的库,同时它也是一个命令行工具。它提供了丰富的同 SSH 交互的接口,可以用来在本地或远程机器上自动化、流水化地执行 Shell 命令。

安装Fabric

Fabric的官网是 www.fabfile.org ,源码托管在 Github 上。你可以clone源码到本地,然后通过下面的命令来安装。但是在源码安装前,你必须先将Fabric的依赖包 Paramiko 装上。

python setup.py develop

同时也可以使用pip安装,因为fabric是python的一个第三方库,只需一条命令即可:

 pip install fabric

python3 安装时使用的是fabric3 :( 安装fabric3之前,需要先卸载fabric.)

  1. # fabric3 支持 python3
  2. pip uninstall fabric
  3. pip3 install fabric3

fabric 不只是一个Python 模块,fabric 还是一个命令行工具,可以使用fab -h查看帮助信息

E:\my_data\hk-project>fab -V
Fabric3 1.14.post1
Paramiko 2.4.2
E:\my_data\hk-project>fab -h

入门使用

fabric的使用方式是通过编写一个python文件,该文件中包含多个函数,然后使用fab命令调用这些函数,做相应的任务。这些函数在fabric中称为task。

# filename:abc.py​
 from fabric.api import *​
 def task1():
   print("hello")
 def hello():
   print("hello world")

写好这个python文件后,在当前目录的路径下使用fab工具执行文件中的函数

[root@localhost python文件所在的目录]# fab -f abc.py hello
 hello world
 ​# -f 指定fabfile文件,默认为fabfile.py,若文件名是当前目录下的fabfile.py则无需指定

任务参数

此时你可能会想,如果这个函数有参数怎么办呢?应该如何传递参数给函数呢?Fabric 支持 Shell 兼容的参数用法: <任务名>:<参数>, <关键字参数名>=<参数值>,... 用起来就是这样。

 def hello(name="world"):
   print("hello {}".format(name))

我们可以这样去指定参数

$ fab hello:name=Jeff  # 或者 fab hello:Jeff
 hello Jeff
 ​Done.

小试牛刀

现在我们假设需要写一个fabfile.py,能够在每次web项目代码更新后使用git提交并远程服务器拉去最新代码并运行,需求描述清楚了,开干吧!

# fabfile.py
 # 这里建议将该文件放入项目文件的根目录中,方便git提交
 from fabric.api import local
 def test():
   local('python manage.py test myapp')
   # 测试是否能正常运行
 def commit():
   local('git add -p && git commit -m "for test"')
 def push():
   local('git push')
 def prepare_deploy():
   test()
   commit()
   push()

这个 prepare_deploy 任务可以单独调用,也可以调用更细粒度的子任务。

故障

Fabric 会检查被调用程序的返回值,如果这些程序没有干净地退出,Fabric 会终止操作。我们什么都不用做,Fabric 检测到了错误并终止,不会继续执行 commit 任务。

我们也可以对故障进行一定的处理和判断

from fabric.api import local, settings, abort
 from fabric.contrib.console import confir
 def test():
   with settings(warn_only=True):
     result = local('./manage.py test my_app', capture=True) 
     # result.return_code返回码(0/1)和result.failed
   if result.failed and not confirm("Tests failed. Continue anyway?"): # confirm判断用户输入
     abort("Aborting at user request.") # 指定错误退出信息
 # 一个名为 warn_only 的设置(或着说 环境变量 ,通常缩写为 env var )可以把退出换为警告,以提供更灵活的错误处理。如果设置为False,则一条命令运行失败会就会退出,不再执行后面的命令。

建立连接

终于到了连接了,这个工具主要作用就是在远程执行命令呀,学会了这个,我们就可以在本地执行远程服务器的命令了。

from fabric.api import *
 env.hosts = ['root@192.168.10.11:22']​
 def deploy():
   run('ls') # run()用于执行远程命令,local()执行本地命令
 # 执行后会提示你输入密码,输入密码即可

至此,入门结束,后续还有更多api的讲解,敬请关注!

参考链接:

fabric官方中文文档: https://fabric-chs.readthedocs.io/zh_CN/chs/tutorial.html

总结

以上所述是小编给大家介绍的python三大神器之fabric使用教程,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对码农之家网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!

以上就是本次给大家分享的全部知识点内容总结,大家还可以在下方相关文章里找到vue项目中使用md5加密以及、 儿童python编程入门书籍推、 解决axios.interceptors.respon、 等python文章进一步学习,感谢大家的阅读和支持。

上一篇:django send_mail功能的实例用法

下一篇:python中urlparse模块用法实例介绍

展开 +

收起 -

学习笔记
网友NO.591390

Python自动化运维和部署项目工具Fabric使用实例

Fabric 是使用 Python 开发的一个自动化运维和部署项目的一个好工具,可以通过 SSH 的方式与远程服务器进行自动化交互,例如将本地文件传到服务器,在服务器上执行shell 命令。 下面给出一个自动化部署 Django 项目的例子 # -*- coding: utf-8 -*-# 文件名要保存为 fabfile.pyfrom __future__ import unicode_literalsfrom fabric.api import *# 登录用户和主机名:env.user = 'root'# 如果没有设置,在需要登录的时候,fabric 会提示输入env.password = 'youpassword'# 如果有多个主机,fabric会自动依次部署env.hosts = ['www.example.com']TAR_FILE_NAME = 'deploy.tar.gz'def pack(): """ 定义一个pack任务, 打一个tar包 :return: """ tar_files = ['*.py', 'static/*', 'templates/*', 'vue_app/', '*/*.py', 'requirements.txt'] exclude_files = ['fabfile.py', 'deploy/*', '*.tar.gz', '.DS_Store', '*/.DS_Store', '*/.*.py', '__pycache__/*'] exclude_files = ['--exclude=\'%s\'' % t for t in exclude_files] local('rm -f %s' % TAR_FILE_NAME) local('tar -czvf %s %s %s' % (TAR_FILE_NAME, ' '.join(exclude_files), ' '.join(tar_files))) print('在当前目录创建一个打包文件: %s' % TAR_FILE_NAME)def deploy(): """ 定义一个部署任务 :return: """ # 先进行打包 pack() # 远程服务器的临时文件 remote_tmp_tar = '/tmp/%s' % TAR_FILE_NAME run('rm -f %s' % remote_tmp_tar) # 上传tar文件至远程服务器, local_path, remote_path put(TAR_FILE_NAME, remote_tmp_tar) # 解压 remot……

网友NO.773269

python三大神器之fabric使用教程

fabric 是一个python包 是一个基于ssh的部署工具包 通常用来对网站 微服务等等的批量部署 例如 我有5台线上服务器 可以通过一台对着5台分发,实现自动部署的目的。 简单介绍下 fabric的常用命令 常用命令 lcd(dir): 进入本机某目录local(cmd): 本机上执行命令cd(dir): 进入服务器某目录run(cmd):服务器上执行命令 Fabric Fabric是一个python的远程执行shell的库,同时它也是一个命令行工具。它提供了丰富的同 SSH 交互的接口,可以用来在本地或远程机器上自动化、流水化地执行 Shell 命令。 安装Fabric Fabric的官网是www.fabfile.org ,源码托管在Github 上。你可以clone源码到本地,然后通过下面的命令来安装。但是在源码安装前,你必须先将Fabric的依赖包Paramiko 装上。 python setup.py develop 同时也可以使用pip安装,因为fabric是python的一个第三方库,只需一条命令即可: pip install fabric python3 安装时使用的是fabric3 :( 安装fabric3之前,需要先卸载fabric.) # fabric3 支持 python3 pip uninstall fabric pip3 install fabric3 fabric 不只是一个Python 模块,fabric 还是一个命令行工具,可以使用fab -h查看帮助信息 E:\my_data\hk-projectfab -VFabric3 1.14.post1Paramiko 2.4.2E:\my_data\hk-projectfab -h 入门使用 fabric的使用方式是通过编写一个python文件,该文件中包含多个函数,然后使用fab命令调用这些函数……

网友NO.548901

Fabric 应用案例

示例1:文件打包,上传与校验 我们时常做一些文件包分发的工作,实施步骤一般是先压缩打包,在批量上传至目标服务器,最后做一致性校验,本案例通过put()方法实现文件的上传,通过对比本地与远程主机文件的md5,最终实现文件一致性校验。 #!/usr/bin/env pythonfrom fabric.api import *from fabric.context_managers import *from fabric.contrib.console import confirmenv.user = 'root'env.hosts = ['192.168.1.23','192.168.1.24']env.password = '123456' @runs_oncedef tar_task(): #本地打包任务函数,只限执行一次 with lcd('/'): local("tar zcvf auto.tar.gz auto") def put_task(): run('mkdir /data') #上传任务函数 with cd("/data"): with settings(warn_only=True): result = put("/auto.tar.gz","/data") #put上传出现异常时继续执行,非中止 if result.failed and not confirm("put file failed, Continue[Y/N]?"): abort('Aboring file put task!') #出现异常时,确认用户是否继续 def check_task(): with settings(warn_only=True): lmd5 = local("md5sum /auto.tar.gz",capture=True).split(' ')[0] rmd5 = run("md5sum /data/auto.tar.gz").split(' ')[0] if lmd5 == rmd5: #对比本地及远程文件MD5信息 print "ok" else: print ERRORdef go(): tar_task() put_task() check_task() ……

网友NO.278005

分享关于类 Fabric 主机管理程序开发的实例

类 Fabric 主机管理程序开发: 1. 运行程序列出主机组或者主机列表 2. 选择指定主机或主机组 3. 选择让主机或者主机组执行命令或者向其传输文件(上传/下载) 4. 充分使用多线程或多进程 5. 不同主机的用户名密码、端口可以不同 README 类 Fabric 主机管理程序执行命令(SSH)向其传输文件(上传/下载)Fabric/#程序目录|- - -__init__.py|- - -bin/#启动目录| |- - -__init__.py| |- - -Fabric_start.py#视图启动| |- - -user_reg.py#主机添加启动||- - -cfg/#配置目录| |- - -__init__.py| |- - -config.py#配置文件||- - -core/#下载文件目录| |- - -__init__.py| |- - -main.py#主要逻辑 类||- - -db/#主机列表文件目录| |- - -||- - -get_file/#下载文件目录|||- - -put_file/#上传文件目录|- - -REDMAE Fabric/#程序目录|- - -__init__.py|- - -bin/#启动目录| |- - -__init__.py| |- - -Fabric_start.py#视图启动 1 import configparser2 import os ,sys3 BASE_DIR=os.path.dirname(os.path.dirname(os.path.abspath(__file__)))#获取相对路径转为绝对路径赋于变量4 sys.path.append(BASE_DIR)#增加环境变量5 from core.main import loging6 if __name__ == '__main__':7 8 loging() View Code | |- - -user_reg.py#主机添加启动 1 #!usr/bin/env python 2 #-*-coding:utf-8-*- 3 # Author calmyan 4 5 import configparser 6 import os ,sys 7 BASE_DIR=os.path.dirname(os.path.dirname(os.path.abspath(__file__)))#获取相对路径转为绝对路径赋于变量 8 sys.pa……

<
1
>

Copyright 2018-2019 xz577.com 码农之家

版权责任说明