`

用python脚本对svn库进行备份,压缩,加密,ftp上传

阅读更多
import logging
import os,sys
import tarfile,bz2
import time
import shutil
import subprocess
from ftplib import FTP
#
# 必要条件
# 1.安装Python
# 2.对GnuPG要求
# A.安装GnuPG且执行目录配在PATH内
# B.导入加密用户的公钥
# C:\..\> gpg --import svnbackup-public-key.txt
# C.对加密用户绝对信任
# C:\..\> gpg --edit-key svnbackup
# Command> trust
# ....
# ....
# 请选择 5
# ....
# Command> quit
# 3.启动"定时作业"程序
# 4.设置"定时作业",由于都为全量备份,最好不要设置每星期都执行,可以一星期执行一次
# C:\..\> at 05:00 /every:M,T,W,Th,F,S,Su f:\svndepository\backupsvn.bat
# C:\..\> at 23:30 /every:F f:\svndepository\backupsvn.bat
#
# 5.生成backupsvn.bat文件
# 内容如下:
# set USERPROFILE=C:\Documents and Settings\Administrator
# c:\Python24\python f:\svndepository\svnbackup.py
#
# 其中环境变量%USERPROFILE%是gpg所需要的 
#

global_log='F:\\svnbackup\\svnbackup.log' #日志文件所在位置
global_crypt_person='svnbackup' #gpg public key所属的人
global_ftp_server='192.168.0.84' #ftp服务器的ip或名字
global_ftp_user='svnbackup' #ftp帐号
global_ftp_password='svnbackup' #ftp帐号对应的密码
global_destdir="F:\svnbackup\\" #备份所用的临时目录:最后的两个\\一定不能少
global_dbs=['F:\\svndepository\\svnroot\\huangshangzhong',
 'F:\\svndepository\\svnroot\\ante.develop',
 'F:\\svndepository\\svnroot\\ante.online',
 'F:\\svndepository\\svnroot\\infoservice.develop',
 'F:\\svndepository\\svnroot\\infoservice.online',
 'F:\\svndepository\\svnroot\\szhelper']
logging.basicConfig(level=logging.DEBUG,format='[%(asctime)s] [%(levelname)s] %(message)s',filename=global_log,filemode='w')

def compressBz2(srcDir,dstDir,format):
 logging.debug("进入压缩目录函数:compressBz2")
 if os.path.isdir(srcDir):
  logging.info("准备备份:"+srcDir)
 else:
  logging.info("备份的源目录:"+srcDir+"不存在")
  return '.'
 if os.path.isdir(dstDir):
  logging.info("将压缩到:"+dstDir)
  #dstFileName=dstDir+time.strftime(format)+".tar.bz2"
  #out=tarfile.TarFile.open(dstFileName,'w:bz2')
  dstFileName=dstDir+time.strftime(format)+".tar"
  out=tarfile.TarFile.open(dstFileName,'w')
  try:
  out.add(srcDir,srcDir)
  out.close()
  logging.info('成功压缩数据到:'+dstFileName)
  return dstFileName
  except:
  out.close()
  logging.error("压缩数据失败!")
  return '.'
 else:
  logging.info("备份的目标目录:"+dstDir+"不存在")
  return '.'
def ftpData(filename,server,user,password):
 logging.debug("进入上传数据函数:ftpData")
 ftp=FTP()
 ftp.set_debuglevel(0)
 ftp.connect(server,21)
 ftp.login(user,password)
 ftp.set_pasv(1)
 logging.info("登陆ftp的反馈信息:"+ftp.getwelcome())
 filehandle=open(filename,'rb')
 fileshortname=os.path.basename(filename)
 try:
 ftp.storbinary('STOR '+fileshortname,filehandle,1024)
 ftp.set_debuglevel(1)
 filehandle.close()
 ftp.quit()
 ftp.close()
 logging.info("上传数据:"+fileshortname+"成功!")
 os.remove(filename)
 return 0
 except:
 ftp.set_debuglevel(0)
 filehandle.close()
 ftp.quit()
 ftp.close()
 logging.error("上传数据:"+filename+"失败!")
 return -1
def svnHotCopy(dbname,dstDir,format):
 logging.debug("进入svn库备份函数:svnHotCopy")
 if os.path.isdir(dbname):
  logging.info("准备备份:"+dbname)
 else:
  logging.info("备份的源目录:"+dbname+"不存在")
  return '-1'
 
 if os.path.isdir(dstDir):
 tmpDir=os.path.dirname(dstDir)+"\\"
 dbshortname=os.path.basename(dbname)
dstFileDir=tmpDir+dbshortname+time.strftime(format)
  logging.info("正在备份版本库:"+dbname)
 else:
  logging.info("备份的目标目录:"+dstDir+"不存在")
  return '-2'
 cmd=['svnadmin','hotcopy',dbname,dstFileDir]
 rst=subprocess.call(cmd)
 if rst==0:
  logging.info("版本库:"+dbname+"成功备份到了:"+dstDir+"!")
  return dstFileDir
 else:
  logging.info("备份版本库:"+dbname+"到:"+dstDir+"失败!")
  return '-3'
def cryptFile(filename,ext):
 logging.debug("进入加密文件函数:cryptFile")
 destfile=filename+ext
 cmd=['gpg','-z','0','-o',destfile,'-er',global_crypt_person,filename]
 rst=subprocess.call(cmd)
 if rst==0:
  logging.info("加密文件:"+filename+"成功")
 os.system("del "+filename)
  return destfile
 else:
  logging.info("加密文件:"+filename+"失败")
  return '.'
defdoSvnBackup():
 logging.info("-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=")
 logging.debug("进入主函数:SvnBackup")
 for x in global_dbs:
 try:
 logging.info("-=-=-=-=--=-=--") 
y=svnHotCopy(x,global_destdir,'-%Y%m%d%H%M%S')
 logging.debug("生成目录:"+y)
 bz2f=compressBz2(y,y,'')
 logging.debug("生成压缩文件:"+bz2f)
 cryf=cryptFile(bz2f,'.gpg')
 logging.debug("生成加密文件:"+cryf)
 rs=ftpData(cryf,global_ftp_server,global_ftp_user,global_ftp_password)
 if rs==0:
 os.system("attrib -h -r "+y+"\\*.* /s")
 shutil.rmtree(y,1)
 logging.info("备份:"+x+"成功!")
else:
 logging.error("备份:"+x+"失败!")
 except:
 logging.error("主函数执行过程中有异常发生")
 
if __name__ == "__main__":
 doSvnBackup()
 logging.shutdown() 


#以下是定时任务
rem ==================================================
rem at 23:30 /every:M,T,W,Th,F,S,Su f:\svndepository\backupsvn.bat
rem at 23:30 /every:T,F f:\svndepository\backupsvn.bat
rem ==================================================
rem == Set GnuPG USERPROFILE
set USERPROFILE=C:\Documents and Settings\Administrator
c:\Python24\python f:\svndepository\svnbackup.py
<!-- CoreMail Version 3.1_dev Copyright (c) 2002-2007 www.mailtech.cn -->
分享到:
评论

相关推荐

    SVN增量备份脚本及MD5加密工具

    在这个"SVN增量备份脚本及MD5加密工具"中,包含了两个批处理脚本和一个MD5加密工具,旨在简化和增强SVN仓库的备份过程。 `work_dump_in.bat`可能是一个工作副本备份脚本,通常用于备份工作目录中的更改。在SVN中,...

    Python处理svn状态脚本

    使用python调用svn命令行,完成对svn工作目录的自动清理,自动完成解决冲突和恢复版本。使用subprocess,适用于windows和mac os。 使用方法:python jtcleansvn.py workingspacepath

    svn配置库全量备份脚本

    本主题聚焦于“svn配置库全量备份脚本”,这是一个关键的实践操作,对于确保项目数据的安全性和可恢复性至关重要。下面将详细介绍如何使用脚本来执行SVN全量备份,以及涉及到的相关技术知识点。 首先,我们需要理解...

    用python脚本处理和分析svn log xml

    本代码实现了用python处理svn log数据(xml格式),把Log的数据转化为一个python的数据结构,方便作更进一步数据挖掘!

    SVN版本库备份操作脚本

    "SVN版本库备份操作脚本"就是针对这一需求设计的工具,它能够帮助用户自动化执行SVN版本库的备份任务,并且包含完全备份以及增加备份日志的功能。 完全备份是指对SVN版本库的完整复制,包括所有文件、目录和版本...

    windows&linux svn自动化全备份&增量备份脚本

    本文将详细介绍如何在Windows和Linux环境下,利用脚本实现SVN仓库的自动化全备份与增量备份,并进行异地备份。 【描述】: Windows下的自动化备份通常涉及编写批处理脚本,结合任务计划程序来定时运行。这个过程...

    svn代码库如何备份到本地

    ### SVN代码库备份到本地的方法 #### 背景与目的 版本控制系统Subversion(简称SVN)是一种广泛使用的源代码管理系统,它帮助开发者管理项目的各个版本及其变更历史。在日常开发过程中,为了防止数据丢失或者便于...

    python 实现svn文件下载

    python 实现svn的代码下载,解决了请求认证,字符编码,地址长度问题。非常不错的例子。

    一段进行SVN备份的脚本

    如果需要,脚本还可以包含压缩备份文件的命令,例如使用`gzip`或`7z`来减小存储空间占用。 在Windows环境下,可以使用任务计划程序来定时运行这个脚本。任务计划程序允许用户设置触发器,如每天、每周或在特定时间...

    Svn最强大的Windows下实现自动全量增量备份和异地备份,一切自动化完成

    1)通过windows定时任务功能,调度进行备份、压缩、FTP上传功能的bat文件; 2)将自动备份成按每日日期.dmp备份到SVN本机的其他磁盘空间中,分全备份和增量备份; 3)启动ftp上传命令,将备份的rar包立即上传在...

    SVN数据库增量备份脚本

    - **加密和安全性**:对备份文件进行加密,以防止未经授权的访问,并确保数据隐私。 总之,SVN数据库增量备份脚本是配置管理中的重要工具,它结合了SVN的版本控制特性与增量备份的优势,以高效、节省空间的方式保护...

    SVN增量备份-附带脚本

    在"SVN增量备份-附带脚本"这个主题中,我们将探讨如何使用提供的脚本来实现这一功能。 1. **dump.bat**:这是一个批处理脚本,通常用于执行SVN的dump命令。`svnadmin dump`命令用于从SVN仓库创建一个完整的数据转储...

    svn admin dump备份

    * 需要使用gzip命令进行压缩备份文件,以减少备份文件的大小。 * 需要定期检查备份文件的完整性和可靠性。 svn admin dump备份是一种可靠的备份方式,能够确保svn存储库的安全和可靠性。但是,需要正确地使用svn ...

    svn增量备份脚本

    使用`gzip`命令压缩备份文件以节省存储空间。 #### 四、问题分析与解决 根据提供的错误信息可以看出存在几个问题: 1. **未初始化变量**: 脚本中有未初始化的变量被使用,如`$previous_youngest`可能为空导致后续...

    SVN(windows平台)自动备份脚本

    下面将详细介绍如何配置和使用SVN自动备份脚本。 1. **SVN基础** SVN的核心功能是追踪文件和目录的更改,它允许用户回滚到过去的版本,查看历史记录,并进行分支和合并操作。这对于团队协作和项目管理至关重要。 ...

    python copy svn上传

    用python写的复制文件,调用svn命令上传文件的代码块

    SVN备份脚本.rar

    - 压缩与加密:为了节省存储空间和增加安全性,脚本可能包含对备份文件进行压缩(如使用gzip或bzip2)和加密(如使用gpg)的步骤。需要根据需求调整这些部分。 4. 使用备份脚本: - 安装必要的工具:首先确保系统...

    python获取SVN日志

    指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间时间 获取SVN日志指定区间...

    SVN 备份脚本

    通过创建SVN备份脚本,我们可以确保在开发过程中对代码库进行安全保护,避免数据丢失。以下将详细介绍如何实现SVN的增量备份和全量备份。 1. **全量备份** 全量备份是指获取SVN仓库中的所有文件和版本历史的完整...

    LINUX SVN双机热备份shell脚本 附配置文档

    本文将深入探讨如何在Linux环境下利用shell脚本实现SVN双机热备份,确保服务高可用性和数据安全性。 首先,我们需要理解"双机热备份"的概念。双机热备份是指两台服务器同时运行,一台为主服务器,另一台为备用...

Global site tag (gtag.js) - Google Analytics