Bernie Yu » SVN

迁移VPS上的SVN到Synology，并实现增量备份和邮件通知

Bernie Yu — Sun, 12 Apr 2015 13:27:58 +0000

之前的SVN服务器部署在VPS上，主要功能包括：

nginx+apache+svn，可以通过http访问；
自定义了post-commit，在每次收到版本提交时
- 自动发送邮件通知更新内容；
- 自动增量备份版本库，并把备份文件上传到指定的FTP

post-commit的内容如下：

#!/bin/sh REPOS="$1" REV="$2" export LANG="en_US.UTF-8" #"$REPOS"/hooks/mailer.py commit "$REPOS" $REV "$REPOS"/mailer.conf /usr/local/bin/svnnotify --repos-path "$1" --revision "$2" --to someone@bernieyu.com,someone2@bernieyu.com --from svn@bernieyu.com --handler "HTML::ColorDiff" --smtp smtp.bernieyu.com --smtp-user svn@bernieyu.com --smtp-pass password --svnlook /usr/bin/svnlook --subject-prefix '[SVN Update]' svnadmin dump "$REPOS" --revision "$REV" --incremental >/home/svn/dev/export/rev_$REV.dump ftp -n<

考虑到数据安全性，以及连接SVN的速度，决定把SVN迁移到家里的Synology上。

1. 在Synology的套件中心里安装SVN；

安装好后有一个问题，就是SVN的存储目录不能指定放在哪块硬盘，比如我想放在/volume2/svn，而安装后会自动安装在/volume4/svn. 于是将/volume4/svn删除，然后再建立到/volume2/svn的软连接

rm -rf /volume4/svn
ln -s /volume2/svn /volume4/svn

2. 建立repository

在Synology中打开Svn管理页面，创建名为dev的repository，并创建用户。

3. 导出VPS上的SVN版本库, 并复制到Synology

#!/bin/sh

cd ~/svnbak

svndump(){
	file_name=rev_$1.dump
	svnadmin dump /home/svn/dev -r $1 --incremental > $file_name
}

ver=`svnlook youngest /home/svn/dev`

svndump 0;

for i in `seq $ver`; do
	svndump $i;
done;


exit 0

4. 导入SVN数据到Synology

#!/bin/sh

svnadmin load /volume2/svn/dev < /volume2/doc/projects/svnbak/dev/rev_0.dump;

for i in `seq 184`; do
  svnadmin load /volume2/svn/dev < /volume2/doc/projects/svnbak/dev/rev_$i.dump;
done;


exit 0

5. 修改post-commit，以实现邮件通知和自动备份功能

mailer.py需要安装python-svn，但ipkg里的版本与Synology套件中心提供的python版本不一样，于是不考虑了
svnnotify没有在ipkg里找到

于是考虑用curl把版本库信息提交到一个web页面，再由这个页面发送邮件。但是一查curl的帮助，发现最新版的已经可以直接使用Smtp发送邮件了，大喜，一试发现竟然真的可以，而且还支持SMTPS

#!/bin/sh

REPOS="$1"
REV="$2"

export LANG="en_US.UTF-8"
#生成备份
svnadmin dump "$REPOS" --revision "$REV" --incremental >/volume2/doc/projects/svnbak/dev/rev_$REV.dump
#复制到baidu云的自动备份目录
cp /volume2/doc/projects/svnbak/dev/rev_$REV.dump /volume2/doc/baidu/svn_bak/dev/rev_$REV.dump

#得到版本更新相关信息
svnuid=`svnlook uuid $REPOS`
author=`svnlook author -r $REV $REPOS`
date=`svnlook date -r $REV $REPOS`
log=`svnlook log -r $REV $REPOS`
changed=`svnlook changed -r $REV $REPOS`

file="content.txt"

smtpserver="smtps://smtp.bernieyu.com:465"
mailfrom="svn@bernieyu.com"
mailrcpt="someone@bernieyu.com"
smtpuser="svn@bernieyu.com"
smtppwd="password"

#HTML邮件的CSS，从svnnotify复制来的
css=""

echo "From: \"SVN\" <$mailfrom>
To: \"Bernie Yu\" <$mailrcpt>
Subject: [SVN Update][$REV] $log
Content-Type: text/html; charset=\"us-ascii\"

 $css 

    
      Revision
 $REV
      Author
 $author
      Date
 $date
    

Log Message
$log

Change Detail
" > $file

OLDIFS=$IFS
IFS=$'\n'
for line in $changed
do
    echo "$line" >> $file
done
IFS=$OLDIFS

echo "


 " >> $file

curl --url "$smtpserver" --ssl-reqd --mail-from "$mailfrom" --mail-rcpt "$mailrcpt" --upload-file $file --user "$smtpuser:$smtppwd" --insecure

测试成功，搞定！

PS：

目前遗留的问题一是Synology自带的SVN不支持HTTP访问，只能通过SVN协议访问。在路由器添加了端口映射后，用SVN协议访问影响不大。安装SVN后需要重启一下Synology，我当时没重启，结果端口映射后怎么也访问不到。二是SSH+SVN还没有搞定，因为SVN添加的用户只是SVN的用户而不是SSH用户，暂时还找不到解决办法。

svnlook命令集

Bernie Yu — Fri, 10 Apr 2015 07:45:49 +0000

svnlook命令集

转载自 http://blog.sina.com.cn/s/blog_5eb1a2670100kpx1.html

svnlook

名称

svnlook author — 打印作者。

概要

svnlook author REPOS_PATH

描述

打印版本库一个修订版本或者事物的作者。

选项

--revision (-r)
--transaction (-t)

例子

svnlook author

$ svnlook author -r 40 /usr/local/svn/repos 
sally

名称

svnlook cat — 打印一个文件的内容。

概要

svnlook cat REPOS_PATH PATH_IN_REPOS

描述

打印一个文件的内容。

选项

--revision (-r)
--transaction (-t)

例子

这会显示事物ax8中一个文件的内容，位于/trunk/README：

$ svnlook cat -t ax8 /usr/local/svn/repos /trunk/README

                Subversion, a version control system.
                =====================================

$LastChangedDate: 2003-07-17 10:45:25 -0500 (Thu, 17 Jul 2003) $

Contents:

      I. A FEW POINTERS
     II. DOCUMENTATION
    III. PARTICIPATING IN THE SUBVERSION COMMUNITY
…

名称

svnlook changed — 打印修改的路径。

概要

svnlook changed REPOS_PATH

描述

打印在特定修订版本或事物修改的路径，也是在前两列使用“

svn update样式的”状态字符：

‘A ‘: 条目添加到版本库。

‘D ‘条目从版本库删除。’U ‘文件内容改变了。’_U’条目属性改变了。’UU’文件内容和属性修改了。

文件和目录可以区分，目录路径后面会显示字符’/’。

选项

--revision (-r)
--transaction (-t)

例子

显示在测试版本库修订版本39修改的文件列表：

$ svnlook changed -r 39 /usr/local/svn/repos
A    trunk/vendors/deli/
A    trunk/vendors/deli/chips.txt
A    trunk/vendors/deli/sandwich.txt
A    trunk/vendors/deli/pickle.txt
U    trunk/vendors/baker/bagel.txt
_U   trunk/vendors/baker/croissant.txt
UU   trunk/vendors/baker/pretzel.txt
D    trunk/vendors/baker/baguette.txt

名称

svnlook date — 打印时间戳。

概要

svnlook date REPOS_PATH

描述

打印版本库一个修订版本或事物的时间戳。

选项

--revision (-r)
--transaction (-t)

例子

显示测试版本库修订版本40的日期：

            
$ svnlook date -r 40 /tmp/repos/
2003-02-22 17:44:49 -0600 (Sat, 22 Feb 2003)

名称

svnlook diff — 打印修改的文件和属性的区别。

概要

svnlook diff REPOS_PATH

描述

打印版本库中GNU样式的文件和属性修改区别。

选项

--revision (-r)
--transaction (-t)
--no-diff-added
--no-diff-deleted

例子

这显示了一个新添加的（空的）文件，一个删除的文件和一个拷贝的文件：

$ svnlook diff -r 40 /usr/local/svn/repos/
Copied: egg.txt (from rev 39, trunk/vendors/deli/pickle.txt)

Added: trunk/vendors/deli/soda.txt
==============================================================================

Modified: trunk/vendors/deli/sandwich.txt
==============================================================================
--- trunk/vendors/deli/sandwich.txt (original)
+++ trunk/vendors/deli/sandwich.txt 2003-02-22 17:45:04.000000000 -0600
@@ -0,0 +1 @@
+Don't forget the mayo!

Modified: trunk/vendors/deli/logo.jpg
==============================================================================
(Binary files differ)

Deleted: trunk/vendors/deli/chips.txt
==============================================================================

Deleted: trunk/vendors/deli/pickle.txt
==============================================================================

如果一个文件有非文本的svn:mime-type属性，区别不会明确显示。

名称

svnlook dirs-changed — 打印本身修改的目录。

概要

svnlook dirs-changed REPOS_PATH

描述

打印本身修改（属性编辑）或子文件修改的目录。

选项

--revision (-r)
--transaction (-t)

例子

这显示了在我们的实例版本库中在修订版本40修改的目录：

$ svnlook dirs-changed -r 40 /usr/local/svn/repos
trunk/vendors/deli/

名称

svnlook help

概要

Also svnlook -h and svnlook -?.

描述

显示svnlook的帮助信息，这个命令如同

svn help的兄弟，也是你的朋友，即使你从不调用它，并且忘掉了邀请它加入你的上一次聚会。

别名

?, h

名称

svnlook history — 打印版本库（如果没有路径，则是根目录）某一个路径的历史。

概要

svnlook history REPOS_PATH 
             [PATH_IN_REPOS]

描述

打印版本库（如果没有路径，则是根目录）某一个路径的历史。

选项

--revision (-r)
--show-ids

例子

这显示了实例版本库中作为修订版本20的路径/tags/1.0的历史输出。

$ svnlook history -r 20 /usr/local/svn/repos /tags/1.0 --show-ids
REVISION    PATH 
--------    ---------
       19    /tags/1.0 <1.2.12>
       17    /branches/1.0-rc2 <1.1.10>
       16    /branches/1.0-rc2 <1.1.x>
       14    /trunk <1.0.q>
       13    /trunk <1.0.o>
       11    /trunk <1.0.k>
        9    /trunk <1.0.g>
        8    /trunk <1.0.e>
        7    /trunk <1.0.b>
        6    /trunk <1.0.9>
        5    /trunk <1.0.7>
        4    /trunk <1.0.6>
        2    /trunk <1.0.3>
        1    /trunk <1.0.2>

名称

svnlook info — 打印作者、时间戳、日志信息大小和日志信息。

概要

svnlook info REPOS_PATH

描述

打印作者、时间戳、日志信息大小和日志信息。

选项

--revision (-r)
--transaction (-t)

例子

显示了你的实例版本库在修订版本40的信息输出。

$ svnlook info -r 40 /usr/local/svn/repos
sally
2003-02-22 17:44:49 -0600 (Sat, 22 Feb 2003)
15
Rearrange lunch.

名称

svnlook lock — 如果版本库路径已经被锁定，描述它。

概要

svnlook lock REPOS_PATH PATH_IN_REPOS

描述

打印PATH_IN_REPOS锁定的所有信息，如果PATH_IN_REPOS没有锁定，则不打印任何内容。

选项

无

例子

这描述了文件tree.jpg的锁定。

$ svnlook lock /svn/repos tree.jpg
UUID Token: opaquelocktoken:ab00ddf0-6afb-0310-9cd0-dda813329753
Owner: harry
Created: 2005-07-08 17:27:36 -0500 (Fri, 08 Jul 2005)
Expires: 
Comment (1 line):
Rework the uppermost branches on the bald cypress in the foreground.

名称

svnlook log — 打印日志信息。

概要

svnlook log REPOS_PATH

描述

打印日志信息。

选项

--revision (-r)
--transaction (-t)

例子

这显示了实例版本库在修订版本40的日志输出：

$ svnlook log /tmp/repos/
Rearrange lunch.

名称

svnlook propget — 打印版本库中一个路径一个属性的原始值。

概要

svnlook propget REPOS_PATH PROPNAME [PATH_IN_REPOS]

描述

列出版本库中一个路径一个属性的值。

别名

pg, pget

选项

--revision (-r)
--transaction (-t)
--revprop

例子

这显示了HEAD修订版本中文件/trunk/sandwich的“

seasonings”属性的值：

$ svnlook pg /usr/local/svn/repos seasonings /trunk/sandwich
mustard

名称

svnlook proplist — 打印版本化的文件和目录的属性名称和值。

概要

svnlook proplist REPOS_PATH [PATH_IN_REPOS]

描述

列出版本库中一个路径的属性，使用–verbose选项也会显示所有的属性值。

别名

pl, plist

选项

--revision (-r)
--transaction (-t)
--verbose (-v)
--revprop

例子

这显示了HEAD修订版本中/trunk/README的属性名称：

$ svnlook proplist /usr/local/svn/repos /trunk/README
   original-author
   svn:mime-type

这与前一个例子是同一个命令，但是同时显示了属性值：

$ svnlook --verbose proplist /usr/local/svn/repos /trunk/README
   original-author : fitz
   svn:mime-type : text/plain

名称

svnlook tree — 打印树。

概要

svnlook tree REPOS_PATH [PATH_IN_REPOS]

描述

打印树，从PATH_IN_REPOS（如果提供，会作为树的根）开始，可以选择显示节点修订版本ID。

选项

--revision (-r)
--transaction (-t)
--show-ids

例子

这会显示实例版本库中修订版本40的树输出（包括节点ID）：

$ svnlook tree -r 40 /usr/local/svn/repos --show-ids
/ <0.0.2j>
trunk/ 
   vendors/ 
    deli/ <1g.0.2j>
     egg.txt <1i.e.2j>
     soda.txt <1k.0.2j>
     sandwich.txt <1j.0.2j>

名称

svnlook uuid — 打印版本库的UUID。

概要

svnlook uuid REPOS_PATH

描述

打印版本库的UUID，UUID是版本库的

universal unique IDentifier（全局唯一标示），Subversion客户端可以使用这个标示区分不同的版本库。

例子

          
$ svnlook uuid /usr/local/svn/repos
e7fe1b91-8cd5-0310-98dd-2f12e793c5e8

名称

svnlook youngest — 打印最年轻的修订版本号。

概要

svnlook youngest REPOS_PATH

描述

打印一个版本库最年轻的修订版本号。

例子

这显示了在实例版本库显示最年轻的修订版本：

          
$ svnlook youngest /tmp/repos/