工作,学习,生活,这里将会有一些记录. 备用域名:http://meisw.wdlinux.cn 注册 | 登陆
浏览模式: 标准 | 列表分类:linux

在线视频点播

FLV格式是FLASH VIDEO格式的简称,随着Flash MX的推出,Macromedia公司开发了属于自己的流媒体视频格式——FLV格式。FLV流媒体格式是一种新的视频格式,由于它形成的文件极小、加载速度也极快,这就使得网络观看视频文件成为可能,FLV视频格式的出现有效地解决了视频文件导入Flash后,使导出的SWF格式文件体积庞大,不能在网络上很好的使用等缺点,FLV是在sorenson公司的压缩算法的基础上开发出来的。sorenson公司也为MOV格式提供算法。FLV格式不仅可以轻松的导入Flash中,几百帧的影片就以两秒钟;同时也可以通过rtmp 协议从Flashcom 服务器上流式播出。因此目前国内外主流的视频网站都使用这种格式的视频在线观看。

 

flv在线播放器 Vcastr3

下载地址:

http://www.ruochigroup.com/main/2008/03/19/vcastr-30/

 

 

有一个源于Linux的工具软件ffmpeg可以轻易地实现FLV向其它格式(avi(mpeg4)asfmpeg)的转换或者将其它格式转换为flv

 如果只需要转到flv,装mencodercodecs就可以了,如果还需要截图或者其他功能,就要装ffmpeg和相关解码包。ffmpeg支持的格式没有前者多,但是速度比较快,参数也很简单。另外我们还需要转换到rm,找了很久都没找到基于前述两种软件的解决方法。在对转换速度不具特殊需求的情况下,我使用Helix Producer for linux来解决该问题,这同时也是real的人所建议的。

 

mencoder

下载地址:

MPlayer-1.0rc2-gui.zip

MPlayer-mingw32-1.0rc2.zip

http://www5.mplayerhq.hu/MPlayer/releases/win32/

windows-all-20071007.zip

http://www5.mplayerhq.hu/MPlayer/releases/codecs/

参数说明:

   CODE:

    mencoder [options] file1 [specific options] [file2] [specific options]

    mencoder src.avi -o dst.avi -vf scale=320:240 -oac copy -ovc lavc -lavcopts vcodec=mpeg4:vbitrate=500

    # src.avi 原文件

    # -o dst.avi 定义压缩为dst.avi

    # -vf scale=320:240,调整视频尺寸到320x240

    # -oac copy,指定音频编码器,copy是指不压缩,直接使用源文件里的音频。copy换成 MP3lame,即压缩成mp3

    # -ovc lavc,指定视频编码器,使用libavcodec编码器;

    # -lavcopts vcodec=mpeg4:vbitrate=500,指定libavcodec的参数,vcodec=mpeg4指使用mpeg4压缩,就是DivXvbitrate=500500kbps的比特率。

 

    CODE:

    mencoder src.avi -o dst.flv -of lavf -oac MP3lame -lameopts abr:br=32:mode=3 -ovc lavc i_certify_that_my_video_stream_does_not_use_b_frames -vf scale=350:-3 -sws 2

 

    # src.avi 输入文件路径,是Mplayer能支持的格式即可

    # -o dst.flv 输出路径

    # -of lavf 输出格式 lavf表示libavcodec

    # -oac MP3lame 输出音频编码方式,lame是最好的mp3编码器

    # -lameopts abr:br=32:mode=3 abr代表平均码率,相对于cbr(固定码率)vbr(可变码率,貌似不支持),br就是音频的码率,越高音质越好,mode=30-3分别代表 Stereo,Joint Stereo,Force ms_stereo,Mono(默认为自动,事实上13对文件大小的影响并不是很大),另外可选的还有 vol(音量,取值0-10,数值越大音量越大,不建议修改)

    # -srate 22050 声音采样频率设置,也可以选11025,文件可以稍小一点

    # -ovc lavc 输出视频编码 lavc就是libavcodec

    # -lavcopts codec=flv flv格式压缩 vbitrate=150 视频码率

    # -vf scale=350:-3 -sws 2 缩放视频,指定宽度为350,高度按比例来。质量由-sws选项控制,具体看手册

    # -ofps 23 设定帧数,缩小帧数对节约文件大小效果不明显,且可能造成画面声音同步。建议不设置

 

mencoder “input.avi" -o "output.flv" -of lavf -lavfopts i_certify_that_my_video_stream_does_not_use_b_frames -oac mp3lame -lameopts abr:br=56 -ovc lavc -lavcopts vcodec=flv:vbitrate=500:mbd=2:mv0:trell:v4mv:cbp:last_pred=3:dia=4:cmp=6:vb_strategy=1 -ofps 29.97 -srate 22050   

参数详解:

-o "output.flv":是输出文件路径;

-of lavf:是输出文件格式,这里不是flv而是lavf,是因为flv属于libavformat

-lavfopts i_certify_that_my_video_stream_does_not_use_b_frames-lavfopts表示对lavf进行一些设置,设置的内容就是i_certify_that_my_video_stream_does_not_use_b_frames,翻译成中文就是:我确定,我的视频不用B frames,对于转换flv格式,最好加上这个参数,否则可能会报错。

-oac mp3lameoac=output audio codec,输出音频编码器,这里用的mp3lame

-lameopts abr:br=56lame options,是专门针对mp3lame的参数设置,abr:br=56,是设置音频比特率为56

-ovc lavcovc=output video codec,输出视频编码器,lavc表示one of libavcodecs video codec,输出格式为libavformat之一;

-lavcopts vcodec=flv:vbitrate=500:mbd=2:mv0:v4mv:trell:cbp:last_pred=3:dia=4:cmp=6:vb_strategy=1:对lavc进行一些设置,详细介绍如下:

vcodec=flv:指定视频编码器为flv

vbitrate=500:指定视频比特率为500

mbd:宏模块选择算法,值为02默认为0,值越大转换越缓慢,但在品质和文件大小方面有好处;

mv0:编译每个宏模块并选择最好的一个,当mbd=0时无效;

v4mv:会稍微增加品质,mbd>0时效果更明显;

trell:量子化网格搜索,对每8×8block找到最优化编码;

cbp:只能和trell一期使用,评估失真的图像块编码;

last_pred=3:与上一帧相比的移动数量预测,值为09913比较合适,大于3时对品质的提高已经无关紧要,但却会降低速度;

dia=4:移动搜索范围,值为-996,对于快速转换,-1是个不错的值,如果不是很重视速度,可以考虑24

cmp=6:值为12000,默认为0,设置用于全象素移动预算的比较函数

vb_strategy=1:对动作很大的场景会有帮助,对有些视频,设置vmax_b_frames会有损品质,加上vb_strategy=1会好点。

 

示例:

rmvb->flv

mencoder D:/video/xchk.rmvb FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/xchk.flv

 

mencoder D:/video/tl.rmvb FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/test/tl.flv

 

mpg->flv

mencoder D:/video/hx.mpg FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/test/hx1.flv

 

DAT->flv

mencoder D:/video/avs001.DAT FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/test/avs0011.flv

 

avi->flv

mencoder D:/video/pxgk.avi FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/test/pxgk1.flv

 

 

 

----------------------------------------------------------

ffmpeg

ffmpeg能解析的格式:asxasfmpgwmv3gpmp4movaviflv

下载地址:

http://tirnanog.fate.jp/mirror/ffmpeg/

ffmpeg参数说明

【常用参数】        【说明】        【示例】

-i "路径"          指定需要转换的文件路径   -i "C:/nba.wmv"

-y     覆盖输出文件,即如果nba.xxx文件已经存在的话,直接覆盖       

   控制画面参数

-bitexac 使用标准比特率    

-vcodec xvid    使用xvid压缩         

-s <宽高比>    指定分辨率大小   -s 320*240

-r <数值>         帧速率(非标准数值会导致音画不同步【标准值为1529.97)          -r 15

-b <比特率>   指定压缩比特率   -b 1500

 

-qmin <数值>

         设定最小质量        -qmin 10

-qmax <数值>         -qmin相反,可以与-qmin同时使用        -qmax 30

-sameq   使用与源视频相同的质量    

   控制声音参数

-acodec aac    设定声音编码         

-ac <数值>      设定声道数:1为单声道,2为立体声      -ac 2

-ar <采样率> 设定声音采样率(80001102522050)     -ar 22050

-ab <比特率>          设定声音比特率(-ac设为立体声时要以一半比特率来设置,比如192kbps的就设成96)   -ab 96

-vol <百分比>          设定音量大小,比如设定200就会比原来的音量大2         -vol 200

 

利用ffmpeg的这两个参数,可以控制让ffmpeg来将一个大video劈分成许多小段的独立播放的文件。

-ss time_off        set the start time offset

-t duration         set the recording time

 

详细参数:

ffmpeg [[options][`-i’ input_file]]… {[options] output_file}…

如果没有输入文件,那么视音频捕捉就会起作用。

作为通用的规则,选项一般用于下一个特定的文件。如果你给 b 64选项,改选会设置下一个视频速率。对于原始输入文件,格式选项可能是需要的。

缺省情况下,ffmpeg试图尽可能的无损转换,采用与输入同样的音频视频参数来输出。

3.选项

a) 通用选项

-L license

-h 帮助

-fromats 显示可用的格式,编解码的,协议的。。。

-f fmt 强迫采用格式fmt

-I filename 输入文件

-y 覆盖输出文件

-t duration 设置纪录时间 hh:mm:ss[.xxx]格式的记录时间也支持

-ss position 搜索到指定的时间 [-]hh:mm:ss[.xxx]的格式也支持

-title string 设置标题

-author string 设置作者

-copyright string 设置版权

-comment string 设置评论

-target type 设置目标文件类型(vcd,svcd,dvd) 所有的格式选项(比特率,编解码以及缓冲区大小)自动设置 ,只需要输入如下的就可以了:

ffmpeg -i myfile.avi -target vcd /tmp/vcd.mpg

-hq 激活高质量设置

-itsoffset offset 设置以秒为基准的时间偏移,该选项影响所有后面的输入文件。该偏移被加到输入文件的时戳,定义一个正偏移意味着相应的流被延迟了 offset秒。 [-]hh:mm:ss[.xxx]的格式也支持

b) 视频选项

-b bitrate 设置比特率,缺省200kb/s

-r fps 设置帧频 缺省25

-s size 设置帧大小 格式为WXH 缺省160X128.下面的简写也可以直接使用:

Sqcif 128X96 qcif 176X144 cif 252X288 4cif 704X576

-aspect aspect 设置横纵比 4:3 16:9 1.3333 1.7777

-croptop size 设置顶部切除带大小 像素单位

-cropbottom size –cropleft size –cropright size

-padtop size 设置顶部补齐的大小 像素单位

-padbottom size padleft size padright size padcolor color 设置补齐条颜色(hex,616进制的数,红:绿:兰排列,比如 000000代表黑色)

-vn 不做视频记录

-bt tolerance 设置视频码率容忍度kbit/s

-maxrate bitrate设置最大视频码率容忍度

-minrate bitreate 设置最小视频码率容忍度

-bufsize size 设置码率控制缓冲区大小

-vcodec codec 强制使用codec编解码方式。 如果用copy表示原始编解码数据必须被拷贝。

-sameq 使用同样视频质量作为源(VBR

-pass n 选择处理遍数(1或者2)。两遍编码非常有用。第一遍生成统计信息,第二遍生成精确的请求的码率

-passlogfile file 选择两遍的纪录文件名为file

 

c)高级视频选项

-g gop_size 设置图像组大小

-intra 仅适用帧内编码

-qscale q 使用固定的视频量化标度(VBR)

-qmin q 最小视频量化标度(VBR)

-qmax q 最大视频量化标度(VBR)

-qdiff q 量化标度间最大偏差 (VBR)

-qblur blur 视频量化标度柔化(VBR)

-qcomp compression 视频量化标度压缩(VBR)

-rc_init_cplx complexity 一遍编码的初始复杂度

-b_qfactor factor pb帧间的qp因子

-i_qfactor factor pi帧间的qp因子

-b_qoffset offset pb帧间的qp偏差

-i_qoffset offset pi帧间的qp偏差

-rc_eq equation 设置码率控制方程 默认tex^qComp

-rc_override override 特定间隔下的速率控制重载

-me method 设置运动估计的方法 可用方法有 zero phods log x1 epzs(缺省) full

-dct_algo algo 设置dct的算法 可用的有 0 FF_DCT_AUTO 缺省的DCT 1 FF_DCT_FASTINT 2 FF_DCT_INT 3 FF_DCT_MMX 4 FF_DCT_MLIB 5 FF_DCT_ALTIVEC

-idct_algo algo 设置idct算法。可用的有 0 FF_IDCT_AUTO 缺省的IDCT 1 FF_IDCT_INT 2 FF_IDCT_SIMPLE 3 FF_IDCT_SIMPLEMMX 4 FF_IDCT_LIBMPEG2MMX 5 FF_IDCT_PS2 6 FF_IDCT_MLIB 7 FF_IDCT_ARM 8 FF_IDCT_ALTIVEC 9 FF_IDCT_SH4 10 FF_IDCT_SIMPLEARM

-er n 设置错误残留为n 1 FF_ER_CAREFULL 缺省 2 FF_ER_COMPLIANT 3 FF_ER_AGGRESSIVE 4 FF_ER_VERY_AGGRESSIVE

-ec bit_mask 设置错误掩蔽为bit_mask,该值为如下值的位掩码 1 FF_EC_GUESS_MVS (default=enabled) 2 FF_EC_DEBLOCK (default=enabled)

-bf frames 使用frames B 帧,支持mpeg1,mpeg2,mpeg4

-mbd mode 宏块决策 0 FF_MB_DECISION_SIMPLE 使用mb_cmp 1 FF_MB_DECISION_BITS 2 FF_MB_DECISION_RD

-4mv 使用4个运动矢量 仅用于mpeg4

-part 使用数据划分 仅用于mpeg4

-bug param 绕过没有被自动监测到编码器的问题

-strict strictness 跟标准的严格性

-aic 使能高级帧内编码 h263+

-umv 使能无限运动矢量 h263+

-deinterlace 不采用交织方法

-interlace 强迫交织法编码 仅对mpeg2mpeg4有效。当你的输入是交织的并且你想要保持交织以最小图像损失的时候采用该选项。可选的方法是不交织,但是损失更大

-psnr 计算压缩帧的psnr

-vstats 输出视频编码统计到vstats_hhmmss.log

-vhook module 插入视频处理模块 module 包括了模块名和参数,用空格分开

D)音频选项

-ab bitrate 设置音频码率

-ar freq 设置音频采样率

-ac channels 设置通道 缺省为1

-an 不使能音频纪录

-acodec codec 使用codec编解码

E)音频/视频捕获选项

-vd device 设置视频捕获设备。比如/dev/video0

-vc channel 设置视频捕获通道 DV1394专用

-tvstd standard 设置电视标准 NTSC PAL(SECAM)

-dv1394 设置DV1394捕获

-av device 设置音频设备 比如/dev/dsp

 

F)高级选项

-map file:stream 设置输入流映射

-debug 打印特定调试信息

-benchmark 为基准测试加入时间

-hex 倾倒每一个输入包

-bitexact 仅使用位精确算法 用于编解码测试

-ps size 设置包大小,以bits为单位

-re 以本地帧频读数据,主要用于模拟捕获设备

-loop 循环输入流。只工作于图像流,用于ffserver测试

 

 

示例:

抓图 avi->jpg

ffmpeg -i "D:/video/pxgk.avi" -y -f image2 -ss 8 -t 0.001 -s 350x240 "D:/video/test/pxgk.jpg" 

 

转换 mp3->flv

ffmpeg.exe -i D:/video/山不转水转.mp3 -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 D:/video/山不转水转.flv

转换 avi->flv

ffmpeg -i "D:/video/pxgk.avi" -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 D:/video/test/pxgk.flv

转换 DAT->flv error

ffmpeg -i "D:/video/avs001.DAT" -y -ab 56 -ar 22050 -b 500 -r 15 -s 320*240 D:/video/test/avs001.flv

转换: mpg->flv

ffmpeg -i "D:/video/hx.mpg" -y -ab 56 -ar 22050 -b 500 -r 15 -s 320*240 D:/video/test/hx.flv

转换: mov->flv

ffmpeg -i "D:/video/heartbeatmv.mov" -y -ab 56 -ar 22050 -b 500 -r 15 -s 320*240 D:/video/test/heartbeatmv.flv

转换:vob->flv

ffmpeg -i "D:/video/vts.VOB" -y -ab 56 -ar 22050 -b 500 -r 15 -s 320*240 D:/video/test/vts.flv

 

 

利用mencoder转换flv 报错

命令如下:

mencoder D:/video/pxgk.avi  -vf scale=320:240 -ffourcc FLV1 -of lavf  -ovc lavc -lavcopts vcodec=flv:vbitrate=200 -srate 22050 -oac lavc -lavcopts acodec=mp3:abitrate=56 -o D:/video/test/pxgk1.flv

 

错误如下:

Forcing output FourCC to 31564c46 [FLV1].

Audio LAVC, couldn't find encoder for codec mp3.

 

Exiting...

 

命令修改如下即可:

加上如下命令参数:-oac mp3lameoac=output audio codec,输出音频编码器,这里用的mp3lame

 

 

mencoder D:/video/pxgk.avi FLV1 -of lavf -oac mp3lame -lameopts aq=9:cbr:br=64:vol=2 -ovc lavc -lavcopts vcodec=flv:vbitrate=200:acodec=mp3:abitrate=56 -vf scale=320:270,expand=320:270:::1,crop=320:270:0:0 -ofps 18 -srate 22050  -o D:/video/test/pxgk1.flv

 

 

FLV播放时不能拖放

是由FFMPEGMencoder转的FLV文件,Meta Data是损坏的,FLV播放时不能拖放。

两个修复工具:Flvtool2,Flvmdi,给flv文件加入时间标签。

 

 

Flvtool2 下载:flvtool2-1.0.6.zip

http://rubyforge.org/frs/?group_id=1096&release_id=9694

 

Flvmdi 下载:

http://www.buraks.com/flvmdi/

 

使用方法:

命令提示符下输入usage: flvmdi inFile [outFile] [/v] [/s] [/x] [/k] [/l] [/eExtraData] [/p]

 

inputFile outputFile可以是单独文件或目录,如果未指定输出文件或路径,则对原始文件覆盖。

 

 

示例:

flvmdi D:/video/test/hx1.flv D:/video/test/hx12.flv

 

flvmdi D:/video/test/hx1.flv D:/video/test/hx13.flv /s "/e guoqiang test"

CentOS mencoeder ffmpeg

1、安装yum的fpmforge源

rpm -Uhv http://apt.sw.be/redhat/el5/en/i386/rpmforge/RPMS/rpmforge-release-0.3.6-1.el5.rf.i386.rpm2

安装mencoeder、ffmpeg、flvtool2、yamdi等

yum install libgcc gcc gcc-c++ libstdc++ libstdc++-devel compat-glibc compat-libstdc++-33 libevent libevent-devel
yum install ffmpeg ffmpeg-devel mplayer mencoder flvtool2 yamdi3

执行编码的参数

mencoder /root/1.rmvb -o /root/2.flv -of lavf -oac mp3lame -lameopts abr:br=56 -ovc lavc -lavcopts vcodec=flv:vbitrate=500:mbd=2:mv0:trell:v4mv:cbp:last_pred=3:dia=4:cmp=6:vb_strategy=1 -vf scale=480:-3 -ofps 12 -srate 220504、为flv增加关键帧

flvtool2 -U 2.flv

yamdi -i 2.flv -o 3.flv  //注意添加了关键帧的视频为3.flv

rsync备份时排除指定目录

要排除指定目录,可以在客户端命令行中使用–exclude-from命令
例如
rsync -vzrtopg –progress –delete –exclude-from=/home/pcfile xxx@xxx.xxx.xxx.xxx::xxx /back/xxx

pcfile内容写成
aaa/
bbb/

这样,待同步目录中的子目录 aaa和bbb,就不在同步之列了
以下内容待定
同理,若要指定只同步某几个目录,可以用–include-from
include 和 exclude指令则可以排除或不排除指定的文件

linux 操作系统下目录创建和文件创建的限制

我们经常程序在生产环境上上线好几天了,突然不工作了,反复查找原因,发现在Linux操作系统下无法创建目录或文件了,那一般有哪些原因会导致出现这种情况呢?

1.磁盘满
最常出现的问题就是磁盘满了,第一时间查看这个原因,在linux系统下执行df命令,Use%这一列是否有100%的磁盘。

2.文件名称长度限制
linux系统下ext3文件系统内给文件/目录命名,最长只能支持127个中文字符,英文则可以支持255个字符,包含完整路径名称及目录(/)的完整文件名为4096个字符。
测试代码:

Java代码  
  1. LENTH=`for i in {1..255};do for x in a;do echo -n $x;done;done`   
  2. touch $LENTH  


当增加到256时,touch报错,File name too long

3.目录数量的限制
ext3文件系统下一级子目录是有数量限制的,一般是31998(个),为什么是这个数字,我也不清楚,网上有说是Linux为了cpu的搜索效率而规定的,要想改变数目大概要重新编译内核.
测试代码:

 
  1. for i in {1..32000};do mkdir $i;done    
  2. mkdir: cannot create directory `31999': Too many links   
  3. mkdir: cannot create directory `32000': Too many links  



4.文件个数限制
目录下对于文件个数没有限制,文件个数的限制主要取决于磁盘文件系统的inode数。
df -i或者使用tune2fs -l /dev/sdaX或者dumpe2fs -h /dev/sdaX查看可用inode数,后两个命令输出结果是一样的,但是跟df所得出的可用inode数会有些误差,至今不明白什么原因。

5.打开文件数限制(文件句柄、文件描述符)
ulimit -n 65535设置,或者/etc/security/limit.conf里设置用户打开文件数、进程数、CPU等

----------------------------------------

for i in `ls`;do echo $i;cd $i;ls -l | wc -l;cd ..;done

find ./ -type d -empty -exec rm -fr {} \;

svn强制要求提交注释--pre-commit钩子

不少开发员提交修改的时候都不写注释,导致查看历史时很费劲,也不太符合规范。有的公司要求每次提交修改时都写上bug号或者任务描述,那么如何在工具上防止开发员们不写注释呢?   利用svn的pre-commit钩子可简单实现此要求。 进入仓库project1/hooks目录
-
不少开发员提交修改的时候都不写注释,导致查看历史时很费劲,也不太符合规范。有的公司要求每次提交修改时都写上bug号或者任务描述,那么如何在工具上防止开发员们不写注释呢?

  利用svn的pre-commit钩子可简单实现此要求。

进入仓库project1/hooks目录,找到pre-commit.tmpl文件,重命名,去掉后缀.tmpl。
编辑pre-commit文件:

将:
$SVNLOOK log -t "$TXN" "$REPOS" |
   grep "[a-zA-Z0-9]" > /dev/null || exit 1
commit-access-control.pl "$REPOS" "$TXN" commit-access-control.cfg || exit 1
这三行注释掉(前面加#符号),
在此位置添加如下几行:

LOGMSG=`$SVNLOOK log -t "$TXN" "$REPOS" | grep "[a-zA-Z0-9]" | wc -c`
if [ "$LOGMSG" -lt 5 ];#要求注释不能少于5个字符,您可自定义
then
  echo -e "nLog message cann't be empty! you must input more than 5 chars as comment!." 1>&2
  exit 1
fi

保存,退出。
给pre-commit添加可执行权限:
chmod +x pre-commit

配置结束,可以使用了。

linux中编译静态库(.a)和动态库(.so)的基本方法

静态库
       在linux环境中, 使用ar命令创建静态库文件.如下是命令的选项:
          d -----从指定的静态库文件中删除文件
          m -----把文件移动到指定的静态库文件中
          p -----把静态库文件中指定的文件输出到标准输出
          q -----快速地把文件追加到静态库文件中
          r -----把文件插入到静态库文件中
          t -----显示静态库文件中文件的列表
          x -----从静态库文件中提取文件
      还有多个修饰符修改以上基本选项,详细请man ar 以下列出三个:
          a -----把新的目标文件(*.o)添加到静态库文件中现有文件之后
          b -----***************************************之前
          v -----使用详细模式
ar 命令的命令行格式如下:
      ar [-]{dmpqrtx}[abcfilNoPsSuvV] [membername] [count] archive files...
参数archive定义库的名称, files是库文件中包含的目标文件的清单, 用空格分隔每个文件.
比如创建一个静态库文件的命令如下:
      ar r libapue.a error.o errorlog.o lockreg.o
这样就了libapue.a静态库文件, 可以用 t 选项显示包含在库中的文件
      创建库文件之后,可以创建这个静态库文件的索引来帮助提高和库连接的其他程序的编译速度.使用ranlib程序创建库的索引,索引存放在库文件内部.
      ranlib libapue.a
用nm程序显示存档文件的索引,它可以显示目标文件的符号
nm libapue.a | more
如果是显示目标文件的符号:
nm error.o | more
如何使用呢?如下所示:
gcc -o test test.c libapue.a
这样就可以在test.c中调用在libapue.a中的函数了.
动态库
1.创建共享库
     gcc -shared -o libapue.so error.o errorlog.o
这样就创建了共享库!
2.编译共享库
    假设共享库位于当前目录(即跟程序文件相同的目录中)
gcc -o test -L. -lapue test.c
这样就编译出了不包含函数代码可执行文件了,但是但你运行时会发现linux动态加载器打不到libapue.so文件.
可以用ldd 命令查看可执行文件依赖什么共享库:
ldd test
如何才能让动态加载器发现库文件呢?有两种方法可以解决:
     LD_LIBRARY_PATH 环境变量  
     /etc/ld.so.conf文件
    1.环境变量
       export LD_LIBRARY_PATH="$LD_LIBRARY_PATH:."
    2.修改/etc/ld.so.conf文件.位于/etc/ld.so.conf
一般应用程序的库文件不与系统库文件放在同一个目录下,一般把应用程序的共享库文件放在/usr/local/lib下,新建一个属于自己的目录apue,然后把刚才libapue.so复制过去就行了
同时在/etc/ld.so.conf中新增一行:
/usr/local/lib/apue
以后在编译程序时加上编译选项:
-L/usr/local/lib/apue -lapue
这样就可以使用这个libapue.so共享库了!!

Linux rsync目录同步功能实现

实现目标:
 
 A 服务器上 /opt/web 目录,与B服务器上 /opt/web目录实现同步。即:B主动与A进行同步。
 
OS: Reaht AS4
 
A Server  192.168.1.2 /opt/web
B Server  192.168.1.3 /opt/web
 
一. A Server config
 
1.rsync 系统自带, 需要使用 --deamon 方式进行启动,服务端口是 TCP 873
 
2. vi /etc/xinetd.d/rsync  修改 disable =yes 为 disable =no ,修改后的文件如下
 
# default: off
# description: The rsync server is a good addition to an ftp server, as it \
#       allows crc checksumming etc.
service rsync
{
        disable = no
        socket_type     = stream
        wait            = no
        user            = root
        server          = /usr/bin/rsync
        server_args     = --daemon
        log_on_failure  += USERID
}
 
3. service   xinetd   restart,重启 xinted 服务
 
4. 编辑主要配置文件 /etc/rsyncd.conf
 
vi /etc/rsyncd.conf
 
uid = nobody
gid = nobody
use chroot = no
max connections = 4
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
 
[web]
path = /opt/web
ignore errors
read only = true
list = false
hosts allow = 192.168.0.0  # 允许的IP地址
hosts deny = 0.0.0.0/32    # 禁止的IP 地址
auth users = backup        # 认证用户名,此例是 backup
secrets file = /etc/backup.pass #认证用户的密码文件
 
5 编辑服务器的密码文件 /etc/backup.pass
vi /etc/backup.pass
backup:123456
 
6. chmod 400 /etc/backup.pass
 
二. B Server  config
 
1. 编辑rsync连接时的密码文件 /etc/rsync_client.pass
vi /etc/rsync_client.pass
123456                    # 只需要配置连接时使用的密码即可,必须与A服务器上定义的密码相同.
 
2. chmod 600 /etc/rsync_client.pass
 
3. 使用 rsync 命令连接服务器,实现文件同步
 rsync -vzrtopg --progress --delete --password-file=/etc/rsync_client.pass backup@192.168.1.2::web /opt/web
 
4. 使用 --execlude= 排除不需要同步的文件后缀名
rsync -vzrtopg --progress --delete --password-file=/etc/rsync_client.pass --exclude="*.tmp" backup@192.168.1.2::web /opt/web
 
5. 使用 --execlude-from= 排除不需要同步的目录
[root@ASB opt]# rsync -vzrtopg --progress --delete --password-file=/etc/rsync_client.pass --exclude-from=/opt/pcdir backup@192.168.1.2::web /opt/web
 
/opt/pcdir 文件的内容如下
cat /opt/pcdir
temp/
 
参数说明
   -vzrtopg里的
             v是verbose,
             z是压缩,
             r是recursive,
             topg都是保持文件原有属性如属主、时间的参数
   ----progress
              是指显示出详细的进度情况
    --delete  
             是指如果服务器端删除了这一文件,那么客户端也相应把文件删除,保持真正的一致             
   --exclude="*.tmp"
                 不包含某些文件  
   --execlude-from= 排除不需要同步的目录
   --password-file
                 指定CLIENT端密码文件存放路径
     /opt/web/  
                  指定CLIENT端存放镜象目的路径
 
选项说明
 
-v, --verbose 详细模式输出
-q, --quiet 精简输出模式
-c, --checksum 打开校验开关,强制对文件传输进行校验
-a, --archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD
-r, --recursive 对子目录以递归模式处理
-R, --relative 使用相对路径信息
 
rsync foo/bar/foo.c remote:/tmp/
 
则在/tmp目录下创建foo.c文件,而如果使用-R参数:
 
rsync -R foo/bar/foo.c remote:/tmp/
 
则会创建文件/tmp/foo/bar/foo.c,也就是会保持完全路径信息。
 
-b, --backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
--backup-dir 将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX 定义备份文件前缀
-u, --update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件。(不覆盖更新的文件)
-l, --links 保留软链结
-L, --copy-links 想对待常规文件一样处理软链结
--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
--safe-links 忽略指向SRC路径目录树以外的链结
-H, --hard-links 保留硬链结
-p, --perms 保持文件权限
-o, --owner 保持文件属主信息
-g, --group 保持文件属组信息
-D, --devices 保持设备文件信息
-t, --times 保持文件时间信息
-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间
-n, --dry-run现实哪些文件将被传输
-W, --whole-file 拷贝文件,不进行增量检测
-x, --one-file-system 不要跨越文件系统边界
-B, --block-size=SIZE 检验算法使用的块尺寸,默认是700字节
-e, --rsh=COMMAND 指定替代rsh的shell程序
--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件
--existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件
--delete 删除那些DST中SRC没有的文件
--delete-excluded 同样删除接收端那些被该选项指定排除的文件
--delete-after 传输结束以后再删除
--ignore-errors 及时出现IO错误也进行删除
--max-delete=NUM 最多删除NUM个文件
--partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输
--force 强制删除目录,即使不为空
--numeric-ids 不将数字的用户和组ID匹配为用户名和组名
--timeout=TIME IP超时时间,单位为秒
-I, --ignore-times 不跳过那些有同样的时间和长度的文件
--size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间
--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0
-T --temp-dir=DIR 在DIR中创建临时文件
--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
-P 等同于 --partial
--progress 显示备份过程
-z, --compress 对备份的文件在传输时进行压缩处理
--exclude=PATTERN 指定排除不需要传输的文件模式
--include=PATTERN 指定不排除而需要传输的文件模式
--exclude-from=FILE 排除FILE中指定模式的文件
--include-from=FILE 不排除FILE指定模式匹配的文件
--version 打印版本信息
--address 绑定到特定的地址
--config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件
--port=PORT 指定其他的rsync服务端口
--blocking-io 对远程shell使用阻塞IO
-stats 给出某些文件的传输状态
--progress 在传输时现实传输过程
--log-format=formAT 指定日志文件格式
--password-file=FILE 从FILE中得到密码
--bwlimit=KBPS 限制I/O带宽,KBytes per second
-h, --help 显示帮助信息

Linux下源码编译并配置Subversion+Apache笔记

 1.下载 httpd,apr,apr-util,subversion源码包

2.建立svnroot用户

Bash代码 
1.groupadd svn  
2.useradd svnroot -g svn  
3.passwd svn 
groupadd svn
useradd svnroot -g svn
passwd svn 
3.解压并安装apr,apr-util

4.安装httpd

Bash代码 
1.tar xvzf httpd-2.2.17.tar.gz   
2.cd httpd-2.2.17 
3../configure --prefix=/opt/apache --enable-dav --enable-so  
4.make && make install 
tar xvzf httpd-2.2.17.tar.gz
cd httpd-2.2.17
./configure --prefix=/opt/apache --enable-dav --enable-so
make && make install  5.安装Subversion

Bash代码 
1.tar xvzf subversion-1.6.9.tar.gz  
2.tar xvzf subversion-deps-1.6.9.tar.gz  
3.cd subversion-1.6.9 
4../configure --with-apxs=/opt/apache/bin/apxs --prefix=/opt/subversion --with-apr=/usr/local/apr --with-apr-util=/usr/local/apu --with-ssl --with-zlib=/usr/lib --enable-maintainer-mode  
5.make &&make install 
tar xvzf subversion-1.6.9.tar.gz
tar xvzf subversion-deps-1.6.9.tar.gz
cd subversion-1.6.9
./configure --with-apxs=/opt/apache/bin/apxs --prefix=/opt/subversion --with-apr=/usr/local/apr --with-apr-util=/usr/local/apu --with-ssl --with-zlib=/usr/lib --enable-maintainer-mode
make &&make install
 

6.建立代码仓库

Bash代码 
1.su svnroot  
2.mkdir /home/svnroot/repository  
3./opt/subversion/bin/svnadmin create /home/svnroot/repository/test  
4.chmod 700 /home/svnroot/repository  
5.su 
su svnroot
mkdir /home/svnroot/repository
/opt/subversion/bin/svnadmin create /home/svnroot/repository/test
chmod 700 /home/svnroot/repository
su
 7. 修改配置

Bash代码 
1.vi /opt/apache/conf/httpd.conf  
2.      //找到下列语句,如果没有则自行添加  
3.   LoadModule dav_svn_module modules/mod_dav_svn.so  
4.   LoadModule authz_svn_module modules/mod_authz_svn.so   
5.  //在后面添加   
6.   <Location /svn>  
7.   DAV svn  
8.   SVNParentPath /home/svnroot/repository/ //svn父目录  
9.   AuthzSVNAccessFile /home/svnroot/repository/authz.conf //权限配置文件  
10.   AuthType Basic //连接类型设置  
11.   AuthName "Subversion.tips" //连接框提示  
12.   AuthUserFile /home/svnroot/repository/authfile //用户配置文件  
13.   Require valid-user //采用何种认证  
14.   </Location>  
15.   
16.//重启apache  
17. # /opt/apache/bin/apachectl restart  
18.//打开浏览器访问http://localhost/svn/test/,如果有东西显示就说明成功。 
vi /opt/apache/conf/httpd.conf
      //找到下列语句,如果没有则自行添加
   LoadModule dav_svn_module modules/mod_dav_svn.so
   LoadModule authz_svn_module modules/mod_authz_svn.so
  //在后面添加
   <Location /svn>
   DAV svn
   SVNParentPath /home/svnroot/repository/ //svn父目录
   AuthzSVNAccessFile /home/svnroot/repository/authz.conf //权限配置文件
   AuthType Basic //连接类型设置
   AuthName "Subversion.tips" //连接框提示
   AuthUserFile /home/svnroot/repository/authfile //用户配置文件
   Require valid-user //采用何种认证
   </Location>
 
//重启apache
 # /opt/apache/bin/apachectl restart
//打开浏览器访问http://localhost/svn/test/,如果有东西显示就说明成功。 8.配置权限

Bash代码 
1.1)增加用户  
2.# htpasswd -c /home/svnroot/repository/authfile 用户名  
3.//第一次设置用户时使用-c表示新建一个用户文件。回车后输入用户密码,完成对用户的增加  
4.# htpasswd  /home/svnroot/repository/authfile 用户名(加入新的用户,就不用-c了)  
5. 
6.2)权限分配  
7.# vi /home/svnroot/repository/authz.conf   
8. [groups]  
9.admin=useradmin  
10.devteamcs = useradmin,user1,user2//这里定义了一个用户组  
11.[/]//对所有的项目,所有的用户都有读权限,admin用户有读写权限  
12.@admin = rw  
13.* = r  
14.[test:/]//对test项目,  
15.@devteamcs = rw  
16.// 在 /usr/local/apache2/conf/httpd.conf 文件中配置,找到文件中的这两行:  
17.User daemon  
18.Group daemon  
19. // 将daemon改为svnroot,组也做相应更改,让apache进程以svnroot的身份运行  
20.//改完后是这个样子  
21.User svnroot  
22.Group svn  
23.//重启apache  
24.  # /opt/apache/bin/apachectl restart  
25.访问http://localhost/svn/test ,现在需要身份验证,且通过验证后应该可以看到信息 
1)增加用户
# htpasswd -c /home/svnroot/repository/authfile 用户名
//第一次设置用户时使用-c表示新建一个用户文件。回车后输入用户密码,完成对用户的增加
# htpasswd  /home/svnroot/repository/authfile 用户名(加入新的用户,就不用-c了)

2)权限分配
# vi /home/svnroot/repository/authz.conf
 [groups]
admin=useradmin
devteamcs = useradmin,user1,user2//这里定义了一个用户组
[/]//对所有的项目,所有的用户都有读权限,admin用户有读写权限
@admin = rw
* = r
[test:/]//对test项目,
@devteamcs = rw
// 在 /usr/local/apache2/conf/httpd.conf 文件中配置,找到文件中的这两行:
User daemon
Group daemon
 // 将daemon改为svnroot,组也做相应更改,让apache进程以svnroot的身份运行
//改完后是这个样子
User svnroot
Group svn
//重启apache
  # /opt/apache/bin/apachectl restart
访问http://localhost/svn/test ,现在需要身份验证,且通过验证后应该可以看到信息 9.结束