meisw's blog

将Windows/dos格式的换行(CRLF)转成Unix格式(LF)

awk '{ sub(/\r$/,""); print }'

这条语句使用了sub(regex,repl,[string])函数。此函数将匹配regex的string替换成repl，如果没有提供string参数，则$0将会被默认使用。$0的含义在上一篇已经介绍过，代表整行。

这句话其实是将\r删除，然后print语句在行后自动添加一个ORS，也就是默认的\n。

将Unix格式的换行(LF)换成Windows/dos格式(CRLF)

awk '{ sub(/$/,"\r"); print }'

这句话同样使用了sub函数，它将长度为0的行结束符$替换成\r，也就是CR。然后print语句在后面添加一个ORS，使每行最后以CRLF结束。

在Windows下，将Unix格式的换行换成Windows/dos格式的换行符

awk 1

这条语句不是在所有情况下都可以用，要视使用的awk版本是不是能识别Unix格式的换行而定。如果能，那么它会读出每个句子，然后输出并用CRLF结束。1其实就是{ print }的简写形式。

删除行首的空格和制表符

awk '{ sub(/^[ \t]+/,""); print }'

和前面的例子相似，sub函数将[ \t]+用空字符串替换，达到删除行首空格的目的。

删除行首和行末的空格

awk '{ gsub(/^[ \t]+|[ \t]+$/,""); print }'

这条语句使用了一个新函数gsub，它和sub的区别在于它会替换句子里面的所有匹配。如果仅仅是要删除字段间的空格，你可以这样

awk '{ $1=$1; print }'

这是条很取巧的语句，看起来是什么也没作。awk会在你给字段重新赋值的时候对$0重新进行架构，用OFS也就是单个空格分隔所有字段，这样以来所有的多余的空格就消失了。

在每行首加5个空格

awk '{ sub(/^/,"     "); print }'

同上，sub将行首符替换为5个空格，达到了在行首添加空格的目的。

让内容在79个字符宽的页面上右对齐

awk '{ printf "%79s\n", $0 }'

同上一篇，又使用了printf函数。

让内容在79个字符宽的页面上居中对齐

awk '{ l=length(); s=int((79-l)/2); printf "%"(s+l)"s\n", $0 }'

第一句用length函数计算当前行内容的长度，第二句计算行首应该添加多少空格，第三句让内容在s+l宽度靠右对齐。

把foo替换成bar

awk '{ sub(/foo/,"bar"); print }'

同上，sub函数将每行中第一个foo换成了bar。但是，如果想要把每行中所有的foo都替换成bar，你需要

awk '{ gsub(/foo/,"bar"); print }'

另外一种方法就是使用gensub函数

awk '{ $0=gensub(/foo/,"bar",4); print }'

这条语句的不同在于它只是将每行第四次出现的foo替换成bar，它的原型是gensub(regex,s,h[,t])，它将字符串t中第h个regex替换成s，如果没有提供t参数，那么默认t就是$0。gensub不是一个标准函数，你只有在GNU Awk或者netBSD带的awk里面才能用到它。

在含有baz的行里面，把foo替换成bar

awk '/baz/ { sub(/foo/,"bar") }; {print}'

(真的没什么好说的)

在不含baz的行里，把foo替换成bar

awk '!/baz/ { gsub(/foo/, "bar") }; { print }'

跟上一句的差别是用!让搜到baz的返回为假。

把scarlet或者ruby或者puce替换成red

awk '{ gsub(/scarlet|ruby|puce/,"red"); print }'

(再懒一次)

让文本首位倒置，模仿tac

awk '{ a[i++] = $0} END { for (j=i-1; j>=0;) print a[j--] }'

首先，把每一行的内容放到数组a里面。在最后，让变量j从a的最大编号变到0，从后望前逐行输出a里面的内容。

把以\结束的行同下一行相接

awk '/\\$/ { sub(/\\$/,""); getline t; print $0 t; next }; 1'

首先查找以\结束的行，并删除\。然后getline函数获取下一行的内容，输出当前行（去掉了\）和下一行的相接后的内容。并用next跳过后面的1避免重复输出。如果当前行行末没有\，会直接执行1输出。

将所有用户名排序并输出

awk -F ":" '{ print $1 | "sort" }' /etc/passwd

这里首先用-F指定了分隔符为冒号，然后用|指定输出的内容逐行pipe给外部程序sort。(这写法真是奇怪)。

将前两个字段倒序输出

awk '{ print $2, $1 }' file

没什么好说的。

将每行里面的前两个字段交换位置

awk '{ temp = $1; $1 = $2; $2 = temp; print }'

因为要输出整行，只好重新给$1和$2赋值，用个临时变量做中转。

删除每行的第二个字段

awk '{ $2 = ""; print }'

就是把第二个字段赋值为空字符串

把每行的所有字段倒序输出

awk '{ for (i=NF; i>0; i--) printf("%s ", $i); printf ("\n") }'

没什么好说的

删除连续的重复行

awk 'a != $0; { a = $0 }'

前一句省略了action，选择输出整行内容与a不一样的；后一句省略了pattern，把当前行的内容赋值给a。a在这个例子中的左右是记录上一行的内容。

删除非连续的重复行

awk '!a[$0]++'

这一句真是很有ee的风范！把当前行的内容作为数组a的索引，如果a里面已经有了$0的记录，即遇到了重复，pattern的值为0，不输出。

把每5行用逗号相连

awk 'ORS=NR%5?",":"\n"'

这里在每行输出前，对ORS重新进行定义，如果行号能被5整除则为\n，否则为逗号。（也很天书的一句）

比如现在AWK处理到第五行。第一行没有进行操作，2,3,4,5行进行了操作，那么NR=5,FNR=4

 NR==FNR 表示从起始行到当前行，awk都进行了操作，比如修改，添加等等 

简单来说，NR就是当前读取多少行，FNR就是当前修改了多少行，FNR<=NR

输出为

不过严谨的用法还是用

awk 'BEGIN{RS="#";OFS=","}{NF=NF;print}' file

或awk 'BEGIN{RS="#";OFS=","}{$1=$1;print}' file



因为如果file中有空行或$1为空的行

awk 'BEGIN{RS="#";OFS=","}NF=NF' file

awk 'BEGIN{RS="#";OFS=","}$1=$1' file

的用法会丢失这些行

http://blog.chinaunix.net/u3/91453/showart_1818733.html

http://man.lupaworld.com/content/manage/ringkee/awk.htm

[root@asmboy ~]# more tes
1        sldj
1        sldfjf
2        lsdf
1        sdsl
2        ls
[root@asmboy ~]# awk '$1==1{if(i++)printf ","$2;else printf $2}END{print ""}' tes
sldj,sldfjf,sdsl
[root@asmboy ~]# awk '$1==2{if(i++)printf ","$2;else printf $2}END{print ""}' tes
lsdf,ls

        <IfModule mod_rewrite.c>
        RewriteEngine On
        RewriteRule ^(.*)/archiver/((fid|tid)-[\w\-]+\.html)$ $1/archiver/index.php?$2
        RewriteRule ^(.*)/forum-([0-9]+)-([0-9]+)\.html$ $1/forumdisplay.php?fid=$2&page=$3
        RewriteRule ^(.*)/thread-([0-9]+)-([0-9]+)-([0-9]+)\.html$ $1/viewthread.php?tid=$2&extra=page\%3D$3&page=$3
        RewriteRule ^(.*)/space-(username|uid)-(.+)\.html$ $1/space.php?$2=$3
        RewriteRule ^(.*)/tag-(.+)\.html$ $1/tag.php?name=$2
        </IfModule>

vi main/fopen_wrappers.c

/* {{{ php_check_open_basedir
*/
PHPAPI int php_check_open_basedir_ex(const char *path, int warn TSRMLS_DC)
{
        /* Only check when open_basedir is available */
        if (PG(open_basedir) && *PG(open_basedir)) {
                char *pathbuf;
                char *ptr;
                char *end;
                // add by anxsoft.com
                char *env_doc_root;
                if(PG(doc_root)){
                        env_doc_root = estrdup(PG(doc_root));
                }else{
                        env_doc_root = sapi_getenv("DOCUMENT_ROOT", sizeof("DOCUMENT_ROOT")-1 TSRMLS_CC);
                }
                if(env_doc_root){
                        int        res_root = php_check_specific_open_basedir(env_doc_root, path TSRMLS_CC);
                        efree(env_doc_root);
                        if (res_root == 0) {
                                return 0;
                        }
                        if (res_root == -2) {
                                errno = EPERM;
                                return -1;
                        }
                }
                // add by anxsoft.com


                pathbuf = estrdup(PG(open_basedir));

                ptr = pathbuf;

                while (ptr && *ptr) {
                        end = strchr(ptr, DEFAULT_DIR_SEPARATOR);
                        if (end != NULL) {
                                *end = '\0';
                                end++;
                        }

                        if (php_check_specific_open_basedir(ptr, path TSRMLS_CC) == 0) {
                                efree(pathbuf);
                                return 0;
                        }

                        ptr = end;
                }
                if (warn) {
                        php_error_docref(NULL TSRMLS_CC, E_WARNING, "open_basedir restriction in effect. File(%s) is not within the allowed path(s): (%s)", path, PG(open_basedir));
                }
                efree(pathbuf);
                errno = EPERM; /* we deny permission to open it */
                return -1;
        }

        /* Nothing to check... */
        return 0;
}
/* }}} */

然后在 php.in的open_basedir配置
open_basedir = "/tmp/:/var/tmp/"

---------------------------

出现错误：

PHP Warning: Unknown: open_basedir restriction in effect. File() is not within the allowed path(s): (/www/:/tmp/) in Unknown on line 0

下载eaccelerator 0.9.6后先不要安装，解包后找到eaccelerator.c这个文件，打开第1156行，这样的：
if (PG(open_basedir) && php_check_open_basedir(realname TSRMLS_CC)) {
修改成：
if (PG(open_basedir) && php_check_open_basedir(file_handle->filename TSRMLS_CC)) {

一、单用户模式；

单用户模式要求我们输入root用户的密码，否则您无法登录单用户模式；如果您丢失了root用户的密码，并不能用单用户模式来重设您的root密码；

另外单用户模式还有一个前提是您的grub 或者lilo 是能正常工作的；并且您知道您的系统问题发生在哪里，当以单用户模式登录时，您能打开文件系统的写操作，然后进行您想要进行的系统修复；

可能有的弟兄会说“我真的不知道系统哪块出了问题”，呵，如果真的不知道，那我也无能为力了，因为本文档主要讲述登录模式，并不是讲述如何修复系统的；

1、以grub 系统引导管理器，单用户登录方法；

在grub 启动后，移动键盘到Linux的启动项；按e键；然后再移动键盘到类似下面的一行，也就是kernel的那行：

把光标移动这行后，再按一下e键，进入编辑这行；在行尾条一个空格 ，然后输入 linux single，也就是类似如下的：

结束编辑，按回车返回；

接着我们要启动系统，按一下b键启动；

当进入单用户模式运行后，系统提示我们输入root密码；输入正确后会进入系统；您可以用df -h 来查看文件系统挂载位置等，也可以用fdisk -l 来查看分区等；但对文件系统的写操作，可能还要看下面的；

单用户进入系统后，可能系统是只读的；要运行下面的命令；

2、lilo 引导管理器单用户模式；

在boot:处输入

当进入单用户模式运行后，系统提示我们输入root密码；输入正确后会进入系统；您可以用df -h 来查看文件系统挂载位置等，也可以用fdisk -l 来查看分区等；但对文件系统的写操作，可能还要看下面的；

单用户进入系统后，可能系统是只读的；要运行下面的命令；

二、linux rescue 修复模式；

Linux的修复模式就是 linux rescue；修复模式并不需要系统密码，当进入修复模式后，系统会提示我们要挂载哪个分区上的文件系统，我们根据自己的系统情况来选择就就是了。登录完成后，系统也会提示所在分区的文件系统会被挂载到哪个目录；如果您不知道挂载在哪里，请通过 df -h 来查看；

修复模式需要安装盘的第一张或独立的修复盘；比如 Fedora 就有专门的修复盘；其实修复盘在一定意义上来说类似livecd，是不需要安装到硬盘也能运行系统；然后通过mount 来挂载文件系统；其实当我们执行linux rescue 时，象Fedora 这类的系统，会有一些提示，比如他提示他要mount 哪个分区，我们选择一下就行了；

执行修复模式时，需要以下几个步骤；

其一：在BIOS中，设置首个启动驱动器为CDROM；
其二；找出系统安装盘的第一张；放入CDROM ；当光盘运行时，会提示安装的界面；

在boot:后面输入 linux rescue ，然后按回车；

进入修复模式，我们能做些什么呢？？什么都可以做，比如挂载usb盘进行数据备份；修改系统中的配置文件... ... 重新设置root密码、挂载文件系统 ... ... 只要能想到，大多都可以完成；

三、跨越控制台登录；

真正的跨越控制台登录是不需要输入root密码的，如果您把root密码丢失，就要想到跨越控制台登录；我们前面所说的linux rescue 从本质上来说，就是跨越控制台登录，因为无需要密码验证就能登录系统；

跨越控制台登录主要包括：借grub和lilo 跨越控制台登录； linux rescue 模式；第三方livecd 系统和第三方Linux系统；

1、通过grub和lilo 引导，跨越控制台登录；


1）如果您用的是grub进行系统引导；

在grub 启动后，移动键盘到Linux的启动项；按e键；然后再移动键盘到类似下面的一行，也就是kernel的那行：

把光标移动这行后，再按一下e键，进入编辑这行；在行尾条一个空格 ，然后输入 linux single，也就是类似如下的：

结束编辑，按回车返回；

接着我们要启动系统，按一下b键启动；

可能系统是只读的；要运行下面的命令；

然后我们可以通过 df -h 来查看文件系统的加载情况；既然都把文件系统挂载了，有什么活干不了的呢？重设root密码，备份文件... ...

比如重设root密码；

2）如果您用lilo 进行系统引导；

在boot:处输入

当进入系统后，您可以用df -h 来查看文件系统挂载位置等，也可以用fdisk -l 来查看分区等；但对文件系统的写操作，可能还要看下面的；

可能系统是只读的；要运行下面的命令；

2、linux rescue ；

请参考前面第二点所说的修复模式；

3、借linux的livecd光盘 或第三方linux系统；

linux的livecd版本是无需安装的linux 系统，在光盘上就可以运行的linux 系统； livecd 大多是用来修复之用，livecd 集成了常用的系统操作工具；

第三方Linux系统是指你的机器上安装一个以上的Linux系统，如果其中一个发生问题，我们就可以用另一个来修复；

livecd 和第三方linux系统来修复已经被破坏的Linux ，常用的工具有mount 和chroot等等 ；如果您只是简单的更改存在问题的系统文件，用mount 就足够了。chroot 工具可以改变/，进而进入另一个系统，这个工具的确有用。

我们还是举个例子来说明如何通过用mount和chroot；

至于机器中第三方Linux和Livecd的使用比较简单，这里就不多说了；

livecd就是在光盘上运行的linux ，您可以找一个livecd的发行版本刻录一下就能用了，使用简单方便；

下载地址：

http://www.frozentech.com/content/livecd.php

常用的有 SLAX，Knoppix，Damn Small Linux，Ubuntu ... ...

大体都差不多，下载一个小的备用也行，就看您怎么用了；

通过livecd linux 或其它linux 来修复已经破坏的Linux步骤如下：

1）mount 挂载文件系统；

注：执行mount 及chroot时，要以root权限运行，以下同；

比如存在问题的系统位于 /dev/hda5 ，如果您不知道哪个分区是linux的，您可以通过fdsik -l 来查看；

既然把/dev/hda5分区的文件系统已经挂载了，我们就能对已经挂载的文件系统进行写操作；如果是简单的备份和文件修改，是完全能行的；

注意：在写操作的过程中，要倍加不心，在操作某个文件的时候，要先备份；当出现不能mount的情况，可能是您的当前所用的内核不支持相应的文件系统；如果系统要求指定文件系统的时候，请看如下的例子；

mount -t 文件系统类型 磁盘分区 挂载目的目录

对于linux的文件系统类型主要有：reiserfs，ext3，ext2；具体用什么文件系统类型，你最明白；如果您还是不知道，就一个一个的尝试；比如我的hda5是reiserfs的，可以用下面的命令来挂载；

2）chroot 到已经挂载的文件系统；

chroot这个工具很有用，很多Linux都支持chroot切换到另一个文件系统中，然后进行一系列系统包的安装和系统配置；这并不是说任何文件系统都能chroot切入 ，首先这个文件系统中得具备系统运行的一定的工具和环境，比如/bin和/sbin 目录是拥有等....

用中文表达不清楚，还是举例来说明；

比如我的机器中有两个Linux系统，一个运行正常，另一个有点问题（比如是root密码忘记了），我想通过正常的系统来修复另一个；首先我们进行的是mount ，也就是前面所说的，然后下一步就是chroot ；通过chroot 切换到要修复的文件系统中；

比如存在问题的系统位于 /dev/hda5

上面我们就通过chroot 命令完成了通过一个系统到另一个系统的跨控制台登录；Livecd 如果要完成此任务，也是通过这样过程完成的。

我们既然已经登录到有问题的系统了，可以进行相应的修复工作，比如对root密码的恢复，软件包的安装，相应文件的修改... ... 我想您应该知道怎么做，对不对？？？

有些发行版的安装盘类似livecd ，比如slackware 的安装盘的第一张，当他启动到让你输入用户名和密码进行安装时，我们不必输入什么，或者直接输入root ，就能进入cdrom 虚拟环境了；这时我们就用前面所说mount加载文件系统，然后chroot挂载的文件系统；

四、后记； 正在写文件系统的管理，可能要花几天时间；努力之中；

五、关于本文；

看到论坛的弟兄还在大呼丢了root密码怎么恢复，虽然坛里也有不少文档，但大多没有形成系统，为了解决问题而重写此文，可能有的弟兄需要这样的文档；既然有“市场”，我就写，没有什么大不了的；有的弟兄认为是小题大作，就当我锻炼身体好了；这样的文档谁都会写，没有什么难的；