2009年7月14日星期二

UNIX 高手的另外 10 个习惯

让我们面对现实吧:坏习惯很难改变。但是您已经熟悉的习惯可能更难克服。有时,重新审视某些事情可能让您遇到"啊哈,我没想到它能做到这一点!"的时刻。在
Michael Stutz 的优秀文章"UNIX 高手的 10 个习惯"的基础上,本文将提供另外 10
个 UNIX 命令行命令、工具和技术,可以使您成为更高效的 UNIX 命令行高手。
您应当采纳的其他 10 个好习惯包括:
使用文件名自动完成功能 (file name completion)。
使用历史扩展。
重用以前的参数。
使用 pushd 和 popd 管理目录导航。
查找大型文件。
不使用编辑器创建临时文件。
使用 curl 命令行实用工具。
最有效地利用正则表达式。
确定当前用户。
使用 awk 处理数据。

1. 使用文件名完成

果不需要在命令提示符处键入长的、令人费解的文件名,这是不是很棒呢?的确,您不需要这样做。相反,您可以配置最流行的
UNIX Shell 以使用文件名完成。该功能在各个 Shell
中的工作方式略有不同,因此我将向您展示如何在最流行的 Shell
中使用文件名完成。文件名完成使您可以更快地输入并避免错误。懒惰?也许吧。效率更高?当然!
我正在运行哪种 Shell?
如果您不知道目前使用的是哪一种 Shell,会怎么样?虽然这个诀窍不是另外 10
个好习惯的正式组成部分,但它仍然很有用。如清单 1 所示,您可以使用 echo $0
或 ps -p $$ 命令显示您正在使用的 Shell。对于我来说,运行的是 Bash Shell。
清单 1. 确定您的 Shell
$ echo $0
-bash
$ ps -p $$
PID TTY TIME CMD
6344 ttys000 0:00.02 –bash
C Shell
C Shell 支持最直接文件名完成功能。设置 filec
变量可启用该功能。(您可以使用命令 set
filec。)在您开始键入文件名后,可以按 Esc 键,Shell
将完成文件名,或完成尽可能多的部分。例如,假设您拥有名为 file1、file2 和
file3 的文件。如果您键入 f,然后按 Esc 键,将填充 file,而您必须键入 1、2
或 3 来完成相应的文件名。
Bash
Bash Shell 也提供了文件名完成,但使用 Tab 键代替 Esc 键。您在 Bash Shell
中不需要设置任何选项即可启用文件名完成,该选项是缺省设置的。Bash
还实现了其他功能。键入文件名的一部分后,按 Tab
键,如果有多个文件满足您的请求,并且您需要添加文本以选择其中一个文件,那么您可以多按
Tab 键两次,以显示与您目前键入的内容相匹配的文件的列表。使用之前名为
file1、file2 和 file3 的文件示例,首先键入 f。当您按一次 Tab 键时,Bash
完成 file;再按一次 Tab 键时,将展开列表 file1 file2 file3。
Korn Shell
对于 Korn Shell 用户,文件名完成取决于 EDITOR 变量的值。如果 EDITOR 设置为
vi,那么您键入部分名称,然后按 Esc 键,后跟反斜杠 (\) 字符。如果 EDITOR
设置为 emacs,那么您键入部分名称,然后按两次 Esc 键以完成文件名。
2. 使用历史扩展
如果您为一系列命令使用相同的文件名,会发生什么情况?当然,有一种快捷方式可以快速获得您上次使用的文件名。如清单
2 所示,!$ 命令返回前一个命令使用的文件名。从文件
this-is-a-long-lunch-menu-file.txt 中搜索单词 pickles
的出现位置。搜索结束后,使用 vi 命令来编辑
this-is-a-long-lunch-menu-file.txt
文件,而不需要重新键入文件名。您使用感叹号 (!)
来访问历史,然后使用美元符号 ($)
返回前一命令的最后字段。如果您反复用到长文件名,那么这是一个非常好的工具。
清单 2. 使用 !$ 获得前一个命令使用的文件名
$ grep pickles this-is-a-long-lunch-menu-file.txt
pastrami on rye with pickles and onions
$ vi !$
3. 重用以前的参数
!$
命令返回某个命令使用的上一个文件名参数。但如果某个命令使用多个文件名,而您只希望重用其中一个文件名,该如何做?!:1
操作符返回某个命令使用的第一个文件名。清单 3
中的示例显示可以如何将此操作符与 !$
运算符组合使用。在第一个命令中,将一个文件重新命名为更有意义的名称,但为了保持原始文件名可用,创建了一个符号链接。重新命名文件
kxp12.c 以提高可读性,然后使用 link
命令来创建到原始文件名的符号链接,以防在其他位置使用该文件名。!$
操作符返回 file_system_access.c 文件名,而 !:1 操作符返回 kxp12.c
文件名,该文件名是上个命令的第一个文件名。
清单 3. 组合使用 !$ 和 !:1
$ mv kxp12.c file_system_access.c
$ ln –s !$ !:1
4. 使用 pushd 和 popd 管理目录导航
UNIX 支持各种目录导航工具。我最喜欢的两款提高工作效率的工具是 pushd 和
popd。您当然了解 cd
命令用于更改您的当前目录。如果您要在多个目录中导航,但希望能够快速返回某个位置,该如何做?pushd
和 popd 命令创建一个虚拟目录堆栈,pushd
命令用来更改您的当前目录并将其存储在堆栈中,而 popd
命令用来从堆栈的顶部移除目录并使您返回该位置。您可以使用 dirs
命令来显示当前目录堆栈,而不会压入或弹出新目录。清单 4 显示如何使用 pushd
和 popd 命令在目录树中快速导航。
清单 4. 使用 pushd 和 popd 在目录树中导航
$ pushd .
~ ~
$ pushd /etc
/etc ~ ~
$ pushd /var
/var /etc ~ ~
$ pushd /usr/local/bin
/usr/local/bin /var /etc ~ ~
$ dirs
/usr/local/bin /var /etc ~ ~
$ popd
/var /etc ~ ~
$ popd
/etc ~ ~
$ popd
~ ~
$ popd
pushd 和 popd 命令还支持使用参数处理目录堆栈。使用 +n 或 -n 参数,其中 n
是一个数字,您可以向左或向右移动堆栈,如清单 5 所示。
清单 5. 旋转目录堆栈
$ dirs
/usr/local/bin /var /etc ~ ~
$ pushd +1
/var /etc ~ ~ /usr/local/bin
$ pushd -1
~ /usr/local/bin /var /etc ~
5. 查找大型文件
是否需要找出您的所有空闲磁盘空间被什么占用了?您可以使用以下几个工具来管理您的存储设备。如清单
6 所示,df 命令为您显示每个可用卷上已使用的块的总数,以及空闲空间的百分比。
清单 6. 确定卷的使用情况
$ df
Filesystem 512-blocks Used Available
Capacity Mounted on
/dev/disk0s2 311909984 267275264 44122720
86% /
devfs 224 224 0
100% /dev
fdesc 2 2 0
100% /dev
map -hosts 0 0 0
100% /net
map auto_home 0 0 0
100% /home
是否希望查找大型文件?使用 find 命令时附带 -size 参数。清单 7
显示了如何使用 find 命令来查找大于 10MB 的文件。请注意,-size 参数以 KB
为单位计量大小。
清单 7. 查找大于 10MB 的所有文件
$ find / -size +10000k –xdev –exec ls –lh {}\;
6. 不使用编辑器创建临时文件
以下是一个简单示例:您需要快速创建一个简单临时文件,但不希望启动您的编辑器。使用带有
> 文件重定向操作符的 cat 命令。如清单 8 所示,使用不带文件名的 cat
命令只回显向标准输入键入的任何内容;>
重定向将该输入捕获到指定的文件中。请注意,您在结束键入时必须提供文件结束字符,通常为
Ctrl-D。
清单 8. 快速创建临时文件
$ cat > my_temp_file.txt
This is my temp file text
^D
$ cat my_temp_file.txt
This is my temp file text
需要执行相同操作,但是附加到现有文件而不是创建新文件。如清单 9 所示,改用
>> 操作符。>> 文件重定向操作符向现有文件附加内容。
清单 9.快速向文件附加内容
$ cat >> my_temp_file.txt
More text
^D
$ cat my_temp_file.txt
This is my temp file text
More text
7. 使用 curl 命令行实用工具
我是否可以从命令行访问 Web?你疯了吗?没有,这就是 curl 的用途!curl
命令使您可以使用 HTTP、HTTPS、FTP、FTPS、Gopher、DICT、TELNET、LDAP 或
FILE 协议从服务器检索数据。如清单 10 所示,我可以使用 curl
命令从美国国家气象局了解我所在位置(纽约州布法罗市)的当前天气状况。当与
grep 命令组合使用时,我可以检索布法罗市的天气状况。使用 -s
命令行选项来禁止 curl 处理输出。
清单 10. 使用 curl 检索当前天气状况
$ curl –s http://www.srh.noaa.gov/data/ALY/RWRALY | grep BUFFALO
BUFFALO MOSUNNY 43 22 43 NE13 30.10R
如清单 11 所示,您也可以使用 curl 命令来下载 HTTP 托管的文件。使用 -o
参数来指定保存输出的位置。
清单 11. 使用 curl 下载 HTTP 承载的文件
$ curl -o archive.tar http://www.somesite.com/archive.tar
这实际上只是您使用 curl 命令可以完成的操作的提示。您只需在命令提示符处键入
man curl 显示 curl 命令的完整使用信息,就可以开始了解更多内容。
8. 最有效地利用正则表达式
大量 UNIX 命令使用正则表达式作为参数。从技术角度而言,正则表达式
是表示某种模式的字符串(也就是说,由字母、数字和符号组成的字符序列),用于定义零或更长的字符串。正则表达式使用元字符(例如,星号
[*] 和问号
[?])来匹配其他字符串的部分或全部内容。正则表达式不一定包含通配符,但通配符可以使正则表达式在搜索模式和处理文件时发挥更大的作用。表
1 显示了一些基本正则表达式序列。
表 1. 正则表达式序列序列 说明
脱字符 (^) 匹配出现在行首的表达式,例如 ^A
美元符号 ($) 匹配出现在行末的表达式,例如 A$
反斜杠 (\) 取消下一个字符的特殊含义,例如 \^
方括号 ([]) 匹配括起来的任一字符,例如 [aeiou](使用连字符 [-]
表示范围,例如 [0-9])。
[^ ] 匹配除括起来字符以外的任一字符,例如 [^0-9]
句点 (.) 匹配除行尾之外的任意单个字符
星号 (*) 匹配零个或多个前驱字符或表达式
\{x,y\} 匹配出现过 x 到 y 个和前面相同的内容
\{x\} 精确匹配出现过 x 个和前面相同的内容
\{x,\} 匹配出现过 x 个或更多和前面相同的内容
清单 12 显示了与 grep 命令一起使用的一些基本正则表达式。
清单 12. 使用正则表达式和 grep
$ # Lists your mail
$ grep '^From: ' /usr/mail/$USER
$ # Any line with at least one letter
$ grep '[a-zA-Z]' search-file.txt
$ # Anything not a letter or number
$ grep '[^a-zA-Z0-9] search-file.txt
$ # Find phone numbers in the form 999-9999
$ grep '[0-9]\{3\}-[0-9]\{4\}' search-file.txt
$ # Find lines with exactly one character
$ grep '^.$' search-file.txt
$ # Find any line that starts with a period "."
$ grep '^\.' search-file.txt
$ # Find lines that start with a "." and 2 lowercase letters
$ grep '^\.[a-z][a-z]' search-file.txt
有大量书籍专门讲述正则表达式。有关命令行正则表达式的深入描述,建议您阅读
developerWorks 文章"对话 UNIX,第 9 部分:正则表达式。"
9. 确定当前用户
有时,您可能希望确定某个特定用户是否运行过您的管理脚本。为找出答案,您可以使用
whoami 命令来返回当前用户的名称。清单 13 显示了独自运行的 whoami
命令;清单 14 显示了使用 whoami 确保当前用户不是根用户的 Bash 脚本的摘录。
清单 13. 从命令行使用 whoami
$ whoami
John
清单 14. 在脚本中使用 whoami
if [ $(whoami) = "root" ]
then
echo "You cannot run this script as root."
exit 1
fi
10. 使用 awk 处理数据
awk 命令似乎始终处在 Perl
的阴影下,但它对于简单、基于命令行的数据处理来说是一个快速、实用的工具。清单
15 显示了如何开始使用 awk 命令。若要获取文件中每行文本的长度,请使用
length() 函数。若要查看字符串 ing 是否出现在文件文本中,请使用 index()
函数,该函数返回 ing
首次出现的位置,这样您就可以使用它来进行进一步的字符串处理。若要
tokenize(也就是说,将一行拆分为单词长度的片段)某个字符串,请使用 split()
函数。
清单 15. 基本 awk 处理
$ cat text
testing the awk command
$ awk '{ i = length($0); print i }' text
23
$ awk '{ i = index($0,"ing"); print i}' text
5
$ awk 'BEGIN { i = 1 } { n = split($0,a," "); while (i <= n) {print a[i];
i++;} }' text
testing
the
awk
command
打印文本文件中的指定字段是一项简单的 awk 任务。在清单 16 中,sales
文件包含每个销售人员的姓名,后跟每月销售数字。您可以使用 awk
命令来快速获得每个月的销售总额。缺省情况下,awk
将每个以逗号分隔的值视为不同的字段。您使用 $n 操作符来访问每个字段。
清单 16. 使用 awk 对数据进行汇总
$cat sales
Gene,12,23,7
Dawn,10,25,15
Renee,15,13,18
David,8,21,17
$ awk -F, '{print $1,$2+$3+$4}' sales
Gene 42
Dawn 50
Renee 46
David 46
awk 命令可以很复杂并应用于广泛的情景中。若要更完整地学习 awk
命令,请从命令 man awk 开始,并参阅参考资料部分提供的资源。
结束语
成为命令行高手需要进行一些实践。按照相同的方式处理问题很简单,因为您已经习惯了。扩展您的命令行资源可以显著提高您的工作效率,并促使您朝着
UNIX 命令行高手的方向前进!

unix 高手的 10 个习惯

引言

您经常使用某个系统时,往往会陷入某种固定的使用模式。有时,您没有养成以尽可能最好的方式做事的习惯。有时,您的不良习惯甚至会导致出现混乱。纠正此类
缺点的最佳方法之一,就是有意识地采用抵制这些坏习惯的好习惯。本文提出了 10
个值得采用的 UNIX
命令行习惯——帮助您克服许多常见使用怪癖,并在该过程中提高命令行工作效率的好习惯。下面列出了这
10 个好习惯,之后对进行了更详细的描述。
采用 10 个好习惯
要采用的十个好习惯为:
在单个命令中创建目录树。
更改路径;不要移动存档。
将命令与控制操作符组合使用。
谨慎引用变量。
使用转义序列来管理较长的输入。
在列表中对命令分组。
在 find 之外使用 xargs 。
了解何时 grep 应该执行计数——何时应该绕过。
匹配输出中的某些字段,而不只是对行进行匹配。
停止对 cat 使用管道。
1. 在单个命令中创建目录树
清单 1 演示了最常见的 UNIX 坏习惯之一:一次定义一个目录树。
清单 1. 坏习惯 1 的示例:单独定义每个目录树
~ $ mkdir tmp
~ $ cd tmp
~/tmp $ mkdir a
~/tmp $ cd a
~/tmp/a $ mkdir b
~/tmp/a $ cd b
~/tmp/a/b/ $ mkdir c
~/tmp/a/b/ $ cd c
~/tmp/a/b/c $
使用 mkdir 的 -p
选项并在单个命令中创建所有父目录及其子目录要容易得多。但是即使对于知道此选项的管理员,他们在命令行上创建子目录时也仍然束缚于逐步创建每级子目录。花时间有意识地养成这个好习惯是值得的:
清单 2. 好习惯 1 的示例:使用一个命令来定义目录树
~ $ mkdir -p tmp/a/b/c
您可以使用此选项来创建整个复杂的目录树(在脚本中使用是非常理想的),而不只是创建简单的层次结构。例如:
清单 3. 好习惯 1 的另一个示例:使用一个命令来定义复杂的目录树
~ $ mkdir -p project/{lib/ext,bin,src,doc/{html,info,pdf},demo/stat/a}
过去,单独定义目录的唯一借口是您的 mkdir
实现不支持此选项,但是在大多数系统上不再是这样了。IBM、AIX®、mkdir、GNU
mkdir 和其他遵守单一 UNIX 规范 (Single UNIX Specification)
的系统现在都具有此选项。
对于仍然缺乏该功能的少数系统,您可以使用 mkdirhier
脚本(请参见参考资料),此脚本是执行相同功能的 mkdir 的包装:~ $ mkdirhier
project/{lib/ext,bin,src,doc/{html,info,pdf},demo/stat/a}
2. 更改路径;不要移动存档
另一个不良的使用模式是将 .tar
存档文件移动到某个目录,因为该目录恰好是您希望在其中提取 .tar
文件的目录。其实您根本不需要这样做。您可以随心所欲地将任何 .tar
存档文件解压缩到任何目录——这就是 -C
选项的用途。在解压缩某个存档文件时,使用 -C
选项来指定要在其中解压缩该文件的目录:
清单 4. 好习惯 2 的示例:使用选项 -C 来解压缩 .tar 存档文件
~ $ tar xvf -C tmp/a/b/c newarc.tar.gz
相对于将存档文件移动到您希望在其中解压缩它的位置,切换到该目录,然后才解压缩它,养成使用
-C 的习惯则更加可取——当存档文件位于其他某个位置时尤其如此。
3. 将命令与控制操作符组合使用
您可能已经知道,在大多数 Shell
中,您可以在单个命令行上通过在命令之间放置一个分号 (;)
来组合命令。该分号是 Shell 控制操作符,
虽然它对于在单个命令行上将离散的命令串联起来很有用,但它并不适用于所有情况。例如,假设您使用分号来组合两个命令,其中第二个命令的正确执行完全依赖
于第一个命令的成功完成。如果第一个命令未按您预期的那样退出,第二个命令仍然会运行——结果会导致失败。相反,应该使用更适当的控制操作符(本文将描述其中的部分操作符)。只要您的
Shell 支持它们,就值得养成使用它们的习惯。
仅当另一个命令返回零退出状态时才运行某个命令
使用 && 控制操作符来组合两个命令,以便仅当
第一个命令返回零退出状态时才运行第二个命令。换句话说,如果第一个命令运行成功,则第二个命令将运行。如果第一个命令失败,则第二个命令根本就不运行。例如:
清单 5. 好习惯 3 的示例:将命令与控制操作符组合使用
~ $ cd tmp/a/b/c && tar xvf ~/archive.tar
在此例中,存档的内容将提取到 ~/tmp/a/b/c
目录中,除非该目录不存在。如果该目录不存在,则 tar
命令不会运行,因此不会提取任何内容。
仅当另一个命令返回非零退出状态时才运行某个命令
类似地,||
控制操作符分隔两个命令,并且仅当第一个命令返回非零退出状态时才运行第二个命令。换句话说,如果第一个命令成功,则第二个命令不会运行。如果第一个命令失败,则第二个命令才会
运行。在测试某个给定目录是否存在时,通常使用此操作符,如果该目录不存在,则创建它:
清单 6. 好习惯 3 的另一个示例:将命令与控制操作符组合使用
~ $ cd tmp/a/b/c || mkdir -p tmp/a/b/c
您还可以组合使用本部分中描述的控制操作符。每个操作符都影响最后的命令运行:
清单 7. 好习惯 3 的组合示例:将命令与控制操作符组合使用
~ $ cd tmp/a/b/c || mkdir -p tmp/a/b/c && tar xvf -C tmp/a/b/c
~/archive.tar
4. 谨慎引用变量
始终要谨慎使用 Shell
扩展和变量名称。一般最好将变量调用包括在双引号中,除非您有不这样做的足够理由。类似地,如果您直接在字母数字文本后面使用变量名称,则还要确保将该变
量名称包括在方括号 ([]) 中,以使其与周围的文本区分开来。否则,Shell
将把尾随文本解释为变量名称的一部分——并且很可能返回一个空值。清单 8
提供了变量的各种引用和非引用及其影响的示例。
清单 8. 好习惯 4 的示例:引用(和非引用)变量
~ $ ls tmp/
a b
~ $ VAR="tmp/*"
~ $ echo $VAR
tmp/a tmp/b
~ $ echo "$VAR"
tmp/*
~ $ echo $VARa
~ $ echo "$VARa"
~ $ echo "${VAR}a"
tmp/*a
~ $ echo ${VAR}a
tmp/a
~ $
5. 使用转义序列来管理较长的输入
您或许看到过使用反斜杠 (\)
来将较长的行延续到下一行的代码示例,并且您知道大多数 Shell
都将您通过反斜杠联接的后续行上键入的内容视为单个长行。然而,您可能没有在命令行中像通常那样利用此功能。如果您的终端无法正确处理多行回绕,或者您的命令行比通常小(例如在提示符下有长路经的时候),反斜杠就特别有用。反斜杠对于了解键入的长输入行的含义也非常有用,如以下示例所示:
清单 9. 好习惯 5 的示例:将反斜杠用于长输入
~ $ cd tmp/a/b/c || \
> mkdir -p tmp/a/b/c && \
> tar xvf -C tmp/a/b/c ~/archive.tar
或者,也可以使用以下配置:
清单 10. 好习惯 5 的替代示例:将反斜杠用于长输入
~ $ cd tmp/a/b/c \
> || \
> mkdir -p tmp/a/b/c \
> && \
> tar xvf -C tmp/a/b/c ~/archive.tar
然而,当您将输入行划分到多行上时,Shell
始终将其视为单个连续的行,因为它总是删除所有反斜杠和额外的空格。
注意:在大多数 Shell
中,当您按向上箭头键时,整个多行输入将重绘到单个长输入行上。
6. 在列表中对命令分组
大多数 Shell
都具有在列表中对命令分组的方法,以便您能将它们的合计输出向下传递到某个管道,或者将其任何部分或全部流重定向到相同的地方。您一般可以通过在某个
Subshell 中运行一个命令列表或通过在当前 Shell
中运行一个命令列表来实现此目的。
在 Subshell 中运行命令列表
使用括号将命令列表包括在单个组中。这样做将在一个新的 Subshell
中运行命令,并允许您重定向或收集整组命令的输出,如以下示例所示:
清单 11. 好习惯 6 的示例:在 Subshell 中运行命令列表
~ $ ( cd tmp/a/b/c/ || mkdir -p tmp/a/b/c && \
> VAR=$PWD; cd ~; tar xvf -C $VAR archive.tar ) \
> | mailx admin -S "Archive contents"
在此示例中,该存档的内容将提取到 tmp/a/b/c/
目录中,同时将分组命令的输出(包括所提取文件的列表)通过邮件发送到地址
admin。
当您在命令列表中重新定义环境变量,并且您不希望将那些定义应用于当前 Shell
时,使用 Subshell 更可取。
在当前 Shell 中运行命令列表
将命令列表用大括号 ({}) 括起来,以在当前 Shell
中运行。确保在括号与实际命令之间包括空格,否则 Shell
可能无法正确解释括号。此外,还要确保列表中的最后一个命令以分号结尾,如以下示例所示:
清单 12. 好习惯 6 的另一个示例:在当前 Shell 中运行命令列表
~ $ { cp ${VAR}a . && chown -R guest.guest a && \
> tar cvf newarchive.tar a; } | mailx admin -S "New archive"
7. 在 find 之外使用 xargs
使用 xargs 工具作为筛选器,以充分利用从 find 命令挑选的输出。find
运行通常提供与某些条件匹配的文件列表。此列表被传递到 xargs
上,后者然后使用该文件列表作为参数来运行其他某些有用的命令,如以下示例所示:
清单 13. xargs 工具的经典用法示例
~ $ find some-file-criteria some-file-path | \
> xargs some-great-command-that-needs-filename-arguments
然而,不要将 xargs 仅看作是 find
的辅助工具;它是一个未得到充分利用的工具之一,当您养成使用它的习惯时,将会希望进行所有试验,包括以下用法。
传递空格分隔的列表
在最简单的调用形式中,xargs
就像一个筛选器,它接受一个列表(每个成员分别在单独的行上)作为输入。该工具将那些成员放置在单个空格分隔的行上:
清单 14. xargs 工具产生的输出示例
~ $ xargs
a
b
c
Control-D
a b c
~ $
您可以发送通过 xargs
来输出文件名的任何工具的输出,以便为其他某些接受文件名作为参数的工具获得参数列表,如以下示例所示:
清单 15. xargs 工具的使用示例
~/tmp $ ls -1 | xargs
December_Report.pdf README a archive.tar mkdirhier.sh
~/tmp $ ls -1 | xargs file
December_Report.pdf: PDF document, version 1.3
README: ASCII text
a: directory
archive.tar: POSIX tar archive
mkdirhier.sh: Bourne shell script text executable
~/tmp $
xargs
命令不只用于传递文件名。您还可以在需要将文本筛选到单个行中的任何时候使用它:
清单 16. 好习惯 7 的示例:使用 xargs 工具来将文本筛选到单个行中
~/tmp $ ls -l | xargs
-rw-r--r-- 7 joe joe 12043 Jan 27 20:36 December_Report.pdf -rw-r--r-- 1 \
root root 238 Dec 03 08:19 README drwxr-xr-x 38 joe joe 354082 Nov 02 \
16:07 a -rw-r--r-- 3 joe joe 5096 Dec 14 14:26 archive.tar -rwxr-xr-x 1 \
joe joe 3239 Sep 30 12:40 mkdirhier.sh
~/tmp $
谨慎使用 xargs
从技术上讲,使用 xargs 很少遇到麻烦。缺省情况下,文件结束字符串是下划线
(_);如果将该字符作为单个输入参数来发送,则它之后的所有内容将被忽略。为了防止这种情况发生,可以使用
-e 标志,它在不带参数的情况下完全禁用结束字符串。
8. 了解何时 grep 应该执行计数——何时应该绕过
避免通过管道将 grep 发送到 wc -l 来对输出行数计数。grep 的 -c
选项提供了对与特定模式匹配的行的计数,并且一般要比通过管道发送到 wc
更快,如以下示例所示:
清单 17. 好习惯 8 的示例:使用和不使用 grep 的行计数
~ $ time grep and tmp/a/longfile.txt | wc -l
2811
real 0m0.097s
user 0m0.006s
sys 0m0.032s
~ $ time grep -c and tmp/a/longfile.txt
2811
real 0m0.013s
user 0m0.006s
sys 0m0.005s
~ $
除了速度因素外,-c 选项还是执行计数的好方法。对于多个文件,带 -c 选项的
grep 返回每个文件的单独计数,每行一个计数,而针对 wc
的管道则提供所有文件的组合总计数。
然而,不管是否考虑速度,此示例都表明了另一个要避免地常见错误。这些计数方法仅提供包含匹配模式的行数——如果那就是您要查找的结果,这没什么问题。但是在行中具有某个特定模式的多个实例的情况下,这些方法无法为您提供实际匹配实例数量
的真实计数。归根结底,若要对实例计数,您还是要使用 wc 来计数。首先,使用
-o 选项(如果您的版本支持它的话)来运行 grep 命令。此选项仅
输出匹配的模式,每行一个模式,而不输出行本身。但是您不能将它与 -c
选项结合使用,因此要使用 wc -l 来对行计数,如以下示例所示:
清单 18. 好习惯 8 的示例:使用 grep 对模式实例计数
~ $ grep -o and tmp/a/longfile.txt | wc -l
3402
~ $
在此例中,调用 wc 要比第二次调用 grep 并插入一个虚拟模式(例如 grep
-c)来对行进行匹配和计数稍快一点。
9. 匹配输出中的某些字段,而不只是对行进行匹配
当您只希望匹配输出行中特定字段 中的模式时,诸如 awk 等工具要优于 grep。
下面经过简化的示例演示了如何仅列出 12 月修改过的文件。
清单 19. 坏习惯 9 的示例:使用 grep 来查找特定字段中的模式
~/tmp $ ls -l /tmp/a/b/c | grep Dec
-rw-r--r-- 7 joe joe 12043 Jan 27 20:36 December_Report.pdf
-rw-r--r-- 1 root root 238 Dec 03 08:19 README
-rw-r--r-- 3 joe joe 5096 Dec 14 14:26 archive.tar
~/tmp $
在此示例中,grep 对行进行筛选,并输出其修改日期和名称中带 Dec
的所有文件。因此,诸如 December_Report.pdf
等文件是匹配的,即使它自从一月份以来还未修改过。这可能不是您希望的结果。为了匹配特定字段中的模式,最好使用
awk,其中的一个关系运算符对确切的字段进行匹配,如以下示例所示:
清单 20. 好习惯 9 的示例:使用 awk 来查找特定字段中的模式
~/tmp $ ls -l | awk '$6 == "Dec"'
-rw-r--r-- 3 joe joe 5096 Dec 14 14:26 archive.tar
-rw-r--r-- 1 root root 238 Dec 03 08:19 README
~/tmp $
有关如何使用 awk 的更多详细信息,请参见参考资料。
10. 停止对 cat 使用管道
grep 的一个常见的基本用法错误是通过管道将 cat 的输出发送到 grep
以搜索单个文件的内容。这绝对是不必要的,纯粹是浪费时间,因为诸如 grep
这样的工具接受文件名作为参数。您根本不需要在这种情况下使用
cat,如以下示例所示:
清单 21. 好习惯和坏习惯 10 的示例:使用带和不带 cat 的 grep
~ $ time cat tmp/a/longfile.txt | grep and
2811
real 0m0.015s
user 0m0.003s
sys 0m0.013s
~ $ time grep and tmp/a/longfile.txt
2811
real 0m0.010s
user 0m0.006s
sys 0m0.004s
~ $
此错误存在于许多工具中。由于大多数工具都接受使用连字符 (-)
的标准输入作为一个参数,因此即使使用 cat 来分散 stdin
中的多个文件,参数也通常是无效的。仅当您使用带多个筛选选项之一的 cat
时,才真正有必要在管道前首先执行连接。
结束语:养成好习惯
最好检查一下您的命令行习惯中的任何不良的使用模式。不良的使用模式会降低您的速度,并且通常会导致意外错误。本文介绍了
10
个新习惯,它们可以帮助您摆脱许多最常见的使用错误。养成这些好习惯是加强您的
UNIX 命令行技能的积极步骤。

男女约会的十个尴尬场面!

  尴尬一
  经过漫长的等待,终于下雨了!虽然不大,他还是拿了一把小伞等在她下班的路上。"你没带伞?我送你回家吧!""不要紧的,雨不大,我自己走好了。伞又这么小,你自己打吧!"
  尴尬二
  请客吃饭,当然她也在。酒足饭饱,他喊了一声:这顿我请了!主动跑到总台去付帐,回来的时候后面跟了个小姐。因为钱不够。
  尴尬三
  第一次见面,走了好久了。他说:"我饿了,你呢?"
  "有一点。"
  "该吃饭了,你回家去吧。"
  "今天我家没人,我在外面吃好了。"
  "哦,我知道有一家面还不错,我们一起去吧?"
  然后一起走了两站路多一点,来到一家大排挡。
  "老板,来两碗三鲜面。素三鲜。我不要鸡蛋,你呢?也不要吧?老板,两碗都不要加鸡蛋。"
  "我有事,先走了。"
  "嗳,不是说一起吃饭的么?怎么就走呀?我送你……等等,老板,只要一碗就好了!"
  尴尬四
  她经常从他那里借书,书里也经常会夹着些小纸条。但有一次,她无意间拿错书了,发现里面有很多的纸条。当然不是给她的。
  尴尬五
   终于等到她上夜班了。他打电话过去。
  "喂,是你呀?有什么事啊?"
  "嘿嘿,没啥事……"
  "哦,我还有点事。以后没事就别打电话来了。"
  " 嘟??嘟 ??…………"
  尴尬六
  车上人很多,他本来在里面,不怎么挤。但是突然发现门口上来一位靓女!于是费尽心思向车门口挤。终于挤到她身边了,还没来得及仔细瞧,她终于忍不住了,吐了他一身,然后说了句对不起就下车了。
  尴尬七
  天赐良机:下雨,她又没带伞。于是他自告奋勇骑车送她回家,她坐在后座上为他打伞。多浪漫!没走几步,一起跌到水坑里。于是她打车先走了,他自己扛着车子回家。
  尴尬八
  他换了一身新衣服,在楼下等她。为了给她一个"惊喜",他决定从树后跳出来吓她一下。谁知跳出来的时候正巧踩在西瓜皮上,自己坐在水坑里不说,还溅了她一身的泥点。
  尴尬九
  他应邀到朋友家去玩,发现很多他送给自己女友的礼物。强压怒火一问,朋友都自豪地说是女友送的。
  尴尬十
  觉得关系很不错了,她就问:"当初你怎么想起来给我写纸条的?"
  "我给班上每个女生都写了,只有你有回音。

shell十三问笔记

常见的 shell 主要分为两大主流:
sh:
burne shell (sh)
burne again shell (bash)
csh:
c shell (csh)
tc shell (tcsh)
korn shell (ksh)
bash 是 gnu project 最成功的产品之一,自推出以来深受广大 Unix
用户喜爱,且也逐渐成为不少组织的系统标准。


echo 在预设上,在显示完 argument 之后,还会送出一个换行符号(new-line
charactor)。若你要取消这个换行符号,可利用 echo 的 -n option ,举例:
wangnc>echo "test "
test
wangnc>echo -n "test "
test wangnc>
wangnc>
事实上,echo 除了 -n options 之外,常用选项还有:
-e :启用反斜线控制字符的转换(参考下表)
-E :关闭反斜线控制字符的转换(预设如此)
-n :取消行末之换行符号(与 -e 选项下的 \c 字符同意)
关于 echo 命令所支持的反斜线控制字符如下表:
\a:ALERT / BELL (从系统喇叭送出铃声)
\b:BACKSPACE ,也就是向左删除键
\c:取消行末之换行符号
\E:ESCAPE,跳脱键
\f:FORMFEED,换页字符
\n:NEWLINE,换行字符
\r:RETURN,回车键
\t:TAB,表格跳位键
\v:VERTICAL TAB,垂直表格跳位键
\n:ASCII 八进位编码(以 x 开首为十六进制)
\\:反斜线本身
举例:
wangnc>echo "a\tb\tc\nd\te\tf"
a\tb\tc\nd\te\tf
wangnc>echo -e "a\tb\tc\nd\te\tf"
a b c
d e f
wangnc>


除了 IFS 与 CR ,常用的 meta 还有:
= : 设定变量。
$ : 作变量或运算替换(请不要与 shell prompt 搞混了)。
> :重导向 stdout。
< :重导向 stdin。
|:命令管线。
& :重导向 file descriptor ,或将命令置于背境执行。
( ):将其内的命令置于 nested subshell 执行,或用于运算或命令替换。
{ }:将其内的命令置于 non-named function 中执行,或用在变量替换的界定范围。
; :在前一个命令结束时,而忽略其返回值,继续执行下一个命令。
&& :在前一个命令结束时,若返回值为 true,继续执行下一个命令。
|| :在前一个命令结束时,若返回值为 false,继续执行下一个命令。
!:执行 history 列表中的命令
....


在 bash 中,常用的 quoting 有如下三种方法:
* hard quote:' ' (单引号),凡在 hard quote 中的所有 meta 均被关闭。
* soft quote: " " (双引号),在 soft quoe 中大部份 meta
都会被关闭,但某些则保留(如 $ )。(注二)
* escape : \ (反斜线),只有紧接在 escape (跳脱字符)之后的单一
meta才被关闭。
举例:
wangnc>A=b c
-bash: c: command not found
wangnc>A=b\ c
wangnc>echo $A
b c
wangnc>echo "$A"
b c
wangnc>echo '$A'
$A
wangnc>echo "'$A'"
'b c'
wangnc>echo '"$A"'
"$A"
wangnc>


在 bash 中,你可以用 "=" 来设定或重新定义变量的内容:
name=value
在设定变量的时侯,得遵守如下规则:
* 等号左右两边不能使用区隔符号(IFS),也应避免使用 shell 的保留字符(meta
charactor)。
* 变量名称不能使用 $ 符号。
* 变量名称的第一个字母不能是数字(number)。
* 变量名称长度不可超过 256 个字母。
* 变量名称及变量值之大小写是有区别的(case sensitive)。


可利用命令行的变量替换能力来"扩充"(append)变量值,我们使用区隔符号( :
)来达到扩充目的,使用 {} 将变量名称的范围给明确定义出来:
wangnc>A=B:C:D
wangnc>echo $A
B:C:D
wangnc>A=$A:E
wangnc>echo $A
B:C:D:E
wangnc>A=BCD
wangnc>ech $A
-bash: ech: command not found
wangnc>echo $A
BCD
wangnc>A=$AE
-bash: AE: unbound variable
wangnc>A=${A}E
wangnc>echo $A
BCDE
wangnc>


严格来说,我们在当前 shell 中所定义的变量,均属于"本地变量"(local
variable),只有经过 export 命令的"输出"处理,才能成为环境变量(environment
variable),在使用 export 的时侯,请别忘记 shell
在命令行对变量的"替换"(substitution)处理,比方说:
wangnc>A=B
wangnc>B=C
wangnc>export $A
上面的命令并未将 A 输出为环境变量,而是将 B
作输出,这是因为在这个命令行中,$A 会首先被提换出 B 然后再"塞回"作 export
的参数。


()和{}的区别:
( ) 将 command group 置于 sub-shell 去执行,也称 nested sub-shell。
{ } 则是在同一个 shell 内完成,也称为 non-named command group。
有点类似fork和source的区别


$@与$*差在哪?
若在 command line 上跑 my.sh p1 "p2 p3" p4 的话,不管是 $@ 还是 $*
,都可得到 p1 p2 p3 p4 就是了。但是,如果置于 soft quote 中的话:
"$@" 则可得到 "p1" "p2 p3" "p4" 这三个不同的词段(word)﹔
"$*" 则可得到 "p1 p2 p3 p4" 这一整串单一的词段。

shell十三问(三)

11.5
当当当~~~ 上课啰~~~ ^_^
前面提到:$ cat < file >; file 之后原本有内容的档案结果却被洗掉了﹗
要理解这一现像其实不难,这只是 priority 的问题而已:
* 在 IO Redirection 中,stdout 与 stderr 的管道会先准备好,才会从 stdin
读进资料。
也就是说,在上例中,>; file 会先将 file 清空,然后才读进 < file ,
但这时候档案已经被清空了,因此就变成读不进任何数据了...
哦~~~ 原来如此~~~~ ^_^
那... 如下两例又如何呢?
CODE:[Copy to clipboard]$ cat <>; file
$ cat < file >;>; file
嗯... 同学们,这两个答案就当练习题啰,下节课之前请交作业﹗
好了,I/O Redirection 也快讲完了,sorry,因为我也只知道这么多而已啦~~~
嘻~~ ^_^
不过,还有一样东东是一定要讲的,各位观众(请自行配乐~!#@!$%) :
---- 就是 pipe line 也﹗
谈到 pipe line ,我相信不少人都不会陌生:
我们在很多 command line 上常看到的" | "符号就是 pipe line 了。
不过,究竟 pipe line 是甚么东东呢?
别急别急... 先查一下英汉字典,看看 pipe 是甚么意思?
没错﹗它就是"水管"的意思...
那么,你能想象一下水管是怎么一根接着一根的吗?
又,每根水管之间的 input 跟 output 又如何呢?
嗯??
灵光一闪:原来 pipe line 的 I/O 跟水管的 I/O 是一模一样的:
* 上一个命令的 stdout 接到下一个命令的 stdin 去了﹗
的确如此... 不管在 command line 上你使用了多少个 pipe line ,
前后两个 command 的 I/O 都是彼此连接的﹗(恭喜:你终于开窍了﹗ ^_^ )
不过... 然而... 但是... ... stderr 呢?
好问题﹗不过也容易理解:
* 若水管漏水怎么办?
也就是说:在 pipe line 之间,前一个命令的 stderr 是不会接进下一命令的
stdin 的,
其输出,若不用 2>; 导到 file 去的话,它还是送到监视器上面来﹗
这点请你在 pipe line 运用上务必要注意的。
那,或许你又会问:
* 有办法将 stderr 也喂进下一个命令的 stdin 去吗?
(贪得无厌的家伙﹗)
方法当然是有,而且你早已学过了﹗ ^_^
我提示一下就好:
* 请问你如何将 stderr 合并进 stdout 一同输出呢?
若你答不出来,下课之后再来问我吧... (如果你脸皮真够厚的话...)
或许,你仍意尤未尽﹗或许,你曾经碰到过下面的问题:
* 在 cm1 | cm2 | cm3 ... 这段 pipe line 中,若要将 cm2
的结果存到某一档案呢?
若你写成 cm1 | cm2 >; file | cm3 的话,
那你肯定会发现 cm3 的 stdin 是空的﹗(当然啦,你都将水管接到别的水池了﹗)
聪明的你或许会如此解决:
CODE:[Copy to clipboard]cm1 | cm2 >; file ; cm3 < file
是的,你的确可以这样做,但最大的坏处是:这样一来,file I/O 会变双倍﹗
在 command 执行的整个过程中,file I/O 是最常见的最大效能杀手。
凡是有经验的 shell 操作者,都会尽量避免或降低 file I/O 的频率。
那,上面问题还有更好方法吗?
有的,那就是 tee 命令了。
* 所谓 tee 命令是在不影响原本 I/O 的情况下,将 stdout 复制一份到档案去。
因此,上面的命令行可以如此打:
CODE:[Copy to clipboard]cm1 | cm2 | tee file | cm3
在预设上,tee 会改写目标档案,若你要改为增加内容的话,那可用 -a 参数达成。
基本上,pipe line 的应用在 shell 操作上是非常广泛的,尤其是在 text
filtering 方面,
凡举 cat, more, head, tail, wc, expand, tr, grep, sed, awk, ...
等等文字处理工具,
搭配起 pipe line 来使用,你会惊觉 command line 原来是活得如此精彩的﹗
常让人有"众里寻他千百度,蓦然回首,那人却在灯火阑珊处﹗"之感... ^_^
....
好了,关于 I/O Redirection 的介绍就到此告一段落。
若日后有空的话,再为大家介绍其它在 shell 上好玩的东西﹗bye... ^_^
-------------------------------------------------------------------------------------------------
12) 你要 if 还是 case 呢?
放了一个愉快的春节假期,人也变得懒懒散散的...
只是,答应了大家的作业,还是要坚持完成就是了~~~
还记得我们在第 10 章所介绍的 return value 吗?
是的,接下来介绍的内容与之有关,若你的记忆也被假期的欢乐时光所抵消掉的话,
那,建议您还是先回去温习温习再回来...
若你记得 return value ,我想你也应该记得了 && 与 || 是甚么意思吧?
用这两个符号再配搭 command group 的话,我们可让 shell script
变得更加聪明哦。
比方说:
CODE:[Copy to clipboard]comd1 && {
comd2
comd3
} || {
comd4
comd5
}
意思是说:
假如 comd1 的 return value 为 true 的话,
然则执行 comd2 与 comd3 ,
否则执行 comd4 与 comd5 。
事实上,我们在写 shell script
的时候,经常需要用到这样那样的条件以作出不同的处理动作。
用 && 与 ||
的确可以达成条件执行的效果,然而,从"人类语言"上来理解,却不是那么直观。
更多时候,我们还是喜欢用 if .... then ... else ... 这样的 keyword
来表达条件执行。
在 bash shell 中,我们可以如此修改上一段代码:
CODE:[Copy to clipboard]if comd1
then
comd2
comd3
else
comd4
comd5
fi
这也是我们在 shell script 中最常用到的 if 判断式:
只要 if 后面的 command line 返回 true 的 return value (我们最常用 test
命令来送出 return value),
然则就执行 then 后面的命令,否则执行 else 后的命令﹔fi 则是用来结束判断式的
keyword 。
在 if 判断式中,else 部份可以不用,但 then 是必需的。
(若 then 后不想跑任何 command ,可用" : " 这个 null command 代替)。
当然,then 或 else 后面,也可以再使用更进一层的条件判断式,这在 shell
script 设计上很常见。
若有多项条件需要"依序"进行判断的话,那我们则可使用 elif 这样的 keyword :
CODE:[Copy to clipboard]if comd1; then
comd2
elif comd3; then
comd4
else
comd5
fi
意思是说:
若 comd1 为 true ,然则执行 comd2 ﹔
否则再测试 comd3 ,然则执行 comd4 ﹔
倘若 comd1 与 comd3 均不成立,那就执行 comd5 。
if 判断式的例子很常见,你可从很多 shell script
中看得到,我这里就不再举例子了...

shell 十三问 (二)

okay,到这里,若你搞得懂 fork 与 source 的不同,那接下来再接受一个挑战:
---- 那 exec 又与 source/fork 有何不同呢?
哦... 要了解 exec 或许较为复杂,尤其扯上 File Descriptor 的话...
不过,简单来说:
* exec 也是让 script 在同一个行程上执行,但是原有行程则被结束了。
也就是简而言之:原有行程会否终止,就是 exec 与 source/fork 的最大差异了。
嗯,光是从理论去理解,或许没那么好消化,不如动手"实作+思考"来的印像深刻哦。
下面让我们写两个简单的 script ,分别命令为 1.sh 及 2.sh :
1.sh
CODE:[Copy to clipboard]
#!/bin/bash
A=B
echo "PID for 1.sh before exec/source/fork&#58;$$"
export A
echo "1.sh&#58; \$A is $A"
case $1 in
exec&#41;
echo "using exec..."
exec ./2.sh ;;
source&#41;
echo "using source..."
. ./2.sh ;;
*&#41;
echo "using fork by default..."
./2.sh ;;
esac
echo "PID for 1.sh after exec/source/fork&#58;$$"
echo "1.sh&#58; \$A is $A"
2.sh
CODE:[Copy to clipboard]#!/bin/bash
echo "PID for 2.sh&#58; $$"
echo "2.sh get \$A=$A from 1.sh"
A=C
export A
echo "2.sh&#58; \$A is $A"
然后,分别跑如下参数来观察结果:
CODE:[Copy to clipboard]$ ./1.sh fork
$ ./1.sh source
$ ./1.sh exec
或是,你也可以参考 CU 上的另一贴子:
[url]http://www.chinaunix.net/forum/viewtopic.php?t=191051[/url]
好了,别忘了仔细比较输出结果的不同及背后的原因哦...
若有疑问,欢迎提出来一起讨论讨论~~~
happy scripting! ^_^
------------------------------------------------------------------------------------
7) ( ) 与 { } 差在哪?
嗯,这次轻松一下,不讲太多... ^_^
先说一下,为何要用 ( ) 或 { } 好了。
许多时候,我们在 shell 操作上,需要在一定条件下一次执行多个命令,
也就是说,要么不执行,要么就全执行,而不是每次依序的判断是否要执行下一个命令。
或是,需要从一些命令执行优先次顺中得到豁免,如算术的 2*(3+4) 那样...
这时候,我们就可引入"命令群组"(command group)的概念:将多个命令集中处理。
在 shell command line 中,一般人或许不太计较 ( ) 与 { } 这两对符号的差异,
虽然两者都可将多个命令作群组化处理,但若从技术细节上,却是很不一样的:
( ) 将 command group 置于 sub-shell 去执行,也称 nested sub-shell。
{ } 则是在同一个 shell 内完成,也称为 non-named command group。
若,你对上一章的 fork 与 source
的概念还记得了的话,那就不难理解两者的差异了。
要是在 command group
中扯上变量及其它环境的修改,我们可以根据不同的需求来使用 ( ) 或 { } 。
通常而言,若所作的修改是临时的,且不想影响原有或以后的设定,那我们就
nested sub-shell ,
反之,则用 non-named command group 。
是的,光从 command line 来看,( ) 与 { } 的差别就讲完了,够轻松吧~~~ ^_^
然而,若这两个 meta 用在其它 command meta 或领域中(如 Regular
Expression),还是有很多差别的。
只是,我不打算再去说明了,留给读者自己慢慢发掘好了...
我这里只想补充一个概念,就是 function 。
所谓的 function ,就是用一个名字去命名一个 command group
,然后再调用这个名字去执行 command group 。
从 non-named command group 来推断,大概你也可以猜到我要说的是 { }
了吧?(yes! 你真聪明﹗ ^_^ )
在 bash 中,function 的定义方式有两种:
方式一:
CODE:[Copy to clipboard]function function_name {
command1
command2
command3
....
}
方式二:
CODE:[Copy to clipboard]fuction_name &#40;&#41; {
command1
command2
command3
....
}
用哪一种方式无所谓,只是若碰到所定意的名称与现有的命令或别名(Alias)冲突的话,方式二或许会失败。
但方式二起码可以少打 function
这一串英文字母,对懒人来说(如我),又何乐不为呢?... ^_^
function
在某一程度来说,也可称为"函式",但请不要与传统编程所使用的函式(library)搞混了,毕竟两者差异很大。
惟一相同的是,我们都可以随时用"已定义的名称"来调用它们...
若我们在 shell
操作中,需要不断的重复质行某些命令,我们首先想到的,或许是将命令写成命令稿(shell
script)。
不过,我们也可以写成 function ,然后在 command line 中打上 function_name
就可当一舨的 script 来使用了。
只是若你在 shell 中定义的 function ,除了可用 unset function_name
取消外,一旦退出 shell ,function 也跟着取消。
然而,在 script 中使用 function 却有许多好处,除了可以提高整体 script
的执行效能外(因为已被加载),
还可以节省许多重复的代码...
简单而言,若你会将多个命令写成 script 以供调用的话,那,你可以将 function
看成是 script 中的 script ... ^_^
而且,透过上一章介绍的 source 命令,我们可以自行定义许许多多好用的
function ,再集中写在特定文件中,
然后,在其它的 script 中用 source 将它们加载并反复执行。
若你是 RedHat linux 的使用者,或许,已经猜得出 /etc/rc.d/init.d/functions
这个文件是作啥用的了~~~ ^_^
okay,说要轻松点的嘛,那这次就暂时写到这吧。祝大家学习愉快﹗ ^_^
------------------------------------------------------------------------------------------------
8) $(( )) 与 $( ) 还有${ } 差在哪?
我们上一章介绍了 ( ) 与 { } 的不同,这次让我们扩展一下,看看更多的变化:$(
) 与 ${ } 又是啥玩意儿呢?
在 bash shell 中,$( ) 与 ` ` (反引号) 都是用来做命令替换用(command
substitution)的。
所谓的命令替换与我们第五章学过的变量替换差不多,都是用来重组命令行:
* 完成引号里的命令行,然后将其结果替换出来,再重组命令行。
例如:
CODE:[Copy to clipboard]$ echo the last sunday is $&#40;date -d "last
sunday" +%Y-%m-%d&#41;
如此便可方便得到上一星期天的日期了... ^_^
在操作上,用 $( ) 或 ` ` 都无所谓,只是我"个人"比较喜欢用 $( ) ,理由是:
1, ` ` 很容易与 ' ' ( 单引号)搞混乱,尤其对初学者来说。
有时在一些奇怪的字形显示中,两种符号是一模一样的(直竖两点)。
当然了,有经验的朋友还是一眼就能分辩两者。只是,若能更好的避免混乱,又何乐不为呢?
^_^
2, 在多层次的复合替换中,` ` 须要额外的跳脱( \` )处理,而 $( )
则比较直观。例如:
这是错的:
CODE:[Copy to clipboard]command1 `command2 `command3` `
原本的意图是要在 command2 `command3` 先将 command3 提换出来给 command 2
处理,
然后再将结果传给 command1 `command2 ...` 来处理。
然而,真正的结果在命令行中却是分成了 `command2 ` 与 `` 两段。
正确的输入应该如下:
CODE:[Copy to clipboard]command1 `command2 \`command3\` `
要不然,换成 $( ) 就没问题了:
CODE:[Copy to clipboard]command1 $&#40;command2 $&#40;command3&#41;&#41;
只要你喜欢,做多少层的替换都没问题啦~~~ ^_^
不过,$( ) 并不是没有毙端的...
首先,` ` 基本上可用在全部的 unix shell 中使用,若写成 shell script
,其移植性比较高。
而 $( ) 并不见的每一种 shell 都能使用,我只能跟你说,若你用 bash2
的话,肯定没问题... ^_^
接下来,再让我们看 ${ } 吧... 它其实就是用来作变量替换用的啦。
一般情况下,$var 与 ${var} 并没有啥不一样。
但是用 ${ } 会比较精确的界定变量名称的范围,比方说:
CODE:[Copy to clipboard]$ A=B
$ echo $AB
原本是打算先将 $A 的结果替换出来,然后再补一个 B 字母于其后,
但在命令行上,真正的结果却是只会提换变量名称为 AB 的值出来...
若使用 ${ } 就没问题了:
CODE:[Copy to clipboard]$ echo ${A}B
BB
不过,假如你只看到 ${ } 只能用来界定变量名称的话,那你就实在太小看 bash 了﹗
有兴趣的话,你可先参考一下 cu 本版的精华文章:
[url]http://www.chinaunix.net/forum/viewtopic.php?t=201843[/url]
为了完整起见,我这里再用一些例子加以说明 ${ } 的一些特异功能:
假设我们定义了一个变量为:
file=/dir1/dir2/dir3/my.file.txt
我们可以用 ${ } 分别替换获得不同的值:
${file#*/}:拿掉第一条 / 及其左边的字符串:dir1/dir2/dir3/my.file.txt
${file##*/}:拿掉最后一条 / 及其左边的字符串:my.file.txt
${file#*.}:拿掉第一个 . 及其左边的字符串:file.txt
${file##*.}:拿掉最后一个 . 及其左边的字符串:txt
${file%/*}:拿掉最后条 / 及其右边的字符串:/dir1/dir2/dir3
${file%%/*}:拿掉第一条 / 及其右边的字符串:(空值)
${file%.*}:拿掉最后一个 . 及其右边的字符串:/dir1/dir2/dir3/my.file
${file%%.*}:拿掉第一个 . 及其右边的字符串:/dir1/dir2/dir3/my
记忆的方法为:
# 是去掉左边(在鉴盘上 # 在 $ 之左边)
% 是去掉右边(在鉴盘上 % 在 $ 之右边)
单一符号是最小匹配﹔两个符号是最大匹配。
${file:0:5}:提取最左边的 5 个字节:/dir1
${file:5:5}:提取第 5 个字节右边的连续 5 个字节:/dir2
我们也可以对变量值里的字符串作替换:
${file/dir/path}:将第一个 dir 提换为 path:/path1/dir2/dir3/my.file.txt
${file//dir/path}:将全部 dir 提换为 path:/path1/path2/path3/my.file.txt
利用 ${ } 还可针对不同的变量状态赋值(没设定、空值、非空值):
${file-my.file.txt} :假如 $file 没有设定,则使用 my.file.txt
作传回值。(空值及非空值时不作处理)
${file:-my.file.txt} :假如 $file 没有设定或为空值,则使用 my.file.txt
作传回值。 (非空值时不作处理)
${file+my.file.txt} :假如 $file 设为空值或非空值,均使用 my.file.txt
作传回值。(没设定时不作处理)
${file:+my.file.txt} :若 $file 为非空值,则使用 my.file.txt 作传回值。
(没设定及空值时不作处理)
${file=my.file.txt} :若 $file 没设定,则使用 my.file.txt 作传回值,同时将
$file 赋值为 my.file.txt 。 (空值及非空值时不作处理)
${file:=my.file.txt} :若 $file 没设定或为空值,则使用 my.file.txt
作传回值,同时将 $file 赋值为 my.file.txt 。 (非空值时不作处理)
${file?my.file.txt} :若 $file 没设定,则将 my.file.txt 输出至 STDERR。
(空值及非空值时不作处理)
${file:?my.file.txt} :若 $file 没设定或为空值,则将 my.file.txt 输出至
STDERR。 (非空值时不作处理)
tips:
以上的理解在于, 你一定要分清楚 unset 与 null 及 non-null 这三种赋值状态.
一般而言, : 与 null 有关, 若不带 : 的话, null 不受影响, 若带 : 则连 null
也受影响.
还有哦,${#var} 可计算出变量值的长度:
${#file} 可得到 27 ,因为 /dir1/dir2/dir3/my.file.txt 刚好是 27 个字节...
接下来,再为大家介稍一下 bash 的组数(array)处理方法。
一般而言,A="a b c def" 这样的变量只是将 $A 替换为一个单一的字符串,
但是改为 A=(a b c def) ,则是将 $A 定义为组数...
bash 的组数替换方法可参考如下方法:
${A[@]} 或 ${A
} 可得到 a b c def (全部组数)
${A[0]} 可得到 a (第一个组数),${A[1]} 则为第二个组数...
${#A[@]} 或 ${#A
} 可得到 4 (全部组数数量)
${#A[0]} 可得到 1 (即第一个组数(a)的长度),${#A[3]} 可得到 3
(第四个组数(def)的长度)
A[3]=xyz 则是将第四个组数重新定义为 xyz ...
诸如此类的....
能够善用 bash 的 $( ) 与 ${ } 可大大提高及简化 shell
在变量上的处理能力哦~~~ ^_^
好了,最后为大家介绍 $(( )) 的用途吧:它是用来作整数运算的。
在 bash 中,$(( )) 的整数运算符号大致有这些:
+ - * / :分别为 "加、减、乘、除"。
% :余数运算
& | ^ !:分别为 "AND、OR、XOR、NOT" 运算。
例:
CODE:[Copy to clipboard]$ a=5; b=7; c=2
$ echo $&#40;&#40; a+b*c &#41;&#41;
19
$ echo $&#40;&#40; &#40;a+b&#41;/c &#41;&#41;
6
$ echo $&#40;&#40; &#40;a*b&#41;%c&#41;&#41;
1
在 $(( )) 中的变量名称,可于其前面加 $ 符号来替换,也可以不用,如:
$(( $a + $b * $c)) 也可得到 19 的结果
此外,$(( ))
还可作不同进位(如二进制、八进位、十六进制)作运算呢,只是,输出结果皆为十进制而已:
echo $((16#2a)) 结果为 42 (16进位转十进制)
以一个实用的例子来看看吧:
假如当前的 umask 是 022 ,那么新建文件的权限即为:
CODE:[Copy to clipboard]$ umask 022
$ echo "obase=8;$&#40;&#40; 8#666 & &#40;8#777 ^ 8#$&#40;umask&#41;&#41;
&#41;&#41;" | bc
644
事实上,单纯用 (( )) 也可重定义变量值,或作 testing:
a=5; ((a++)) 可将 $a 重定义为 6
a=5; ((a--)) 则为 a=4
a=5; b=7; ((a < b)) 会得到 0 (true) 的返回值。
常见的用于 (( )) 的测试符号有如下这些:
<:小于
> ;:大于
<=:小于或等于
> ;=:大于或等于
==:等于
!=:不等于
不过,使用 (( )) 作整数测试时,请不要跟 [ ]
的整数测试搞混乱了。(更多的测试我将于第十章为大家介绍)
怎样?好玩吧.. ^_^ okay,这次暂时说这么多...
上面的介绍,并没有详列每一种可用的状态,更多的,就请读者参考手册文件啰...
-----------------------------------------------------------------------------------------------------------------
9) $@ 与 $* 差在哪?
要说 $@ 与 $* 之前,需得先从 shell script 的 positional parameter 谈起...
我们都已经知道变量(variable)是如何定义及替换的,这个不用再多讲了。
但是,我们还需要知道有些变量是 shell 内定的,且其名称是我们不能随意修改的,
其中就有 positional parameter 在内。
在 shell script 中,我们可用 $0, $1, $2, $3 ...
这样的变量分别提取命令行中的如下部份:
CODE:[Copy to clipboard]script_name parameter1 parameter2 parameter3 ...
我们很容易就能猜出 $0 就是代表 shell script 名称(路径)本身,而 $1
就是其后的第一个参数,如此类推....
须得留意的是 IFS 的作用,也就是,若 IFS 被 quoting 处理后,那么 positional
parameter 也会改变。
如下例:
CODE:[Copy to clipboard]my.sh p1 "p2 p3" p4
由于在 p2 与 p3 之间的空格键被 soft quote 所关闭了,因此 my.sh 中的 $2 是
"p2 p3" 而 $3 则是 p4 ...
还记得前两章我们提到 fucntion 时,我不是说过它是 script 中的 script 吗?
^_^
是的,function 一样可以读取自己的(有别于 script 的) postitional parameter
,惟一例外的是 $0 而已。
举例而言:假设 my.sh 里有一个 fucntion 叫 my_fun , 若在 script 中跑 my_fun
fp1 fp2 fp3 ,
那么,function 内的 $0 是 my.sh ,而 $1 则是 fp1 而非 p1 了...
不如写个简单的 my.sh script 看看吧:
CODE:[Copy to clipboard]#!/bin/bash
my_fun&#40;&#41; {
echo '$0 inside function is '$0
echo '$1 inside function is '$1
echo '$2 inside function is '$2
}
echo '$0 outside function is '$0
echo '$1 outside function is '$1
echo '$2 outside function is '$2
my_fun fp1 "fp2 fp3"
然后在 command line 中跑一下 script 就知道了:
CODE:[Copy to clipboard]chmod +x my.sh
./my.sh p1 "p2 p3"
$0 outside function is ./my.sh
$1 outside function is p1
$2 outside function is p2 p3
$0 inside function is ./my.sh
$1 inside function is fp1
$2 inside function is fp2 fp3
然而,在使用 positional parameter 的时候,我们要注意一些陷阱哦:
* $10 不是替换第 10 个参数,而是替换第一个参数($1)然后再补一个 0 于其后﹗
也就是,my.sh one two three four five six seven eigth nine ten 这样的
command line ,
my.sh 里的 $10 不是 ten 而是 one0 哦... 小心小心﹗
要抓到 ten 的话,有两种方法:
方法一是使用我们上一章介绍的 ${ } ,也就是用 ${10} 即可。
方法二,就是 shift 了。
用通俗的说法来说,所谓的 shift 就是取消 positional parameter
中最左边的参数( $0 不受影响)。
其默认值为 1 ,也就是 shift 或 shift 1 都是取消 $1 ,而原本的 $2 则变成
$1、$3 变成 $2 ...
若 shift 3 则是取消前面三个参数,也就是原本的 $4 将变成 $1 ...
那,亲爱的读者,你说要 shift 掉多少个参数,才可用 $1 取得 ${10} 呢? ^_^
okay,当我们对 positional parameter
有了基本概念之后,那再让我们看看其它相关变量吧。
首先是 $# :它可抓出 positional parameter 的数量。
以前面的 my.sh p1 "p2 p3" 为例:
由于 p2 与 p3 之间的 IFS 是在 soft quote 中,因此 $# 可得到 2 的值。
但如果 p2 与 p3 没有置于 quoting 中话,那 $# 就可得到 3 的值了。
同样的道理在 function 中也是一样的...
因此,我们常在 shell script 里用如下方法测试 script 是否有读进参数:
CODE:[Copy to clipboard]&#91; $# = 0 &#93;
假如为 0 ,那就表示 script 没有参数,否则就是有带参数...
接下来就是 $@ 与 $* :
精确来讲,两者只有在 soft quote 中才有差异,否则,都表示"全部参数"( $0
除外)。
举例来说好了:
若在 command line 上跑 my.sh p1 "p2 p3" p4 的话,
不管是 $@ 还是 $* ,都可得到 p1 p2 p3 p4 就是了。
但是,如果置于 soft quote 中的话:
"$@" 则可得到 "p1" "p2 p3" "p4" 这三个不同的词段(word)﹔
"$*" 则可得到 "p1 p2 p3 p4" 这一整串单一的词段。
我们可修改一下前面的 my.sh ,使之内容如下:
CODE:[Copy to clipboard]#!/bin/bash
my_fun&#40;&#41; {
echo "$#"
}
echo 'the number of parameter in "$@" is '$&#40;my_fun "$@"&#41;
echo 'the number of parameter in "$*" is '$&#40;my_fun "$*"&#41;
然后再执行 ./my.sh p1 "p2 p3" p4 就知道 $@ 与 $* 差在哪了 ... ^_^
10) && 与 || 差在哪?
好不容易,进入两位数的章节了... 一路走来,很辛苦吧?也很快乐吧? ^_^
在解答本章题目之前,先让我们了解一个概念:return value ﹗
我们在 shell 下跑的每一个 command 或 function
,在结束的时候都会传回父行程一个值,称为 return value 。
在 shell command line 中可用 $? 这个变量得到最"新"的一个 return value
,也就是刚结束的那个行程传回的值。
Return Value(RV) 的取值为 0-255 之间,由程序(或 script)的作者自行定议:
* 若在 script 里,用 exit RV
来指定其值,若没指定,在结束时以最后一道命令之 RV 为值。
* 若在 function 里,则用 return RV 来代替 exit RV 即可。
Return Value 的作用,是用来判断行程的退出状态(exit status),只有两种:
* 0 的话为"真"( true )
* 非 0 的话为"假"( false )
举个例子来说明好了:
假设当前目录内有一份 my.file 的文件,而 no.file 是不存在的:
CODE:[Copy to clipboard]$ touch my.file
$ ls my.file
$ echo $? # first echo
0
$ ls no.file
ls&#58; no.file&#58; No such file or directory
$ echo $? # second echo
1
$ echo $? # third echo
0
上例的第一个 echo 是关于 ls my.file 的 RV ,可得到 0 的值,因此为 true ﹔
第二个 echo 是关于 ls no.file 的 RV ,则得到非 0 的值,因此为 false ﹔
第三个 echo 是关于第二个 echo $? 的 RV ,为 0 的值,因此也为 true 。
请记住:每一个 command 在结束时都会送回 return value
的﹗不管你跑甚么样的命令...
然而,有一个命令却是"专门"用来测试某一条件而送出 return value 以供 true 或
false 的判断,
它就是 test 命令了﹗
若你用的是 bash ,请在 command line 下打 man test 或 man bash 来了解这个
test 的用法。
这是你可用作参考的最精确的文件了,要是听别人说的,仅作参考就好...
下面我只简单作一些辅助说明,其余的一律以 man 为准:
首先,test 的表示式我们称为 expression ,其命令格式有两种:
CODE:[Copy to clipboard]test expression
or&#58;
&#91; expression &#93;
(请务必注意 [ ] 之间的空格键﹗)
用哪一种格式没所谓,都是一样的效果。(我个人比较喜欢后者...)
其次,bash 的 test 目前支持的测试对像只有三种:
* string:字符串,也就是纯文字。
* integer:整数( 0 或正整数,不含负数或小数点)。
* file:文件。
请初学者一定要搞清楚这三者的差异,因为 test 所用的 expression 是不一样的。
以 A=123 这个变量为例:
* [ "$A" = 123 ]:是字符串的测试,以测试 $A 是否为 1、2、3
这三个连续的"文字"。
* [ "$A" -eq 123 ]:是整数的测试,以测试 $A 是否等于"一百二十三"。
* [ -e "$A" ]:是关于文件的测试,以测试 123 这份"文件"是否存在。
第三,当 expression 测试为"真"时,test 就送回 0 (true) 的 return value
,否则送出非 0 (false)。
若在 expression 之前加上一个 " ! "(感叹号),则是当 expression 为"假时"
才送出 0 ,否则送出非 0 。
同时,test 也允许多重的覆合测试:
* expression1 -a expression2 :当两个 exrepssion 都为 true ,才送出 0
,否则送出非 0 。
* expression1 -o expression2 :只需其中一个 exrepssion 为 true ,就送出 0
,只有两者都为 false 才送出非 0 。
例如:
CODE:[Copy to clipboard]&#91; -d "$file" -a -x "$file" &#93;
是表示当 $file 是一个目录、且同时具有 x 权限时,test 才会为 true 。
第四,在 command line 中使用 test 时,请别忘记命令行的"重组"特性,
也就是在碰到 meta 时会先处理 meta
再重新组建命令行。(这个特性我在第二及第四章都曾反复强调过)
比方说,若 test 碰到变量或命令替换时,若不能满足 expression
格式时,将会得到语法错误的结果。
举例来说好了:
关于 [ string1 = string2 ] 这个 test 格式,
在 = 号两边必须要有字符串,其中包括空(null)字符串(可用 soft quote 或 hard
quote 取得)。
假如 $A 目前没有定义,或被定议为空字符串的话,那如下的写法将会失败:
CODE:[Copy to clipboard]$ unset A
$ &#91; $A = abc &#93;
&#91;&#58; =&#58; unary operator expected
这是因为命令行碰到 $ 这个 meta 时,会替换 $A
的值,然后再重组命令行,那就变成了:
[ = abc ]
如此一来 = 号左边就没有字符串存在了,因此造成 test 的语法错误﹗
但是,下面这个写法则是成立的:
CODE:[Copy to clipboard]$ &#91; "$A" = abc &#93;
$ echo $?
1
这是因为在命令行重组后的结果为:
[ "" = abc ]
由于 = 左边我们用 soft quote 得到一个空字符串,而让 test 语法得以通过...
读者诸君请务必留意这些细节哦,因为稍一不慎,将会导至 test 的结果变了个样﹗
若您对 test 还不是很有经验的话,那在使用 test
时不妨先采用如下这一个"法则":
* 假如在 test 中碰到变量替换,用 soft quote 是最保险的﹗
若你对 quoting 不熟的话,请重新温习第四章的内容吧... ^_^
okay,关于更多的 test 用法,老话一句:请看 man page 吧﹗ ^_^
虽然洋洋洒洒讲了一大堆,或许你还在嘀咕.... 那... 那个 return value
有啥用啊?﹗
问得好﹗
告诉你:return value 的作用可大了﹗若你想让你的 shell
变"聪明"的话,就全靠它了:
* 有了 return value,我们可以让 shell 跟据不同的状态做不同的时情...
这时候,才让我来揭晓本章的答案吧~~~ ^_^
&& 与 || 都是用来"组建"多个 command line 用的:
* command1 && command2 :其意思是 command2 只有在 RV 为 0 (true)
的条件下执行。
* command1 || command2 :其意思是 command2 只有在 RV 为非 0 (false)
的条件下执行。
来,以例子来说好了:
CODE:[Copy to clipboard]$ A=123
$ &#91; -n "$A" &#93; && echo "yes! it's ture."
yes! it's ture.
$ unset A
$ &#91; -n "$A" &#93; && echo "yes! it's ture."
$ &#91; -n "$A" &#93; || echo "no, it's NOT ture."
no, it's NOT ture.
(注:[ -n string ] 是测试 string 长度大于 0 则为 true 。)
上例的第一个 && 命令行之所以会执行其右边的 echo 命令,是因为上一个 test
送回了 0 的 RV 值﹔
但第二次就不会执行,因为为 test 送回非 0 的结果...
同理,|| 右边的 echo 会被执行,却正是因为左边的 test 送回非 0 所引起的。
事实上,我们在同一命令行中,可用多个 && 或 || 来组建呢:
CODE:[Copy to clipboard]$ A=123
$ &#91; -n "$A" &#93; && echo "yes! it's ture." || echo "no, it's NOT
ture."
yes! it's ture.
$ unset A
$ &#91; -n "$A" &#93; && echo "yes! it's ture." || echo "no, it's NOT
ture."
no, it's NOT ture.
怎样,从这一刻开始,你是否觉得我们的 shell 是"很聪明"的呢? ^_^
好了,最后,布置一道习题给大家做做看、、、
下面的判断是:当 $A 被赋与值时,再看是否小于 100 ,否则送出 too big! :
CODE:[Copy to clipboard]$ A=123
$ &#91; -n "$A" &#93; && &#91; "$A" -lt 100 &#93; || echo 'too big!'
too big!
若我将 A 取消,照理说,应该不会送文字才对啊(因为第一个条件就不成立了)...
CODE:[Copy to clipboard]$ unset A
$ &#91; -n "$A" &#93; && &#91; "$A" -lt 100 &#93; || echo 'too big!'
too big!
为何上面的结果也可得到呢?
又,如何解决之呢?
(提示:修改方法很多,其中一种方法可利用第七章介绍过的 command group ...)
快﹗告我我答案﹗其余免谈....
11) >; 与 < 差在哪?
这次的题目之前我在 CU 的 shell 版已说明过了:
[url]http://bbs.chinaunix.net/forum/24/20031030/191375.html[/url]
这次我就不重写了,将贴子的内容"抄"下来就是了...
--------------
11.1
谈到 I/O redirection ,不妨先让我们认识一下 File Descriptor (FD) 。
程序的运算,在大部份情况下都是进行数据(data)的处理,
这些数据从哪读进?又,送出到哪里呢?
这就是 file descriptor (FD) 的功用了。
在 shell 程序中,最常使用的 FD 大概有三个,分别为:
0: Standard Input (STDIN)
1: Standard Output (STDOUT)
2: Standard Error Output (STDERR)
在标准情况下,这些 FD 分别跟如下设备(device)关联:
stdin(0): keyboard
stdout(1): monitor
stderr(2): monitor
我们可以用如下下命令测试一下:
CODE:[Copy to clipboard]$ mail -s test root
this is a test mail.
please skip.
^d &#40;同时按 crtl 跟 d 键&#41;
很明显,mail 程序所读进的数据,就是从 stdin 也就是 keyboard 读进的。
不过,不见得每个程序的 stdin 都跟 mail 一样从 keyboard 读进,
因为程序作者可以从档案参数读进 stdin ,如:
CODE:[Copy to clipboard]$ cat /etc/passwd
但,要是 cat 之后没有档案参数则又如何呢?
哦,请您自己玩玩看啰.... ^_^
CODE:[Copy to clipboard]$ cat
(请留意数据输出到哪里去了,最后别忘了按 ^d 离开...)
至于 stdout 与 stderr ,嗯... 等我有空再续吧... ^_^
还是,有哪位前辈要来玩接龙呢?
----------------------------------------------------------------------------------------------------------------------------------
11) >; 与 < 差在哪?
这次的题目之前我在 CU 的 shell 版已说明过了:
[url]http://bbs.chinaunix.net/forum/24/20031030/191375.html[/url]
这次我就不重写了,将贴子的内容"抄"下来就是了...
--------------
11.1
谈到 I/O redirection ,不妨先让我们认识一下 File Descriptor (FD) 。
程序的运算,在大部份情况下都是进行数据(data)的处理,
这些数据从哪读进?又,送出到哪里呢?
这就是 file descriptor (FD) 的功用了。
在 shell 程序中,最常使用的 FD 大概有三个,分别为:
0: Standard Input (STDIN)
1: Standard Output (STDOUT)
2: Standard Error Output (STDERR)
在标准情况下,这些 FD 分别跟如下设备(device)关联:
stdin(0): keyboard
stdout(1): monitor
stderr(2): monitor
我们可以用如下下命令测试一下:
CODE:[Copy to clipboard]$ mail -s test root
this is a test mail.
please skip.
^d &#40;同时按 crtl 跟 d 键&#41;
很明显,mail 程序所读进的数据,就是从 stdin 也就是 keyboard 读进的。
不过,不见得每个程序的 stdin 都跟 mail 一样从 keyboard 读进,
因为程序作者可以从档案参数读进 stdin ,如:
CODE:[Copy to clipboard]$ cat /etc/passwd
但,要是 cat 之后没有档案参数则又如何呢?
哦,请您自己玩玩看啰.... ^_^
CODE:[Copy to clipboard]$ cat
(请留意数据输出到哪里去了,最后别忘了按 ^d 离开...)
至于 stdout 与 stderr ,嗯... 等我有空再续吧... ^_^
还是,有哪位前辈要来玩接龙呢?
--------------
11.2
沿文再续,书接上一回... ^_^
相信,经过上一个练习后,你对 stdin 与 stdout 应该不难理解吧?
然后,让我们继续看 stderr 好了。
事实上,stderr 没甚么难理解的:说穿了就是"错误信息"要往哪边送而已...
比方说,若读进的档案参数是不存在的,那我们在 monitor 上就看到了:
CODE:[Copy to clipboard]$ ls no.such.file
ls&#58; no.such.file&#58; No such file or directory
若,一个命令同时产生 stdout 与 stderr 呢?
那还不简单,都送到 monitor 来就好了:
CODE:[Copy to clipboard]$ touch my.file
$ ls my.file no.such.file
ls&#58; no.such.file&#58; No such file or directory
my.file
okay,至此,关于 FD 及其名称、还有相关联的设备,相信你已经没问题了吧?
那好,接下来让我们看看如何改变这些 FD 的预设数据信道,
我们可用 < 来改变读进的数据信道(stdin),使之从指定的档案读进。
我们可用 >; 来改变送出的数据信道(stdout, stderr),使之输出到指定的档案。
比方说:
CODE:[Copy to clipboard]$ cat < my.file
就是从 my.file 读进数据
CODE:[Copy to clipboard]$ mail -s test root < /etc/passwd
则是从 /etc/passwd 读进...
这样一来,stdin 将不再是从 keyboard 读进,而是从档案读进了...
严格来说,< 符号之前需要指定一个 FD 的(之间不能有空白),
但因为 0 是 < 的默认值,因此 < 与 0< 是一样的﹗
okay,这个好理解吧?
那,要是用两个 << 又是啥呢?
这是所谓的 HERE Document ,它可以让我们输入一段文本,直到读到 <<
后指定的字符串。
比方说:
CODE:[Copy to clipboard]$ cat <<FINISH
first line here
second line there
third line nowhere
FINISH
这样的话,cat 会读进 3 行句子,而无需从 keyboard 读进数据且要等 ^d
结束输入。
至于 >; 又如何呢?
且听下回分解....
--------------
11.3
okay,又到讲古时间~~~
当你搞懂了 0< 原来就是改变 stdin 的数据输入信道之后,相信要理解如下两个
redirection 就不难了:
* 1>;
* 2>;
前者是改变 stdout 的数据输出信道,后者是改变 stderr 的数据输出信道。
两者都是将原本要送出到 monitor 的数据转向输出到指定档案去。
由于 1 是 >; 的默认值,因此,1>; 与 >; 是相同的,都是改 stdout 。
用上次的 ls 例子来说明一下好了:
CODE:[Copy to clipboard]$ ls my.file no.such.file 1>;file.out
ls&#58; no.such.file&#58; No such file or directory
这样 monitor 就只剩下 stderr 而已。因为 stdout 给写进 file.out 去了。
CODE:[Copy to clipboard]$ ls my.file no.such.file 2>;file.err
my.file
这样 monitor 就只剩下 stdout ,因为 stderr 写进了 file.err 。
CODE:[Copy to clipboard]$ ls my.file no.such.file 1>;file.out 2>;file.err
这样 monitor 就啥也没有,因为 stdout 与 stderr 都给转到档案去了...
呵~~~ 看来要理解 >; 一点也不难啦﹗是不?没骗你吧? ^_^
不过,有些地方还是要注意一下的。
首先,是 file locking 的问题。比方如下这个例子:
CODE:[Copy to clipboard]$ ls my.file no.such.file 1>;file.both 2>;file.both
从 file system 的角度来说,单一档案在单一时间内,只能被单一的 FD 作写入。
假如 stdout(1) 与 stderr(2) 都同时在写入 file.both 的话,
则要看它们在写入时否碰到同时竞争的情形了,基本上是"先抢先赢"的原则。
让我们用周星驰式的"慢镜头"来看一下 stdout 与 stderr 同时写入 file.out
的情形好了:
* 第 1, 2, 3 秒为 stdout 写入
* 第 3, 4, 5 秒为 stderr 写入
那么,这时候 stderr 的第 3 秒所写的数据就丢失掉了﹗
要是我们能控制 stderr 必须等 stdout 写完再写,或倒过来,stdout 等 stderr
写完再写,那问题就能解决。
但从技术上,较难掌控的,尤其是 FD 在作"长期性"的写入时...
那,如何解决呢?所谓山不转路转、路不转人转嘛,
我们可以换一个思维:将 stderr 导进 stdout 或将 stdout 导进 sterr
,而不是大家在抢同一份档案,不就行了﹗
bingo﹗就是这样啦:
* 2>;&1 就是将 stderr 并进 stdout 作输出
* 1>;&2 或 >;&2 就是将 stdout 并进 stderr 作输出
于是,前面的错误操作可以改为:
CODE:[Copy to clipboard]$ ls my.file no.such.file 1>;file.both 2>;&1

$ ls my.file no.such.file 2>;file.both >;&2
这样,不就皆大欢喜了吗? 呵~~~ ^_^
不过,光解决了 locking 的问题还不够,我们还有其它技巧需要了解的。
故事还没结束,别走开﹗广告后,我们再回来...﹗
--------------
11.4
okay,这次不讲 I/O Redirction ,讲佛吧...
(有没搞错?﹗网中人是否头壳烧坏了?...) 嘻~~~ ^_^
学佛的最高境界,就是"四大皆空"。至于是空哪四大块?我也不知,因为我还没到那境界...
但这个"空"字,却非常值得我们返复把玩的:
--- 色即是空、空即是色﹗
好了,施主要是能够领会"空"的禅意,那离修成正果不远矣~~~
在 linux 档案系统里,有个设备档位于 /dev/null 。
许多人都问过我那是甚么玩意儿?我跟你说好了:那就是"空"啦﹗
没错﹗空空如也的空就是 null 了....
请问施主是否忽然有所顿误了呢?然则恭喜了~~~ ^_^
这个 null 在 I/O Redirection 中可有用得很呢:
* 若将 FD1 跟 FD2 转到 /dev/null 去,就可将 stdout 与 stderr 弄不见掉。
* 若将 FD0 接到 /dev/null 来,那就是读进 nothing 。
比方说,当我们在执行一个程序时,画面会同时送出 stdout 跟 stderr ,
假如你不想看到 stderr (也不想存到档案去),那可以:
CODE:[Copy to clipboard]$ ls my.file no.such.file 2>;/dev/null
my.file
若要相反:只想看到 stderr 呢?还不简单﹗将 stdout 弄到 null 就行:
CODE:[Copy to clipboard]$ ls my.file no.such.file >;/dev/null
ls&#58; no.such.file&#58; No such file or directory
那接下来,假如单纯只跑程序,不想看到任何输出结果呢?
哦,这里留了一手上次节目没讲的法子,专门赠予有缘人﹗... ^_^
除了用 >;/dev/null 2>;&1 之外,你还可以如此:
CODE:[Copy to clipboard]$ ls my.file no.such.file &>;/dev/null
(提示:将 &>; 换成 >;& 也行啦~~! )
okay?讲完佛,接下来,再让我们看看如下情况:
CODE:[Copy to clipboard]$ echo "1" >; file.out
$ cat file.out
1
$ echo "2" >; file.out
$ cat file.out
2
看来,我们在重导 stdout 或 stderr
进一份档案时,似乎永远只获得最后一次导入的结果。
那,之前的内容呢?
呵~~~ 要解决这个问提很简单啦,将 >; 换成 >;>; 就好:
CODE:[Copy to clipboard]$ echo "3" >;>; file.out
$ cat file.out
2
3
如此一来,被重导的目标档案之内容并不会失去,而新的内容则一直增加在最后面去。
easy ? 呵 ... ^_^
但,只要你再一次用回单一的 >; 来重导的话,那么,旧的内容还是会被"洗"掉的﹗
这时,你要如何避免呢?
----备份﹗ yes ,我听到了﹗不过.... 还有更好的吗?
既然与施主这么有缘份,老纳就送你一个锦囊妙法吧:
CODE:[Copy to clipboard]$ set -o noclobber
$ echo "4" >; file.out
-bash&#58; file&#58; cannot overwrite existing file
那,要如何取消这个"限制"呢?
哦,将 set -o 换成 set +o 就行:
CODE:[Copy to clipboard]$ set +o noclobber
$ echo "5" >; file.out
$ cat file.out
5
再问:那... 有办法不取消而又"临时"盖写目标档案吗?
哦,佛曰:不可告也﹗
啊~~~ 开玩笑的、开玩笑的啦~~~ ^_^ 唉,早就料到人心是不足的了﹗
CODE:[Copy to clipboard]$ set -o noclobber
$ echo "6" >;| file.out
$ cat file.out
6
留意到没有:在 >; 后面再加个" | "就好(注意: >; 与 | 之间不能有空白哦)....
呼.... (深呼吸吐纳一下吧)~~~ ^_^
再来还有一个难题要你去参透的呢:
CODE:[Copy to clipboard]$ echo "some text here" >; file
$ cat < file
some text here
$ cat < file >; file.bak
$ cat < file.bak
some text here
$ cat < file >; file
$ cat < file
嗯?﹗注意到没有?﹗﹗
---- 怎么最后那个 cat 命令看到的 file 竟是空的?﹗
why? why? why?

shell十三问(一)

我在 CU 的日子并不长,有幸在 shell
版上与大家结缘。除了跟众前辈学习到不少技巧之外,也常看到不少朋友的问题。然而,在众多问题中,我发现许多瓶颈都源于
shell 的基础而已。每次要解说,却总有千言万语不知从何起之感...
这次,我不是来回答,而是准备了关于 shell 基础的十三个问题要问大家﹗希望
shell 学习者们能够透过寻找答案的过程,好好的将 shell
基础打扎实一点...当然了,这些问题我也会逐一解说一遍。只是,我不敢保证甚么时候能够完成这趟任务。除了时间关系外,个人功力实在有限,很怕匆忙间误导观众就糟糕了。若能抛砖引玉,诱得其它前辈出马补充,那才真的是功德一件﹗
shell 十三问:
1) 为何叫做 shell ?
2) shell prompt(PS1) 与 Carriage Return(CR) 的关系?
3) 别人 echo、你也 echo ,是问 echo 知多少?
4) " "(双引号) 与 ' '(单引号)差在哪?
5) var=value?export 前后差在哪?
6) exec 跟 source 差在哪?
7) ( ) 与 { } 差在哪?
8) $(( )) 与 $( ) 还有${ } 差在哪?
9) $@ 与 $* 差在哪?
10) && 与 || 差在哪?
11) >; 与 < 差在哪?
12) 你要 if 还是 case 呢?
13) for what? while 与 until 差在哪?
------------------------------------------------------------------------------------------------------------
1) 为何叫做 shell ?
在介绍 shell 是甚么东西之前,不妨让我们重新检视使用者与计算机系统的关系:
我们知道计算机的运作不能离开硬件,但使用者却无法直接对硬件作驱动,硬件的驱动只能透过一个称为"操作系统(Operating
System)"的软件来控管,事实上,我们每天所谈的 linux
,严格来说只是一个操作系统,我们称之为"核心(kernel)"。然而,从使用者的角度来说,使用者也没办法直接操作
kernel ,而是透过 kernel 的"外壳"程序,也就是所谓的 shell ,来与 kernel
沟通。这也正是 kernel 跟 shell 的形像命名关系。
从技术角度来说,shell
是一个使用者与系统的互动界面(interface),主要是让使用者透过命令行(command
line)来使用系统以完成工作。因此,shell
的最简单的定义就是---命令解译器(Command Interpreter):
* 将使用者的命令翻译给核心处理,
* 同时,将核心处理结果翻译给使用者。
每次当我们完成系统登入(log in),我们就取得一个互动模式的 shell ,也称为
login shell 或 primary shell。若从行程(process)角度来说,我们在 shell
所下达的命令,均是 shell 所产生的子行程。这现像,我们暂可称之为 fork
。如果是执行脚本(shell
script)的话,脚本中的命令则是由另外一个非互动模式的子 shell (sub
shell)来执行的。也就是 primary shell 产生 sub shell 的行程,sub shell
再产生 script 中所有命令的行程。
(关于行程,我们日后有机会再补充。)
这里,我们必须知道:kernel 与 shell
是不同的两套软件,而且都是可以被替换的:
* 不同的操作系统使用不同的 kernel ,
* 而在同一个 kernel 之上,也可使用不同的 shell 。
在 linux 的预设系统中,通常都可以找到好几种不同的 shell
,且通常会被列于如下档案里:
/etc/shells
不同的 shell 有着不同的功能,且也彼此各异、或说"大同小异"。常见的 shell
主要分为两大主流:
sh:
burne shell (sh)
burne again shell (bash)
csh:
c shell (csh)
tc shell (tcsh)
korn shell (ksh)
大部份的 linux 系统的预设 shell 都是 bash ,其原因大致如下两点:
* 自由软件
* 功能强大
bash 是 gnu project 最成功的产品之一,自推出以来深受广大 Unix
用户喜爱,且也逐渐成为不少组织的系统标准。
------------------------------------------------------------------
2) shell prompt(PS1) 与 Carriage Return(CR) 的关系?
当你成功登录进一个文字界面之后,大部份情形下,你会在荧幕上看到一个不断闪烁的方块或底线(视不同版本而别),
我们称之为*游标*(coursor)。游标的作用就是告诉你接下来你从键盘输入的按键所插入的位置,且每输如一键游标便向右边移动一个格子,若连续输入太多的话,则自动接在下一行输入。
假如你刚完成登录还没输入任何按键之前,你所看到的游标所在位置的同一行的左边部份,我们称之为*提示符号*(prompt)。提示符号的格式或因不同系统版本而各有不同,在
linux 上,只需留意最接近游标的一个可见的提示符号,通常是如下两者之一:
$:给一般使用者账号使用
#:给 root (管理员)账号使用
事实上,shell prompt 的意思很简单:
* 是 shell
告诉使用者:您现在可以输入命令行了。我们可以说,使用者只有在得到 shell
prompt 才能打命令行,
而 cursor 是指示键盘在命令行所输入的位置,使用者每输入一个键,cursor
就往后移动一格,直到碰到命令行读进 CR(Carriage Return,由 Enter
键产生)字符为止。CR 的意思也很简单:
* 是使用者告诉 shell:老兄你可以执行我的命令行了。
严格来说:
* 所谓的命令行,就是在 shell prompt 与 CR 字符之间所输入的文字。
(思考:为何我们这里坚持使用 CR 字符而不说 Enter
键呢?答案在后面的学习中揭晓。)
不同的命令可接受的命令行格式或有不同,一般情况下,一个标准的命令行格式为如下所列:
command-name options argument
若从技术细节来看,shell 会依据 IFS(Internal Field Seperator) 将 command
line 所输入的文字给拆解为"字段"(word)。
然后再针对特殊字符(meta)先作处理,最后再重组整行 command line
。(注意:请务必理解上两句话的意思,我们日后的学习中会常回到这里思考。)
其中的 IFS 是 shell 预设使用的字段分隔符,可以由一个及多个如下按键组成:
* 空格键(White Space)
* 表格键(Tab)
* 回车键(Enter)
系统可接受的命令名称(command-name)可以从如下途径获得:
* 明确路径所指定的外部命令
* 命令别名(alias)
* 自定功能(function)
* shell 内建命令(built-in)
* $PATH 之下的外部命令
每一个命令行均必需含用命令名称,这是不能缺少的。
---------------------------------------------------------------------------------------------
3) 别人 echo、你也 echo ,是问 echo 知多少?
承接上一章所介绍的 command line ,这里我们用 echo
这个命令加以进一步说明。温习---标准的 command line 包含三个部件:*
command_name option argument
echo 是一个非常简单、直接的 linux 命令:* 将 argument
送出至标准输出(STDOUT),通常就是在监视器(monitor)上输出。为了更好理解,不如先让我们先跑一下
echo 命令好了:
$ echo
$
你会发现只有一个空白行,然后又回到 shell prompt 上了。这是因为 echo
在预设上,在显示完 argument 之后,还会送出一个换行符号(new-line
charactor)。但是上面的 command 并没任何的 argument
,那结果就只剩一个换行符号了...
若你要取消这个换行符号,可利用 echo 的 -n option :
$ echo -n
$
不妨让我们回到 command line 的概念上来讨论上例的 echo 命令好了:
* command line 只有 command_name(echo) 及 option(-n),并没有任何 argument

要想看看 echo 的 argument ,那还不简单﹗接下来,你可试试如下的输入:
CODE:[Copy to clipboard]$ echo first line
first line
$ echo -n first line
first line $
于上两个 echo 命令中,你会发现 argument
的部份显示在你的荧幕,而换行符号则视 -n option 的有无而别。
很明显的,第二个 echo 由于换行符号被取消了,接下来的 shell prompt
就接在输出结果同一行了... ^_^
事实上,echo 除了 -n options 之外,常用选项还有:
-e :启用反斜线控制字符的转换(参考下表)
-E:关闭反斜线控制字符的转换(预设如此)
-n :取消行末之换行符号(与 -e 选项下的 \c 字符同意)
关于 echo 命令所支持的反斜线控制字符如下表:
\a:ALERT / BELL (从系统喇叭送出铃声)
\b:BACKSPACE ,也就是向左删除键
\c:取消行末之换行符号
\E:ESCAPE,跳脱键
\f:FORMFEED,换页字符
\n:NEWLINE,换行字符
\r:RETURN,回车键
\t:TAB,表格跳位键
\v:VERTICAL TAB,垂直表格跳位键
\n:ASCII 八进位编码(以 x 开首为十六进制)
\\:反斜线本身
(表格数据来自 O'Reilly 出版社之 Learning the Bash Shell, 2nd Ed.)
或许,我们可以透过实例来了解 echo 的选项及控制字符:
例一:
CODE:[Copy to clipboard]$ echo -e "a\tb\tc\nd\te\tf"
a b c
d e f
上例运用 \t 来区隔 abc 还有 def ,及用 \n 将 def 换至下一行。
例二:
CODE:[Copy to clipboard]$ echo -e
"\141\011\142\011\143\012\144\011\145\011\146"
a b c
d e f
与例一的结果一样,只是使用 ASCII 八进位编码。
例三:
CODE:[Copy to clipboard]$ echo -e
"\x61\x09\x62\x09\x63\x0a\x64\x09\x65\x09\x66"
a b c
d e f
与例二差不多,只是这次换用 ASCII 十六进制编码。
例四:
CODE:[Copy to clipboard]$ echo -ne "a\tb\tc\nd\te\bf\a"
a b c
d f $
因为 e 字母后面是删除键(\b),因此输出结果就没有 e 了。
在结束时听到一声铃向,那是 \a 的杰作﹗
由于同时使用了 -n 选项,因此 shell prompt 紧接在第二行之后。
若你不用 -n 的话,那你在 \a 后再加个 \c ,也是同样的效果。
事实上,在日后的 shell 操作及 shell script 设计上,echo
命令是最常被使用的命令之一。
比方说,用 echo 来检查变量值:
CODE:[Copy to clipboard]$ A=B
$ echo $A
B
$ echo $?
0
(注:关于变量概念,我们留到下两章才跟大家说明。)
好了,更多的关于 command line 的格式,以及 echo 命令的选项,
就请您自行多加练习、运用了...
-------------------------------------------------------------------------------------------------------------
4) " "(双引号) 与 ' '(单引号)差在哪?
还是回到我们的 command line 来吧...
经过前面两章的学习,应该很清楚当你在 shell prompt 后面敲打键盘、直到按下
Enter 的时候,
你输入的文字就是 command line 了,然后 shell
才会以行程的方式执行你所交给它的命令。
但是,你又可知道:你在 command line 输入的每一个文字,对 shell
来说,是有类别之分的呢?
简单而言(我不敢说这是精确的定议,注一),command line 的每一个 charactor
,分为如下两种:
* literal:也就是普通纯文字,对 shell 来说没特殊功能。
* meta:对 shell 来说,具有特定功能的特殊保留字符。
(注一:关于 bash shell 在处理 command line 时的顺序说明,
请参考 O'Reilly 出版社之 Learning the Bash Shell, 2nd Edition,第 177 -
180 页的说明,
尤其是 178 页的流程图 Figure 7-1 ... )
Literal 没甚么好谈的,凡举 abcd、123456 这些"文字"都是 literal ... (easy?)
但 meta 却常使我们困惑..... (confused?)
事实上,前两章我们在 command line 中已碰到两个机乎每次都会碰到的 meta :
* IFS:由 <space>; 或 <tab>; 或 <enter>; 三者之一组成(我们常用 space )。
* CR:由 <enter>; 产生。
IFS 是用来拆解 command line 的每一个词(word)用的,因为 shell command line
是按词来处理的。
而 CR 则是用来结束 command line 用的,这也是为何我们敲 <enter>;
命令就会跑的原因。
除了 IFS 与 CR ,常用的 meta 还有:
= : 设定变量。
$ : 作变量或运算替换(请不要与 shell prompt 搞混了)。
> ; :重导向 stdout。
< :重导向 stdin。
|:命令管线。
& :重导向 file descriptor ,或将命令置于背境执行。
( ):将其内的命令置于 nested subshell 执行,或用于运算或命令替换。
{ }:将其内的命令置于 non-named function 中执行,或用在变量替换的界定范围。
; :在前一个命令结束时,而忽略其返回值,继续执行下一个命令。
&& :在前一个命令结束时,若返回值为 true,继续执行下一个命令。
|| :在前一个命令结束时,若返回值为 false,继续执行下一个命令。
!:执行 history 列表中的命令
....
假如我们需要在 command line 中将这些保留字符的功能关闭的话,就需要 quoting
处理了。
在 bash 中,常用的 quoting 有如下三种方法:
* hard quote:' ' (单引号),凡在 hard quote 中的所有 meta 均被关闭。
* soft quote: " " (双引号),在 soft quoe 中大部份 meta
都会被关闭,但某些则保留(如 $ )。(注二)
* escape : \ (反斜线),只有紧接在 escape (跳脱字符)之后的单一 meta
才被关闭。
( 注二:在 soft quote 中被豁免的具体 meta 清单,我不完全知道,
有待大家补充,或透过实作来发现及理解。 )
下面的例子将有助于我们对 quoting 的了解:
CODE:[Copy to clipboard] $ A=B C # 空格键未被关掉,作为 IFS
处理。
$ C&#58; command not found.
$ echo $A
$ A="B C" # 空格键已被关掉,仅作为空格键处理。
$ echo $A
B C
在第一次设定 A 变量时,由于空格键没被关闭,command line 将被解读为:
* A=B 然后碰到<IFS>;,再执行 C 命令
在第二次设定 A 变量时,由于空格键被置于 soft quote
中,因此被关闭,不再作为 IFS :
* A=B<space>;C
事实上,空格键无论在 soft quote 还是在 hard quote 中,均会被关闭。Enter
键亦然:
CODE:[Copy to clipboard] $ A='B
>; C
>; '
$ echo "$A"
B
C
在上例中,由于 <enter>; 被置于 hard quote 当中,因此不再作为 CR
字符来处理。
这里的 <enter>; 单纯只是一个断行符号(new-line)而已,由于 command line
并没得到 CR 字符,
因此进入第二个 shell prompt (PS2,以 >; 符号表示),command line
并不会结束,
直到第三行,我们输入的 <enter>; 并不在 hard quote 里面,因此并没被关闭,
此时,command line 碰到 CR 字符,于是结束、交给 shell 来处理。
上例的 <enter>; 要是被置于 soft quote 中的话, CR 也会同样被关闭:
CODE:[Copy to clipboard] $ A="B
>; C
>; "
$ echo $A
B C
然而,由于 echo $A 时的变量没至于 soft quote
中,因此当变量替换完成后并作命令行重组时,<enter>; 会被解释为 IFS
,而不是解释为 New Line 字符。
同样的,用 escape 亦可关闭 CR 字符:
CODE:[Copy to clipboard] $ A=B\
>; C\
>;
$ echo $A
BC
上例中,第一个 <enter>; 跟第二个 <enter>; 均被 escape
字符关闭了,因此也不作为 CR 来处理,
但第三个 <enter>; 由于没被跳脱,因此作为 CR 结束 command line 。
但由于 <enter>; 键本身在 shell meta 中的特殊性,在 \ 跳脱后面,仅仅取消其
CR 功能,而不会保留其 IFS 功能。
您或许发现光是一个 <enter>; 键所产生的字符就有可能是如下这些可能:
CR
IFS
NL(New Line)
FF(Form Feed)
NULL
...
至于甚么时候会解释为甚么字符,这个我就没去深挖了,或是留给读者诸君自行慢慢摸索了...
^_^
至于 soft quote 跟 hard quote 的不同,主要是对于某些 meta 的关闭与否,以 $
来作说明:
CODE:[Copy to clipboard] $ A=B\ C
$ echo "$A"
B C
$ echo '$A'
$A
在第一个 echo 命令行中,$ 被置于 soft quote
中,将不被关闭,因此继续处理变量替换,
因此 echo 将 A 的变量值输出到荧幕,也就得到 "B C" 的结果。
在第二个 echo 命令行中,$ 被置于 hard quote 中,则被关闭,因此 $ 只是一个
$ 符号,
并不会用来作变量替换处理,因此结果是 $ 符号后面接一个 A 字母:$A 。
--------------------------------------
练习与思考:如下结果为何不同?
CODE:[Copy to clipboard] $ A=B\ C
$ echo '"$A"' # 最外面的是单引号
"$A"
$ echo "'$A'" # 最外面的是双引号
'B C'
&#40;提示:单引号及双引号,在 quoting 中均被关?#93;了。&#41;
--------------------------------------
在 CU 的 shell 版里,我发现有很多初学者的问题,都与 quoting 理解的有关。
比方说,若我们在 awk 或 sed
的命令参数中调用之前设定的一些变量时,常会问及为何不能的问题。
要解决这些问题,关键点就是:
* 区分出 shell meta 与 command meta
前面我们提到的那些 meta ,都是在 command line 中有特殊用途的,
比方说 { } 是将其内一系列 command line 置于不具名的函式中执行(可简单视为
command block ),
但是,awk 却需要用 { } 来区分出 awk 的命令区段(BEGIN, MAIN, END)。
若你在 command line 中如此输入:
CODE:[Copy to clipboard]$ awk {print $0} 1.txt
由于 { } 在 shell 中并没关闭,那 shell 就将 {print $0} 视为 command block

但同时又没有" ; "符号作命令区隔,因此就出现 awk 的语法错误结果。
要解决之,可用 hard quote :
CODE:[Copy to clipboard]$ awk '{print $0}' 1.txt
上面的 hard quote 应好理解,就是将原本的 {、<space>;、$(注三)、} 这几个
shell meta 关闭,
避免掉在 shell 中遭到处理,而完整的成为 awk 参数中的 command meta 。
( 注三:而其中的 $0 是 awk 内建的 field number ,而非 awk 的变量,
awk 自身的变量无需使用 $ 。)
要是理解了 hard quote 的功能,再来理解 soft quote 与 escape 就不难:
CODE:[Copy to clipboard]awk "{print \$0}" 1.txt
awk \{print\ \$0\} 1.txt
然而,若你要改变 awk 的 $0 的 0 值是从另一个 shell 变量读进呢?
比方说:已有变量 $A 的值是 0 ,那如何在 command line 中解决 awk 的 $$A 呢?
你可以很直接否定掉 hard quoe 的方案:
CODE:[Copy to clipboard]$ awk '{print $$A}' 1.txt
那是因为 $A 的 $ 在 hard quote 中是不能替换变量的。
聪明的读者(如你!),经过本章学习,我想,应该可以解释为何我们可以使用如下操作了吧:
CODE:[Copy to clipboard]A=0
awk "{print \$$A}" 1.txt
awk \{print\ \$$A\} 1.txt
awk '{print $'$A'}' 1.txt
awk '{print $'"$A"'}' 1.txt # 注:"$A" 包在 soft quote 中
或许,你能举出更多的方案呢.... ^_^
--------------------------------------
练习与思考:请运用本章学到的知识分析如下两串讨论:
[url]http://bbs.chinaunix.net/forum/viewtopic.php?t=207178[/url]
[url]http://bbs.chinaunix.net/forum/viewtopic.php?t=216729[/url]
-----------------------------------------------------------------------------------------------------------------------
5) var=value?export 前后差在哪?
这次让我们暂时丢开 command line ,先来了解一下 bash 变量(variable)吧...
所谓的变量,就是就是利用一个特定的"名称"(name)来存取一段可以变化的"值"(value)。
*设定(set)*
在 bash 中,你可以用 "=" 来设定或重新定义变量的内容:
name=value
在设定变量的时侯,得遵守如下规则:
* 等号左右两边不能使用区隔符号(IFS),也应避免使用 shell
的保留字符(meta charactor)。
* 变量名称不能使用 $ 符号。
* 变量名称的第一个字母不能是数字(number)。
* 变量名称长度不可超过 256 个字母。
* 变量名称及变量值之大小写是有区别的(case sensitive)。
如下是一些变量设定时常见的错误:
A= B :不能有 IFS
1A=B :不能以数字开头
$A=B :名称不能有 $
a=B :这跟 a=b 是不同的
如下则是可以接受的设定:
A=" B" :IFS 被关闭了 (请参考前面的 quoting 章节)
A1=B :并非以数字开头
A=$B :$ 可用在变量值内
This_Is_A_Long_Name=b :可用 _
连接较长的名称或值,且大小写有别。
*变量替换(substitution)*
Shell
之所以强大,其中的一个因素是它可以在命令行中对变量作替换(substitution)处理。
在命令行中使用者可以使用 $ 符号加上变量名称(除了在用 =
号定义变量名称之外),
将变量值给替换出来,然后再重新组建命令行。
比方:
CODE:[Copy to clipboard] $ A=ls
$ B=la
$ C=/tmp
$ $A -$B $C
(注意:以上命令行的第一个 $ 是 shell prompt ,并不在命令行之内。)
必需强调的是,我们所提的变量替换,只发生在 command line
上面。(是的,让我们再回到 command line 吧﹗)
仔细分析最后那行 command line ,不难发现在被执行之前(在输入 CR 字符之前),
$
符号会对每一个变量作替换处理(将变量值替换出来再重组命令行),最后会得出如下命令行:
CODE:[Copy to clipboard] ls -la /tmp
还记得第二章我请大家"务必理解"的那两句吗?若你忘了,那我这里再重贴一遍:
QUOTE:
若从技术细节来看,shell 会依据 IFS(Internal Field Seperator) 将 command
line 所输入的文字给拆解为"字段"(word)。
然后再针对特殊字符(meta)先作处理,最后再重组整行 command line 。
这里的 $ 就是 command line 中最经典的 meta 之一了,就是作变量替换的﹗
在日常的 shell 操作中,我们常会使用 echo 命令来查看特定变量的值,例如:
CODE:[Copy to clipboard] $ echo $A -$B $C
我们已学过, echo 命令只单纯将其 argument
送至"标准输出"(STDOUT,通常是我们的荧幕)。
所以上面的命令会在荧幕上得到如下结果:
CODE:[Copy to clipboard] ls -la /tmp
这是由于 echo 命令在执行时,会先将 $A(ls)、$B(la)、跟 $C(/tmp)
给替换出来的结果。
利用 shell 对变量的替换处理能力,我们在设定变量时就更为灵活了:
A=B
B=$A
这样,B 的变量值就可继承 A 变量"当时"的变量值了。
不过,不要以"数学罗辑"来套用变量的设定,比方说:
A=B
B=C
这样并不会让 A 的变量值变成 C 。再如:
A=B
B=$A
A=C
同样也不会让 B 的值换成 C 。
上面是单纯定义了两个不同名称的变量:A 与 B ,它们的值分别是 B 与 C 。
若变量被重复定义的话,则原有旧值将被新值所取代。(这不正是"可变的量"吗?
^_^)
当我们在设定变量的时侯,请记着这点:
* 用一个名称储存一个数值
仅此而已。
此外,我们也可利用命令行的变量替换能力来"扩充"(append)变量值:
A=B:C:D
A=$A:E
这样,第一行我们设定 A 的值为 "B:C:D",然后,第二行再将值扩充为 "A:B:C:E"

上面的扩充范例,我们使用区隔符号( : )来达到扩充目的,
要是没有区隔符号的话,如下是有问题的:
A=BCD
A=$AE
因为第二次是将 A 的值继承 $AE 的提换结果,而非 $A 再加 E ﹗
要解决此问题,我们可用更严谨的替换处理:
A=BCD
A=${A}E
上例中,我们使用 {} 将变量名称的范围给明确定义出来,
如此一来,我们就可以将 A 的变量值从 BCD 给扩充为 BCDE 。
(提示:关于 ${name}
事实上还可做到更多的变量处理能力,这些均属于比较进阶的变量处理,
现阶段暂时不介绍了,请大家自行参考数据。如 CU 的贴子:
[url]http://www.chinaunix.net/forum/viewtopic.php?t=201843[/url]
)
* export *
严格来说,我们在当前 shell 中所定义的变量,均属于"本地变量"(local
variable),
只有经过 export 命令的"输出"处理,才能成为环境变量(environment variable):
CODE:[Copy to clipboard] $ A=B
$ export A
或:
CODE:[Copy to clipboard] $ export A=B
经过 export 输出处理之后,变量 A 就能成为一个环境变量供其后的命令使用。
在使用 export 的时侯,请别忘记 shell
在命令行对变量的"替换"(substitution)处理,
比方说:
CODE:[Copy to clipboard] $ A=B
$ B=C
$ export $A
上面的命令并未将 A 输出为环境变量,而是将 B 作输出,
这是因为在这个命令行中,$A 会首先被提换出 B 然后再"塞回"作 export 的参数。
要理解这个 export ,事实上需要从 process 的角度来理解才能透彻。
我将于下一章为大家说明 process 的观念,敬请留意。
*取消变量*
要取消一个变量,在 bash 中可使用 unset 命令来处理:
CODE:[Copy to clipboard] unset A
与 export 一样,unset 命令行也同样会作变量替换(这其实就是 shell
的功能之一),
因此:
CODE:[Copy to clipboard] $ A=B
$ B=C
$ unset $A
事实上所取消的变量是 B 而不是 A 。
此外,变量一旦经过 unset
取消之后,其结果是将整个变量拿掉,而不仅是取消其变量值。
如下两行其实是很不一样的:
CODE:[Copy to clipboard] $ A=
$ unset A
第一行只是将变量 A 设定为"空值"(null value),但第二行则让变量 A 不在存在。
虽然用眼睛来看,这两种变量状态在如下命令结果中都是一样的:
CODE:[Copy to clipboard] $ A=
$ echo $A
$ unset A
$ echo $A
请学员务必能识别 null value 与 unset
的本质区别,这在一些进阶的变量处理上是很严格的。
比方说:
CODE:[Copy to clipboard] $ str= # 设为 null
$ var=${str=expr} # 定义 var
$ echo $var
$ echo $str
$ unset str # 取消
$ var=${str=expr} # 定义 var
$ echo $var
expr
$ echo $str
expr
聪明的读者(yes, you!),稍加思考的话,
应该不难发现为何同样的 var=${str=expr} 在 null 与 unset 之下的不同吧?
若你看不出来,那可能是如下原因之一:
a. 你太笨了
b. 不了解 var=${str=expr} 这个进阶处理
c. 对本篇说明还没来得及消化吸收
e. 我讲得不好
不知,你选哪个呢?.... ^_^
-----------------------------------------------------------------------------------------------------
6) exec 跟 source 差在哪?
这次先让我们从 CU Shell 版的一个实例贴子来谈起吧:
( [url]http://www.chinaunix.net/forum/viewtopic.php?t=194191[/url] )
例中的提问是:
QUOTE:
cd /etc/aa/bb/cc可以执行
但是把这条命令写入shell时shell不执行!
这是什么原因呀!
我当时如何回答暂时别去深究,先让我们了解一下行程(process)的观念好了。
首先,我们所执行的任何程序,都是由父行程(parent
process)所产生出来的一个子行程(child process),
子行程在结束后,将返回到父行程去。此一现像在 linux 系统中被称为 fork 。
(为何要程为 fork 呢?嗯,画一下图或许比较好理解... ^_^ )
当子行程被产生的时候,将会从父行程那里获得一定的资源分配、及(更重要的是)继承父行程的环境﹗
让我们回到上一章所谈到的"环境变量"吧:
* 所谓环境变量其实就是那些会传给子行程的变量。
简单而言,"遗传性"就是区分本地变量与环境变量的决定性指标。
然而,从遗传的角度来看,我们也不难发现环境变量的另一个重要特征:
*
环境变量只能从父行程到子行程单向继承。换句话说:在子行程中的环境如何变更,均不会影响父行程的环境。
接下来,再让我们了解一下命令脚本(shell script)的概念。
所谓的 shell script 讲起来很简单,就是将你平时在 shell prompt
后所输入的多行 command line 依序写入一个文件去而已。
其中再加上一些条件判断、互动界面、参数运用、函数调用、等等技巧,得以让
script 更加"聪明"的执行,
但若撇开这些技巧不谈,我们真的可以简单的看成 script
只不过依次执行预先写好的命令行而已。
再结合以上两个概念(process + script),那应该就不难理解如下这句话的意思了:
* 正常来说,当我们执行一个 shell script 时,其实是先产生一个 sub-shell
的子行程,然后 sub-shell 再去产生命令行的子行程。
然则,那让我们回到本章开始时所提到的例子再从新思考:
QUOTE:
cd /etc/aa/bb/cc可以执行
但是把这条命令写入shell时shell不执行!
这是什么原因呀!
我当时的答案是这样的:
QUOTE:
因为,一般我们跑的 shell script 是用 subshell 去执行的。
从 process 的观念来看,是 parent process 产生一个 child process 去执行,
当 child 结束后,会返回 parent ,但 parent 的环境是不会因 child
的改变而改变的。
所谓的环境元数很多,凡举 effective id, variable, workding dir 等等...
其中的 workding dir ($PWD) 正是楼主的疑问所在:
当用 subshell 来跑 script 的话,sub shell 的 $PWD 会因为 cd 而变更,
但当返回 primary shell 时,$PWD 是不会变更的。
能够了解问题的原因及其原理是很好的,但是?如何解决问题恐怕是我们更感兴趣的﹗是吧?^_^
那好,接下来,再让我们了解一下 source 命令好了。
当你有了 fork 的概念之后,要理解 source 就不难:
* 所谓 source 就是让 script 在当前 shell 内执行、而不是产生一个 sub-shell
来执行。
由于所有执行结果均于当前 shell 内完成,若 script
的环境有所改变,当然也会改变当前环境了﹗
因此,只要我们要将原本单独输入的 script 命令行变成 source
命令的参数,就可轻易解决前例提到的问题了。
比方说,原本我们是如此执行 script 的:
CODE:[Copy to clipboard]./my.script
现在改成这样即可:
CODE:[Copy to clipboard]source ./my.script
或:
. ./my.script
说到这里,我想,各位有兴趣看看 /etc 底下的众多设定文件,
应该不难理解它们被定议后,如何让其它 script 读取并继承了吧?
若然,日后你有机会写自己的 script ,应也不难专门指定一个设定文件以供不同的
script 一起"共享"了...