系统管理 类目

合格的运维工程师必须是一名出色的系统管理员，工欲善其事，必先利其器，本博客会介绍一些系统管理相关的技巧。

Bash One-Liners Explained 译文（四）

2013-12-22 系统管理 4,712 人浏览过 7 个评论

这是 Bash One-Liners Explained 系列的第四篇文章。在这一篇里，我会给大家介绍 Bash 命令行历史功相关的内容。我会选择用最合适的 Bash 方法，各种常见的语法和技巧，向各位阐明如何用 Bash 内置的命令和 Bash 编程语言来完成各式各样的任务。

1. 清除命令行历史

$ rm ~/.bash_history

Bash 将历史执行的命令都保存在文件.bash_history中，该文件位于你的家目录下。为了清除命令行历史，只要把这个文件删除即可。

注意，当你执行完退出后，最后一个rm ~/.bash_history命令依然会被记录下来。如果你想隐藏清除的操作命令，请看下一条。

2. 当前会话下停止记录命令行历史

$ unset HISTFILE

环境变量HISTFILE指向命令行执行历史保存的目标文件路径，如果你重置了该变量，Bash 就不会保存历史。

另外一种方法是将它指向/dev/null：

$ HISTFILE=/dev/null

3. 不要记录当前执行的命令

很简单，只要在命令之前加空格就行：

$  command

注意，以上正常工作的前提是，HISTIGNORE变量被正确的设置，它的值是冒号分隔的匹配表达式列表，如果一个命令匹配其中的任意一个表达式则不会被保存到记录中。

继续阅读

Bash One-Liners Explained 译文（三）

2013-11-01 系统管理 8,882 人浏览过 3 个评论

最近工作，生活中有一堆事情要处理，博客好久没更新了，请见谅。

拖了好久才翻译好这篇文章，这篇翻译下来好累，主要是原文废话太多了，后来还是决定尽量省略部分内容，建议有时间的还是去看下原文。这一篇太长了，先翻译部分，我会继续不断的更新。

这是 Bash One-Liners Explained 系列的第三篇文章。在这一篇里，我会给大家介绍重定向相关的内容。我会选择用最合适的 Bash 方法，各种常见的语法和技巧，向各位阐明如何用 Bash 内置的命令和 Bash 编程语言来完成各式各样的任务。

重定向其实是通过操作文件描述符来完成的，这样会更容易理解。当 Bash 启动时，会自动创建三个标准的文件描述符，它们分别是 stdin（标准输入，文件描述符为0），stdout（标准输出，文件描述符为1）和 stderr（标准错误输出，文件描述符为2）。你也可以创建更多的文件描述符，例如3，4，5等等，或者关闭它们，又或者拷贝它们。你可以从对应的文件中读取或者写入内容。

文件描述符指向某个文件（除非它们被关闭）。通常情况下，Bash 启动的三个文件描述符 —— stdin，stdout 和 stderr 都是指向你的终端，从终端输入中读取内容，并且把标准输出和标准错误都送到终端上。

继续阅读

Bash One-Liners Explained 译文（二）

2013-10-19 系统管理 8,666 人浏览过 7 个评论

这是 Bash One-Liners Explained 系列的第二篇文章。在这一篇里，我会给你们介绍如何用 Bash 来完成各种各样的字符串操作。我会选择用最合适的 Bash 方法，各种常见的语法和技巧，向各位阐明如何用 Bash 内置的命令和 Bash 编程语言来完成各式各样的任务。

1. 生成从 a 到 z 的字母表

$ echo {a..z}

这一行命令用到了括号展开（Brace expansion）功能，它可以用于生成任意的字符串。{x..y} 是一个序列表达式，其中 x 和 y 都是单个字符，这个表达式展开后包含 x 与 y 之间的所有字符。

运行上面的命令会生成从 a 到 z 的所有字母：

$ echo {a..z}
a b c d e f g h i j k l m n o p q r s t u v w x y z

2. 生成从 a 到 z 的字母表，字母之间不包含空格

$ printf "%c" {a..z}

这是一个 99.99% 的人都不知道的非常棒的技巧。如果你在printf命令之后指定一个列表，最终它会循环依次打印每个元素，直到完成为止。

在这一行命令中，printf 的格式为"%c"，代表一个字符（character），后面的参数是从 a 到 z 的字符列表，字符之间以空格分隔。所以，当printf执行时，它依次输出每个字符直到所有字符全被处理完成为止。

下面是执行的结果：

abcdefghijklmnopqrstuvwxyz

输出的结果最后不包含换行符，因为printf的输出格式是"%c"，其中并没有包含\n。如果你想输出完整的一行，可以简单地在字符列表后面增加一个$'\n'：

$ printf "%c" {a..z} $'\n'

继续阅读

Bash One-Liners Explained 译文（一）

2013-10-17 系统管理 13,946 人浏览过 4 个评论

Bash One-Liners Explained 是一系列介绍 Bash 命令技巧的文章，由国外牛人 Peteris Krumins 撰写。凭借扎实的功底和丰富的经验，作者总结了许多快速解决问题的技巧，并且每一条都只要用简洁的一行 Bash 命令就可以完成，同时每一行命令文中都给出了非常详尽的解释。

Peteris Krumins 是一位高产的博主，在他的博客上有很多非常精彩的文章，推荐大家有机会都可以去好好读一读。例如，大家耳熟能详的 Awk One-Liners Explained、Sed One-Liners Explained 等等。后者我也北曾经在博客上分享过一篇笔记。

回到正题，虽然这一系列文章不难，但是还是可以从中学到很多细节的知识，相信这些肯定会对许多初学者有所帮助，所以我打算将这一系列翻译成中文，分享给大家。为了同原文保持一致，这一系列文章最终会分成以下五篇：

  1. Bash One-Liners Explained 译文（一）: 文件处理；
  2. Bash One-Liners Explained 译文（二）: 操作字符串；
  3. Bash One-Liners Explained 译文（三）: 漫谈重定向；
  4. Bash One-Liners Explained 译文（四）: 历史命令；
  5. Bash One-Liners Explained 译文（五）: 命令行跳转；

本系列的文章同其它系列一样，最终都可以在连载页面找到，有兴趣的同学可以随意翻翻，看看有没有一些对你有价值的文章，大家一起交流学习。

1. 清空文件内容

$ > file

这一行命令用到了输出重定向操作符>。输出重定向发生时，文件会被打开准备写入。如果此时文件不存在则先创建，存在则将其大小截取为0。这里我们并没有重定向写任何内容到文件中，所以文件依然保持为空。

如果你想替换文件的内容，或者创建一个包含指定内容的文件，可以运行下面的命令：

$ echo "some string" > file

2. 追加内容到文件

$ echo "foo bar baz" >> file

继续阅读

rsync 同步文件重复拷贝问题

2013-10-15 系统管理 14,634 人浏览过 4 个评论
newrsynclogo

rsync 是同步文件的利器，一般用于多个机器之间的文件同步与备份，同时也支持在本地的不同目录之间互相同步文件。在这种场景下，rsync 远比 cp 命令更加合适，它只会同步需要更新的文件，默认情况下，rsync 通过比较文件的最后修改时间（mtime）和文件的大小（size）来确认哪些文件需要被同步过去。

最近刚好有一个需求，需要将文件从一个目录同步到另外一个目录去，我就首先试了下下面的命令：

# mkdir src dest
# echo hello > src/one.txt
# rsync --stats src/1.txt dest

这里加上 --stats 的目的是为了显示文件传输的详细信息。执行完成后文件已经同步到目标目录，非常简单，但是如果再执行一次，我们会非常尴尬地发现文件被再次同步过去：

# rsync --stats src/one.txt dest

Number of files: 1
Number of files transferred: 1
Total file size: 6 bytes
Total transferred file size: 6 bytes
Literal data: 6 bytes
Matched data: 0 bytes
File list size: 21
File list generation time: 0.001 seconds
File list transfer time: 0.000 seconds
Total bytes sent: 77
Total bytes received: 31

sent 77 bytes  received 31 bytes  216.00 bytes/sec
total size is 6  speedup is 0.06

继续阅读

Shell 默认选项 himBH 的解释

2013-09-15 系统管理 9,836 人浏览过 4 个评论

SegmentFault 的问题地址: 求大大解释如下shell语句：

$ echo $-
himBH

1、himBH这个结果又是什么意思？
2、看不懂，求第69行详解。多谢++

for i in /etc/profile.d/*.sh ; do
    if [ -r "$i" ]; then
        if [ "${-#*i}" != "$-" ]; then
            . "$i"
        else
            . "$i" >/dev/null 2>&1
        fi
    fi
done

以下是我的回答：

1. himBH 这个结果又是什么意思？

$-记录着当前设置的shell选项，himBH是默认值，你可以通过 set 命令来设置或者取消一个选项配置。例如：

set -x

这个可以打开 shell 的调试开关，调试 shell 脚本非常有用，这个时候再检查下 $- 变量的值，可以看到多了 x 字符：

[kodango@mac] ~ 
$ echo $-
+ echo himxBH   # -x 选项设置的效果
himxBH

回到 himBH 上，我们来一个一个看这几个默认选项分别影响了 Shell 的哪些行为。

i - interactive

包含这个选项说明当前的 shell 是一个交互式的 shell，何为交互式？你输入命令，shell 解释执行后给你返回结果，我们在 Terminal 下使用的 shell 就是交互式的，所以 $- 会包含 i 字符。如果我们在一个脚本里面 echo $-，结果是不会包含 i 的。关于交互式 Shell，我之前在博客里写过一篇文章专门介绍，有兴趣的可以看看。

H - history expand

history expand 这个很多人都基本上不用，包括我也是。我们知道 Shell 会把我们执行的命令记录下来，可以通过 history 命令查看，每一行是序号 + 执行的命令。在 shell 退出时，会将这些信息保存到~/.bash_history 文件中，当然在启动时也会从该文件中加载，不信删除这个文件再打开一个终端试试。

继续阅读

Backup Mediawiki 站点

2013-08-07 玩物丧志 系统管理 54,453 人浏览过 抢沙发

去年，我使用 Mediawiki 搭建了一个 wiki 站点，用于团队知识积累。短短半年，已经有不少的沉淀，随着 wiki 越来越重要，它的数据安全性也必须考虑起来，因此我们准备把 wiki 迁移到 VM 上，并且考虑做好备份。迁移之前，数据备份的操作是件体力活，不过好在网上有不少的文章介绍如何操作， Mediawiki 官方也有专门的文章来介绍具体的操作过程以及需要注意的地方，详见Backing up a wiki。

文章的最后还引用了一系列的备份脚本，这是我等懒人最喜欢的方法，越简单粗暴越好。看了其中的一个脚本（Backing up a wiki/Duesentrieb's backup script - MediaWiki），脚本的内容很简单，不过要想 run 起来，首先还得改动开头的几处配置，比较麻烦。

所以我自己 fork 了一个新的版本，通过命令行参数的形式提供配置，并且修复了脚本的几处 Bug，例如备份目录没有创建、输出信息中的转义字符串没有显示等等。

继续阅读

CPU Topology

2013-05-03 系统管理 16,555 人浏览过 7 个评论

如果你也是对/proc/cpuinfo文件里面的内容不甚了解，请跟我一起来学习下CPU的拓扑结构 (CPU Topology)。我们先从一些简单的概念开始。

NUNA与SMP

NUMA(Non-Uniform Memory Access，非一致性内存访问)和SMP(Symmetric Multi-Processor，对称多处理器系统)是两种不同的CPU硬件体系架构。

SMP的主要特征是共享，所有的CPU共享使用全部资源，例如内存、总线和I/O，多个CPU对称工作，彼此之间没有主次之分，平等地访问共享的资源，这样势必引入资源的竞争问题，从而导致它的扩展内力非常有限。

NUMA技术将CPU划分成不同的组（Node)，每个Node由多个CPU组成，并且有独立的本地内存、I/O等资源。Node之间通过互联模块连接和沟通，因此除了本地内存外，每个CPU仍可以访问远端Node的内存，只不过效率会比访问本地内存差一些，我们用Node之间的距离（Distance，抽象的概念）来定义各个Node之间互访资源的开销。

继续阅读