你好,我是葛俊。今天,我继续和你分享命令行工具的使用。

在上一篇文章中,我与你介绍了命令行环境中的终端、Shell,以及远程连接的设置,解决了环境配置的问题。今天,我们再来看看具体的命令行工具的使用技巧。我会根据常见的工作场景来组织这些工具,因为优化工作流程、提高效率才是学习工具的真正目的。

从我的经验来看,开发人员最常见的、使用命令行的场景主要包括两个:

我会重点与你分享这些场景中有哪些推荐工具以及使用技巧。而至于这些工具如何安装的内容,网络上已经有很多了,我就不再详细描述了。

日常操作中的工具和技巧

关于日常操作,Linux/Unix系统已经自带了一些工具,另外还有些产生已久、为我们所熟悉的工具。不过,要更高效地完成工作,我们还有更强大的工具可以选择。

第一个场景:列举文件夹和文件,查看文件

列举文件的默认工具是ls。除此之外,一个常用的工具是tree,可以列出文件夹的树形结构:

另外,还有些比tree更方便的工具,比如alder和exa。exa尤其好用,优点包括:

另外,exa还支持对文件状态显示的加强。

比如,添加–git选项,exa会显示文件的git状态,在文件名的左边,用两个字母来表示文件在工作区和Git暂存区的状态。其中,N表示新文件,M表示文件修改等。exa的显示和git status命令输出的简单对比,如下图所示。

再比如,使用–extend选项显示文件的额外信息。

再比如,使用group-directories-first选项,先显示文件夹再显示文件。

至于查看文件,Linux默认的工具是cat。相比起来,bat是一个更好用的替代品,除高亮显示外,还可以显示Git的更改状态。

第二个场景:查找并打开文件,进行查看和编辑

一个常用的办法是,使用上面提到的工具来列出文件名,然后使用grep进行过滤查看,或者VIM进行查看和编辑。比如,使用命令

tree -I "node_modules" -f | grep -C3 index.md

可以得到当前文件夹中的所有index.md文件。

命令中,tree的参数-I,表示排除文件夹node_modules;tree的参数-f,表示显示文件时包含文件路径,方便你拷贝文件的全名;grep的参数-C3,代表显示搜索结果3行的上下文。

我们也可以使用VIM代替grep,进行更复杂的查找和编辑工作。我可以把tree的输出传给VIM,然后在VIM中查找index.md,使用n跳到下一个搜索结果,使用VIM命令gF直接打开文件,进行编辑后使用\bd命令关闭这个index.md文件。然后,用同样的方式查找并编辑第二、三、四个index.md,从而实现对当前文件夹下每一个index.md文件的查看和修改:

事实上,这正是一个很常见的命令行工作流:把某一个命令的输出传给VIM,输出里包含有其他文件的完整路径,比如上面例子中index.md的路径,然后在VIM里使用gF命令查看并处理这些文件。我推荐你也尝试使用这种工作流。

另外,在上面的例子中,我使用tree命令来列举文件名。其实,很多时候我们使用find这种专门用来查找文件的命令会更加方便。不过,我今天要介绍的不是find,而是它的一个替代品,即fd。

我推荐fd的原因主要有3个:

后两点对开发者来说非常方便。比如,我在搜索时,并不关心node_modules里面的文件,也不关心.git文件夹里的文件,fd可以自动帮我过滤掉。

另外,fd高亮显示,速度也很快。至于对查找到的文件进行编辑,跟上面提到的方法一样,用管道(Pipe)传给VIM,然后使用gF命令即可。

fd index.md | vim -

另外,关于查找文件内容的工具grep,我常用的一个替代品是RipGrep(rg)。跟fd类似,它也很适合开发者,有如下4个特点:

比如,使用rg tags就可以方便地查找当前目录下所有包含tags的文件。它的查找速度非常快,显示也比grep要漂亮:

> rg tags
package-lock.json
2467:    "common-tags": {
2469:      "resolved": "https://registry.npmjs.org/common-tags/-/common-tags-1.8.0.tgz",
5306:        "common-tags": "^1.4.0",
5446:            "common-tags": "^1.4.0",

src/pages/2019-05-24-procrastination/index.md
6:tags: ['自我成长', '拖延症']

src/pages/2018-07-21-first-post/index.md
5:tags: ['this', 'that']

第三个场景:文件夹之间跳转

关于文件夹间的跳转,在Bash中有cd和dirs命令;在Zsh和Fish中,可以使用文件夹名字直接跳转;另外,Zsh支持.....-等别名,用来分别跳转到父目录、父目录的父目录,以及目录历史中上一次记录,而不需要写cd。

接下来,我与你介绍几个新的工具来支持更快的跳转

实际上文件夹的跳转,有两种常见的情况:

对于第一种情况,常用的工具有两个,一个是fasd,另一个是z,它们差别不是特别大。我用的是z,具体用法是:z会按照访问频率列出最近访问过的文件夹,并使用字符串匹配的方式让你实现快速跳转。

比如,用z dem来进行匹配和自动补全,找到我想去的demo文件夹,回车直接完成跳转。同时,我也可以用z dem<回车> 直接跳转。

对于第二种情况,即快速定位某个子文件夹,我介绍一个超级酷的工具fzf。本质上讲,fzf是一个对输入进行交互的模糊查询工具。它的使用场景非常多,文件夹的跳转只是一个应用。所以,我还在再后面文章做更多的详细讨论。

安装好fzf之后,你就可以使用Ctrl+T进行文件夹的交互式查询,或者使用Alt+C进行文件夹跳转。

比如,我想跳转到src/component文件夹中,可以输入Alt+C,fzf就会列出当前文件夹下的所有文件夹。比如,我输入com,没输入其他字符,fzf会更新匹配到的文件夹,这时可以使用Ctrl+P、Ctrl+N进行上下选择,按下回车就可以进入选中的文件夹。

第四个场景:文件管理

系统自带的文件管理工具有cp、mv、rsync等。这里,我再介绍一些更方便的工具。

首先是一个用来重命名文件的小工具,叫作vidir。顾名思义,vidir就是VI来编辑目录的。具体使用方法很简单,vidir命令后面接一个文件夹时,vidir会打开VIM,VIM里面列举该文件夹中所包含的文件和子文件夹,然后使用VIM的命令来修改文件和文件夹的名字之后保存退出。这时,vidir会自动帮助我们完成对文件和文件夹的重命名。

vidir之所以使用VIM来修改文件,是因为VIM功能强大,修改非常方便。另外,vidir也可以从管道接收文件夹和文件的列表。比如,我想把当前文件夹下所有前缀为index的文件,都在文件名前添加“new-”。这时,我可以使用命令fd | vidir -。

这样,fd命令会把当前文件夹下所有文件名传给vidir。然后,vidir打开VIM,我们在VIM界面中修改文件名即可。如下所示的录屏图片中,包括了使用VIM的重复命令.的技巧。

另外一组方便进行文件管理的工具是,命令行的文件管理器,即使用键盘命令在终端界面进行文件夹跳转、查看文件和移动文件等操作。这种命令行界面上的UI叫做TUI(Terminal UI)。十多年前的Borland终端IDE,就是这一类工具的翘楚,使用熟练之后效率会很高。

TUI的文件管理器我用过3个:Midnight Commander (以下简称mc)、Ranger和nnn。

mc是两个窗口的文件管理器。如果你使用过Windows Commander(Total Commander)的话,你就会对它的用法很熟悉。重要的命令有:使用tab进行两个窗口的切换、使用F4进行编辑、使用F5进行拷贝、使用F9进入菜单、使用F10退出。

我提供了一张录屏图片,简单演示了在一台远端服务器上使用mc进行多文件拷贝和编辑,并通过菜单修改显示主题的场景。

Ranger和nnn是单窗口的文件管理器。Ranger稍微有一点延迟,所以我一般使用nnn。因为是单窗口,所以与我们平时在GUI中使用的文件管理器比较相似。

比如,在拷贝文件的时候,需要先进入文件所在文件夹,选择文件,然后进入目标文件夹,再使用拷贝命令把文件拷贝过去。我在录屏中演示了在nnn中进行文件夹的跳转、创建,文件的选择、拷贝,使用系统工具打开当前文件,查看帮助等功能。

总的来说,这3个工具中我使用最多的是nnn。跟mc相比,它最大的好处是快捷键设置跟VIM一致,不需要大量使用功能键F1~F12。

开发中常见的工作

Git

命令行中的Git工具,除了原生的Git之外,常见的还有tig、grv、lazygit和gitin。

我常用的是tig。因为在tig中,我可以方便地进行查看改动、产生提交、查看历史(blame)等操作,功能非常强大。比如,在查看文件改动时,我们可以方便地使用命令1有选择性地把一个文件中改动的一部分添加到一个提交当中,实现第26篇文章中提到的git add -p的功能。

另外,我还可以通过tig快捷地查看一个文件的历史信息。

关于这两个功能的使用,你可以参考下面的录屏图片。

Web 访问

我常用的Web访问工具是HTTPie,是curl命令的一个补充。HTTPie的强项在于,专门针对HTTP协议,所以可以做到格式简单、易用性强两点。

而curl的优势,则包括功能强大、支持多种协议和基本所有服务器上都有预装。

关于这两个工具,我的建议是,curl肯定要学,HTTPie如果用得到也值得花时间学习。

对JSON进行处理

在命令行对JSON文本进行处理,最常见的工具是jq。它能够对JSON进行查询和修改处理,功能很强大。

举一个查询的例子,我们有这样一个person.json文件列举某个人的详细信息:

$ cat person.json
{ "id": { "bioguide": "E000295", "thomas": "02283", "fec": [ "S4IA00129" ], "govtrack": 412667, "opensecrets": "N00035483", "lis": "S376" }, "name": { "first": "Joni", "last": "Ernst", "official_full": "Joni Ernst" }, "bio": { "gender": "F", "birthday": "1970-07-01" }, "terms": [ { "type": "sen", "start": "2015-01-06", "end": "2021-01-03", "state": "IA", "class": 2, "state_rank": "junior", "party": "Republican", "url": "http://www.ernst.senate.gov", "address": "825 B&C Hart Senate Office Building Washington DC 20510", "office": "825 B&c Hart Senate Office Building", "phone": "202-224-3254" } ] }

可以方便地使用cat person.json | jq .”对JSON进行格式化输出,

$ cat people.json | jq .
{
  "id": {
    "bioguide": "E000295",
    "thomas": "02283",
    "fec": [
      "S4IA00129"
    ],
    "govtrack": 412667,
    "opensecrets": "N00035483",
    "lis": "S376"
  },
  "name": {
    "first": "Joni",
    "last": "Ernst",
    "official_full": "Joni Ernst"
  },
  "bio": {
    "gender": "F",
    "birthday": "1970-07-01"
  },
  "terms": [
    {
      "type": "sen",
      "start": "2015-01-06",
      "end": "2021-01-03",
      "state": "IA",
      "class": 2,
      "state_rank": "junior",
      "party": "Republican",
      "url": "http://www.ernst.senate.gov",
      "address": "825 B&C Hart Senate Office Building Washington DC 20510",
      "office": "825 B&c Hart Senate Office Building",
      "phone": "202-224-3254"
    }
  ]
}

以及使用jq ".terms[0].office"命令查询他的第一个工作任期的办公室地址。

$ cat person.json | jq ".terms[0].office"
"825 B&c Hart Senate Office Building"

但,jq存在的最大问题是,它有一套自己的查询处理语言。如果使用jq的频次没那么高的话,很难记住,每次都要去查帮助才可以。

针对这种情况,有人设计了另一种类似的工具,直接使用JavaScript作为查询处理语言,典型代表是fx和jq.node。这,就大大方便了使用JavaScript的开发者,因为可以使用已经熟悉了的语法。

比如,对于上个案例的JSON文件,我可以方便地在fx工具中使用JavaScript的函数filter()进行过滤查询。

$ cat person-raw.json| fx 'json => json.terms.filter(x => x.type == "top")'
[
  {
    "type": "top",
    "office": "333 B&c Hart CIrcle  Building",
    "phone": "202-224-3254"
  }
]

查找、关闭进程

通常情况下,我们使用kill和pkill,来查找和关闭进程。但,使用fzf之后,我们可以方便地进行交互式的查找目标进程。具体使用方法是,输入kill ,fzf就会提供一个交互式的界面供你查找目标进程,然后回车确认即可。

在命令行上进行交互式的操作,非常爽,我推荐你一定要试试。

查看日志文件

关于查看日志文件的工具,我推荐lnav。它比tail -F要方便、强大得多,有很多很棒的功能,包括:

命令行本身的实用技巧

关于命令行的使用技巧,有两个非常值得一提:一个是!$,另一个是!!。

第一个!$,代表上一个命令行的最后一个参数。比如,如果我上一条命令使用

$ vim src/component/README.txt

下一步我想为它产生一个备份文件,就可以使用!$:

## 以下命令即   copy vim src/component/README.txt vim src/component/README.txt.bak
$ cp !$ !$.bak

第二个常用的是!!,表示上一个命令的完整命令。最常用的场景是,我先拷贝一个文件,发现没有权限,需要sudo,下一步我就可以用sudo !!来用sudo再次运行拷贝命令。

## 因为权限不足,命令失败
$ cp newtool /usr/local/bin/

## 重新使用sudo运行上一条命令。即 sudo wtool /usr/local/bin/
$ sudo !!

小结

今天,我与你介绍了很多工具。使用工具提高研发效能,最关键的是找到真正常用的工作场景,然后去寻找对应的工具来提高效率。

需要注意的是,只有重复性高的工作,才最适合使用命令行工具;否则,用来适应工具的时间,可能比节省下的时间还要多。这,是命令行的一个基本特点。

最后,我把今天与你讨论的Linux/Unix系统自带工具和替代工具,整理为了一张表格,以方便你复习:

思考题

不知道你有没有注意到,在录屏中我多次用到了一个叫作tldr的工具。你知道它是什么作用吗?

感谢你的收听,欢迎你在评论区给我留言分享你的观点,也欢迎你把这篇文章分享给更多的朋友一起阅读。我们下期再见!