shell的几种常用工具

article/2025/11/7 18:35:44

最近在学习shell脚本语言,在学习的过程中了解了关于shell的几种常用工具,就总结了一下。

1、sort

  • 功能:顾名思义,sort是对文本进行排序操作的。
  • 原则:sort将文件的每一行作为一个单位,相互比较,比较原则是从首字符向后,依次按ASCII码值进行比较, 后将他们按升序输出。

man手册解释:
这里写图片描述
常用选项介绍:

选项说明
-r将文本文件降序输出
-u在输出行中去掉重复行
-n以数值来进行升序排序
-t设定间隔符
-k用来对指定列数进行排序,通常与-t一起使用
-f将小写字母都转换为大写字母来进行比较,亦即忽略大小写
-c会检查文件是否已排好序,如果乱序,则输出第一个乱序的行的相关信息,后返回1
-C会检查文件是否已排好序,如果乱序,不输出内容,仅返回1
-b会忽略每一行前面的所有空白部分,从第一个可见字符开始比较

用法示例:
(1)使用sort对文件内容进行升序、降序排序:
这里写图片描述
(2)去掉重复行升序、降序:
这里写图片描述
(3)按指定列进行排序
这里写图片描述
这里写图片描述

2、uniq

man手册解释:
这里写图片描述
主要用来去除文本中的重复行
用法示例:
这里写图片描述
常用语法

选项说明
-c显示输出中,在每行行首加上本行在文件中出现的次数。它可取代-u和-d选项。
-d只显示出现重复的行
-u只显示文件中不重复的各行

示例:
这里写图片描述

3、利用sort和uniq求两个文件的交集、并集和补集

分别建立两个文件:
这里写图片描述
求两个文件的交集:
这里写图片描述
求两个文件的并集:
这里写图片描述
求两个文件的补集(file1-file2):
这里写图片描述

4、paste

man手册说明:
这里写图片描述
**功能:**paste单词意思是粘贴。该命令主要用来将多个文件的内容合并。paste将按行将不同文件行信息放在一行。缺省情 况下, paste连接时,用空格或tab键分隔新行中不同文本
将file1和file2内容合并:
这里写图片描述
常用选项:
(1) -d: 指定域分隔符
指定域分隔符为“:”,并合并两个文件内容
这里写图片描述
(2)-s: 将每个文件合并成行而不是按行粘贴
这里写图片描述
(3)- 对每一个(-),从标准输入中读一次数据。默认使用空格 或者tab作域分隔符,该选项可以定制输出格式
这里写图片描述

5、cut

man手册说明:
这里写图片描述
**功能:**cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。 如果不指定 File 参数, cut 命令将读取标准输入。必须指定 -b、-c 或 -f 标志之一。
常用选项:
(1)-b :以字节为单位进行分割。
这里写图片描述
(2)-c :以字符为单位进行分割
这里写图片描述
对于字符处理,-c和-b似乎没有什么区别,但当你处理汉字的时候,就会有所不同,感兴趣的可以自己测试一下。
(3)-d :自定义分隔符,默认为制表符。
(4)-f :与-d一起使用,指定显示哪个区域
这里写图片描述

6、xargs

man手册描述:
这里写图片描述
**功能:**xargs命令是给其他命令传递参数的一个过滤器,也是组合多个命令的一个工具。它擅长将标准输入数据转换成命 令行参数,xargs能够处理管道或者stdin并将其转换成特定命令的命令参数。xargs也可以将单行或多行文本输入 转换为其他格式,例如多行变单行,单行变多行。xargs的默认命令是echo,空格是默认定界符。这意味着通过管 道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换行和空白将被空格取代。xargs是构建单行命令的重要组件之一。
这里写图片描述
常用选项:
(1)-n选项:指定列数,并多行输出
这里写图片描述
(2)-d选项: 自定义一个域分隔符,将特定列打散,并指定格式输出
这里写图片描述
(3)将格式化后的字符串作为命令行参数传递给其他命令,组装完成批量任务
这里写图片描述
(4)选项-I,使用-I指定一个替换字符串{},这个字符串在xargs扩展时会被替换掉,当-I与xargs结合使用, 每一个参数命令都会被执行一次
这里写图片描述
(5)find xargs rm 混合使用:
这里写图片描述
一张图总结xargs常见用法:
这里写图片描述

7、sed

man手册说明:
这里写图片描述
**功能:**sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响。处理时, 把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容, 处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变, 除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。
sed默认安照Basic规范基本匹配
常见使用方法:
(1)/pattern/p: 打印匹配pattern的行
这里写图片描述
使用p命令需要注意,sed是把待处理文件的内容连同处理结果一起输出到标准输出的,因此p命令表示除了把文件内 容打印出来之外还额外打印一遍匹配pattern的行 要想只输出处理结果,应加上-n选项,这种用法相当于grep命令。
(2)/pattern/d: 删除匹配pattern的行
这里写图片描述
sed命令不会修改原文件,删除命令只表示某些行不打印输出,而不是从原文件中删去,如果要影响源文件,需要使用 -i 选项
这里写图片描述
(3)/pattern/s/pattern1/pattern2/: 查找符合pattern的行,将该行第一个匹配pattern1的字符串替换为 pattern2
这里写图片描述


http://chatgpt.dhexx.cn/article/qnMTl4b0.shtml

相关文章

Linux学习 -- Shell的工具

cutsedawksort Shell提供的工具可以帮助我们更快的完成需求操作。 一、cut 功能描述: cut的工作就是"剪",具体是用来在文件中负责剪切数据。cut 命令从文件的每一行剪切字节、字符和字段并将这些文字、字符和字段输出。 基本用法: …

快速入门Shell脚本(5)——Shell的这些工具你都知道了吗?

上一篇博客已经给大家讲了计较复杂的操作(常用的函数操作)。 本篇博客,给讲一下shell的工具,学会写工具会让你的面试加分的偶。(喜欢shell脚本的可以关注专栏) 1.Shell中的cut 1.1介绍 cut的工作就是“剪…

Shell常用命令与工具

学习一些在编写Shell时的常用命令或工具及使用技巧。有人说Shell脚本是命令堆积的一个文件,按顺序去执行。还有人说想学好Shell脚本,要把Linux上各种常见的命令或工具掌握了,这些说法都没错。由于Shell语言本身在语法结构上比较简单&#xff…

SHELL工具推荐

随着个人使用还会继续更新,目前就只有两款。 1.Xshell 业界较常见的一款经典的shell命令行软件,配套有单独的ftp软件。 界面比较简洁,命令好像全是单色。有开源的免费版本可以下载。 2.MobaXterm 界面易读性高很多,对于warning、…

shell脚本之工具

在学习了shell脚本的基本语法,命令,符号之后,接下来要看的就是shell脚本使用的所有工具了。 在shell脚本中,工具的使用简化了所要编写的代码。接下来就介绍几个shell下经常使用的工具。 1、sort sort工具的常用语法就是将文件的每一行作为一个单位,相互比较,比较原则是从…

shell之常用工具(cut、sort、uniq、tr)

文章目录 一、列截取工具-cut1、cut概述2、常用选项3、案例演示 二、排序工具-sort1、sort概述2、常用选项3、案例演示 三、去重工具-uniq1、uniq概述2、uniq的常用选项3、案例演示 四、修改工具-tr1、 tr概述2、tr的常用选项3、案例演示 五、面试题六、总结 一、列截取工具-cu…

JDK配置环境变量+eclipse安装使用(保姆级教程)

一、下载JDK 访问Oracle官网下载最新版JDKJava Downloads | Oracle,也可点击此处下载我准备的安装包。 以Windows系统举例,选择Windows下的第二个(第一个为压缩包,第二个为安装程序,第三个是Windows Installee的数据包…

eclipse android环境搭建,Eclipse Android开发环境搭建教程

Eclipse Android开发环境搭建教程是本文要介绍的内容,主要是来了解并学习Eclipse Android环境搭建的过程,具体关于Eclipse Android内容的详解来看本文。 Eclipse Android开发准备: 1、javasdk 2、eclipsehttp://www.eclipse.org/downloads/ 3…

AWS Toolkit for Eclipse环境配置

最近,实验室的工作中涉及到了AWS,拟采用Java来实现。现在来整理一下相关配置过程。 配置过程 首先,我这里使用的是Eclipse Oxygen版本。AWS Toolkit for Eclipse的安装过程比较简单,在Eclipse的菜单栏点击“Help->Install New…

eclipse配置java环境_java环境搭建(Eclipse)

1.打开Eclipse官网 2.单击Download下方的灰色字Download Packages 3.单机图片中Eclipse IDE for Enterprise Java Developers 中的对应选项(windows 64-bit) 4.跳出窗口后点击橙色Download 5.解压下载下来的解压包 6.打开解压后文件夹中的eclipse.exe 7.如果出现该问题贼需要搭…

java web(eclipse)搭建环境

开发环境搭建: 一、搭建jdk环境:(配置环境变量,JAVA_HOME,PATH,CLASSPATH,JRE_HOME) a) 参考链接:https://jingyan.baidu.com/article/1974b28959d87ff4b0f7745c.html 二、下载解压eclipse:绿色…

eclipse的安装与环境配置

一,eclipse下载 地址:https://www.eclipse.org/downloads/ 一般浏览器都有翻译功能 二、有32位和64位的版本根据自己的需求下载,选下载的选下载量最多的下载。 1.下载完成后是压缩包解压 就可以直接使用 这样子eclipse就下载好了,接下来就…

Eclipse配置Android开发环境

Eclipse配置Android开发环境 环境变量的配置测试环境是否配置完毕 ADT插件的安装ADT的下载在线安装(未试成功)离线安装 ADT的使用 eclipse新建Android项目xml文件无法预览页面 在配置好环境的eclipse中安装Android SDK(Software Development …

Eclipse配置python环境全步骤

安装方法参考这一博主的文章,一开始选用第二、三种,都安装失败 eclipse配置python开发环境_如何在Eclipse中配置python开发环境_weixin_39827036的博客-CSDN博客 后面用第一种方法,还是在 Window-preferences 下没有找到 PyDev 然后看到这…

配置Eclipse环境变量

不管是eclipse还是MyEclipse 都需要配置环境变量,MyEclipse不配置好环境变量是不能用激活破解工具的 方法: (右键)我的电脑-(右键)“属性”-高级-环境变量,弹出Windows的“环境变量…

eclipse搭建mybatis的环境

1.首先创建一个web工程 2.导入mybatis的jar包 3.创建一个xxx.properties文件里面写 (1)我这里是mysql 8 如果是mysql5,driver就不一样 jdbc.drivercom.mysql.cj.jdbc.Driver jdbc.urljdbc:mysql://localhost:3306/mybbs?serverTimezoneAs…

Eclipse中配置python环境

1.首先将Eclipse下载完成 2.下载python模块,链接为(https://sourceforge.net/projects/pydev/files/pydev/)选择一个最新版本即可 3.之后得到python模块文件如下图,将两个文件夹复制一下 4.将两个文件夹内容复制到Eclipse的文件夹…

eclipse环境的搭建以及JDK的安装步骤详细

java开发环境:eclipse 可以从这里下载 链接:https://pan.baidu.com/s/1qNVUTB1-Wy4Tvbzvo3YxLA 提取码:ap5v 安装步骤如下: 从上链接获取压缩包下载到电脑之后,解压,此时的eclipse是打不开的,需…

Eclipse及Android环境配置

Eclipse及Android环境配置 1.资源 1.jdk官网 2.Eclipse 3.ADT插件 4.sdk 2.安装Jdk并配置Java环境 (1)安装jdk-8u65-windows-64位.exe **a、 为了方便后续操作,这里修改为C:Java\jdk1.8.0_65\ ** b、同时修改为java目录 c、直接关闭…

SAP Fiori开发工具——Eclipse环境搭建

SAP Fiori开发工具——Eclipse环境搭建 这里我们选择Eclipse Web的Mars版本进行下载。 进入Eclipse官网:Eclipse Downloads | The Eclipse Foundation 由于我们要下载老版本,所以点击“Download Packages”进去选择。 需要下载Eclipse Web版本&#xf…