前段时间遇到一个服务器问题：**非法重启设备后，服务器进入救援模式，数据盘也不显示挂载是否成功。**

说来这个问题，我觉得还挺奇葩。今天就来跟大家分享下整个过程以及我的处理方法。避免大家在今后的学习或工作中遇到跟我同样的问题。

### 一、问题背景

有一天，研发小伙伴跟我反馈有一台服务器连不上，一直卡在如下页面。

![image-20221115114021936](http://pic.nexopera.tech/63730a26544b0.png)

该页面是 Xshell 连接某一台服务器时，建立的连接，按`Ctrl+Alt+]`键切换到本地 Shell 终端。当我看到卡在该页面时，毫无犹豫的自己也尝试了起来，果然也是连不上。前一天还正常连接，第二天就出问题了？

还好服务器有配置远程管理地址，通过远程控制管理页面的方式启动 iKVM HTML5 和远程管理服务器，这样就能登到这台出故障的设备上查看服务器界面处于一种什么样的状态。

![image-20221115114044810](http://pic.nexopera.tech/63730a3d38c33.png)

登到这台故障的服务器后，直接重启了服务器，然后 Xshell 再次尝试连接，是可以远程连接的。难道这就是传说中的重启治百病，如此简单粗暴？

![image-20221115114051393](http://pic.nexopera.tech/63730a36c337d.png)

当进入系统后，执行简单的命令都提示输入/输出错误。

![image-20221115114057248](http://pic.nexopera.tech/63730a49b5151.png)

过不久后，直接不建立连接了，彻底挂了。。。

![image-20221115114103421](http://pic.nexopera.tech/63730a4fcc964.png)

再通过远程控制管理页面查看服务器当前状态，一看进入到救援模式了。

到该模式下后，

- 输入`journalctl -xb`命令，可查看系统日志
- 输入`systemctl reboot`命令，重启系统
- 输入`systemctl default`或`^D`命令，再次尝试进入默认模式
- 输入 root 用户密码，则可以进入系统

![image-20221115114108686](http://pic.nexopera.tech/63730a553d03e.png)

根据日志报错提示：挂载文件系统可以纠正该问题。

![image-20221115114112881](http://pic.nexopera.tech/63730a5968a88.png)

### 二、解决方案

执行`df -h`命令，用于在 Linux 操作系统下显示文件系统的磁盘使用情况。

使用`-h`选项以`KB`以上的单位来显示，可读性高。

- 第一列：`Filesystem`文件系统的名称
- 第二列：`Size`文件系统的容量
- 第三列：`Used`已用多少的磁盘空间
- 第四列：`Avail`可用多少的磁盘空间
- 第五列：`Use%`磁盘使用率
- 第六列：`Mounted On`挂载点

![image-20221115114118771](http://pic.nexopera.tech/63730a5f52bcb.png)

根据上图结果来看，没有`/dev/sdb1`文件系统所挂载的`/bigdata`目录磁盘情况。

尝试将`/dev/sdb1`取消挂载，重新挂载，反复报不同的错误。

![image-20221115114123721](http://pic.nexopera.tech/63730a6455982.png)



![image-20221115114128580](http://pic.nexopera.tech/63730a6910ec9.png)



![image-20221115114133537](http://pic.nexopera.tech/63730a6e3abea.png)

通过 RAID 卡管理界面查看状态也是 Online。

当如果重启设备，能看到如下界面，则说明正在初始化设备。

![image-20221115114139660](http://pic.nexopera.tech/63730a7424b3e.png)

恰巧，这台故障的服务器有多块硬盘组成的 44T 的一个目录有存放 46% 的数据，在有数据的情况下，如何不格式化磁盘重新挂载呢？

![image-20221115114144873](http://pic.nexopera.tech/63730a7973867.png)

**取消挂载**

```
umount /dev/sdb1
```

**尝试修复**

若不确定挂载点属于哪种文件类型时，可以执行：`df -Th`命令来判断。

![image-20221115114148501](http://pic.nexopera.tech/63730a7ce550f.png)

如果挂载点为`xfs 文件类型`，可以执行：`xfs_repair -L + 文件系统名称路径`命令进行修复。

如果挂载点为`fsck.ext2/3/4文件类型`，可以执行：`fsck.ext2/3/4文件类型 + 文件系统路径`命令进行修复。

因为我这是`xfs`的文件类型，按`xfs_repair`命令来修复受损的 xfs 文件系统，执行如下命令进行修复`/dev/sdb1`。

```
xfs_repair -L /dev/sdb1
```

执行修复是根据磁盘中的数据使用率来决定修复时长的，所以时间会较长，我采用放后台的形式执行的，执行完成后，查看还是否有进程存在，如有则说明未修复完，如没有则说明修复完成，然后再重新挂载。

![image-20221115114153685](http://pic.nexopera.tech/63730a8246097.png)



```
mount /dev/sdb1 /bigdata
```



挂载完毕后，执行`df -h`命令来确定是否挂载成功。



![image-20221115114159100](http://pic.nexopera.tech/63730a878c947.png)



到此，就恢复挂载完毕了。

上面案例是针对磁盘有数据时且不格式化的情况下恢复并挂载。

那么有小伙伴该问了，无存储数据的情况下，如何挂载磁盘，我这里也给大家整理出来一个详细的操作步骤：

**第一步：**

```
ll /dev/disk/by-path  # 查看需要挂的磁盘名称
fdisk -l              # 查看磁盘信息
lsblk                 # lsblk 命令默认情况下将以树状列出所有块设备，包括查看磁盘挂载信息
```

**第二步：**

```
parted /dev/sdb mklabel gpt            # 新建 /dev/sdb 的磁盘标签类型为 GPT
parted /dev/sdb mkpart primary 0 100%  # 将 /dev/sdb 整个空间分给同一个分区
ignore                                 # 忽略上述执行命令后的告警
mkfs.xfs -f /dev/sdb                   # 格式化分区
```

> 注意：格式化分区可能会执行慢些，需耐心等待。

**第三步：**

```
mkdir /bigdata            # 创建目录，自定义目录名
mount /dev/sdb /bigdata   # 将 sdb 挂载到 /bigdata 目录下
```

**第四步：**

```
blkid   # 查看 sdb 的 UUID 并复制
```

**第五步：**

```
vi /etc/fstab    # 参考已挂载的磁盘，将 sdb 的 UUID 和挂载目录关联上，保存后重启设备
```

> 注意：UUID 一定要写对，否则重启后无法正常进入系统。

**第六步：**

```
df -h   # 检查是否挂载成功
```



一次服务器非法重启后导致的故障排查记录

# 背景需求：

某企业在测试环境上搭建了一套zabbix , 并且通过zabbix的自动注册功能已经将几百台机器包括Window和Linux纳入监控，

现需要在生产环境上重新搭建多一套新的zabbix，需要把之前测试环境上添加的所有机器迁移到生产环境上，并且针对Linux操作系统需要在原有指标的基础上补充一些监控指标。

# 需求分析：

这里有几种方式实现，一是通过一键卸载脚本，结合自动化运维工具，将之前安装的agent批量删除，然后批量安装新的Agent部署包；二是直接修改zabbix _agentd.conf 配置文件，将原来的Server地址替换为生产环境上的地址，然后添加进行自定义监控指标的添加，最后重启Agent。本文使用是第二种。

# 需求实现：

## Linux操作系统

(1) 制作替换的脚本；操作步骤：一、把对应的新增指标相关脚本放置在对应的脚本目录，这里需要注意zabbix _agent 配置文件是否开启Include参数并且指定对应的目录，二是修改zabbix _agentd.conf 的配置文件，将Server参数和Active Server 修改为生产环境的地址，三是重启zabbix_agentd。
![img](http://pic.nexopera.tech/1235613_160370795439383.png)
![img](http://pic.nexopera.tech/1235613_160370796533124.png)
![img](http://pic.nexopera.tech/1235613_160370797579035.png)

(2) 脚本执行结果
![img](http://pic.nexopera.tech/1235613_160370798739039.png)

附l wrp.sh 脚本内容：（因部署环境不同，脚本的细节可能需要修改）
```
#!/bin/bash

#desc: used for replace zabbix client ip address

set -e

################################参数区#############################

baseshell=$(cd `dirname $0`; pwd)

Script="$(cd $baseshell; pwd)/script"

config="$(cd $baseshell; pwd)/etc"

BASEDIR="/usr/local/zabbix"

CONF_FILE="${BASEDIR}/etc/zabbix_agentd.conf"

IncludeDir="${BASEDIR}/etc/zabbix_agentd.conf.d"

LinuxVersion=$(cat /proc/version | awk '{print $3}' | awk -F '[.]' '{print $(NF-1)}')

Include="${BASEDIR}/etc/zabbix_agentd.conf.d/*.conf"

Agent_User="zabbix"

Agent_Server="192.168.1.105"

#############################命令执行#############################

function run() {

_cmd="${1}"

_debug="0"

_red="33[0;31m"

_green="33[0;32m"

_reset="33[0m"

_user="$(whoami)"

# 如果设置了第二个参数，可以开启调试模式

if [ "${#}" = "2" ];then

if [ "${2}" = "1" ];then

_debug="1"

fi

fi

if [ "${DEBUG_COMMANDS}" = "1" ] || [ "${_debug}" = "1" ];then

printf "${_red}%s \$ ${_green}${_cmd}${_reset}\n" "${_user}"

fi

sh -c "LANG=C LC_ALL=C ${_cmd}"

}

####################################区域分割线###################################

function parting(){

local string

if [ "$#" = 0 ];then

echo -e "33[34;1m" && printf "%40s" '='|tr ' ' '=' && echo -e "33[31m[null]c" && echo -e "33[34mc" && printf "%40sn" '='|tr ' ' '=' && echo -e "33[0m"

sleep 3

fi

if [ "$#" -ge 1 ];then

string=$*

echo -e "33[34;1m" && printf "%40s" '='|tr ' ' '=' && echo -e "33[31m[$string]c" && echo -e "33[34mc" && printf "%40sn" '='|tr ' ' '=' && echo -e "33[0m"

sleep 3

fi

}

###############################判断是否有监控脚本###################################

function scripts_check(){

parting "脚本检查"

#iostat脚本检测

scripts_iostat="${BASEDIR}/scripts/iostat1.py"

if [ -f "${scripts_iostat}" ];then

echo "iostat脚本已存在"

else

run "cp ${Script}/iostat1.py ${BASEDIR}/scripts/"

echo "iostat脚本放置成功"

fi

#swap脚本检查

scripts_swap="${BASEDIR}/scripts/swap.py"

if [ -f "${scripts_swap}" ];then

echo "交换分区脚本已存在"

else

run "cp ${Script}/swap.py ${BASEDIR}/scripts/"

echo "交换分区脚本放置成功"

fi

#io_information脚本检查

scripts_io_inform="${BASEDIR}/scripts/io_information.sh"

if [ -f "${scripts_io_inform}" ];then

echo "IO信息脚本已存在"

else

run "cp ${Script}/io_information.sh ${BASEDIR}/scripts/"

echo "IO信息脚本已放置成功"

fi

#cpu脚本检查

scripts_cpu_iowait="${BASEDIR}/scripts/cpu_iowait.sh"

if [ -f "${scripts_cpu_iowait}" ];then

echo "cpu_iowait脚本已存在"

else

run "cp ${Script}/cpu_iowait.sh ${BASEDIR}/scripts/"

echo "cpu_iowait脚本放置成功"

fi

#Agent扩展配置文件检查

Agent_All_Conf="${IncludeDir}/all.conf"

if [ -f "$Agent_All_Conf" ];then

echo "Agent扩展配置文件已经存在"

else

run "cp ${config}/all.conf ${IncludeDir}/"

run "sed -i \"s@/usr/local/zabbix@${BASEDIR}@g\" ${IncludeDir}/all.conf"

echo "Agent扩展配置文件已放置成功"

fi

}

###############################Agent配置文件Server地址修改###################################

function agent_conf_check(){

parting "Agent配置文件Server地址修改"

#判断配置文件

if [ -f "$CONF_FILE" ];then

# echo "IO脚本已存在"

run "sed -i 's/^Server=.*$/Server=${Agent_Server}/' ${CONF_FILE}"

run "sed -i 's/^ServerActive=.*$/ServerActive=${Agent_Server}/' ${CONF_FILE}"

echo "Agent_Server的ip地址替换成功."

Agent_Include=`cat ${CONF_FILE} |grep ^Include= | wc -l`

if [ $Agent_Include -eq "0" ];then

run "sed -i \"s@# Include=@Include=${Include}@g\" `grep Include= -rl ${CONF_FILE}`"

echo -e "Agent的Include配置成功."

else

Agent_Include_t=`cat ${CONF_FILE} | grep "^Include=${BASEDIR}/etc/zabbix_agentd.conf.d/*\.conf" | wc -l`

if [ $Agent_Include_t -ne 1 ];then

echo "Include扩展模块需要重新修改!!!!!!"

exit 1

fi

fi

run "chmod -R 755 ${BASEDIR}"

run "chown -R ${Agent_User}.${Agent_User} ${BASEDIR}"

else

echo "Agent的配置文件不存，请重新修改脚本！！！"

exit 0

fi

}

###############################重启Zabbix_Agent##################################

function reload_agent(){

parting "重启Agent服务"

if [ ${LinuxVersion} = "el7" ];then

run "systemctl restart zabbix_agentd.service"

if [ $? -eq 0 ];then

echo -e "Agent服务重启success."

else

echo -e "Agent服务重启fail,请检查配置！！！"

fi

else

run "/etc/init.d/zabbix_agentd restart"

if [ $? -eq 0 ];then

echo -e "Agent服务重启success."

else

echo -e "Agent服务重启fail,请检查配置！！！"

fi

fi

}

case $1 in

install)

scripts_check;

agent_conf_check;

reload_agent
;;
*)
echo -e "33[31m usage: `basename ${0}` [install] 33[0m"
;;
esac
exit 0
```
Window操作系统

(1) 编写替换Server ip地址的BAT批处理文件；实现步骤：将原来的地址修改为生产环境的地址，然后重启zabbix _agentd
![img](http://pic.nexopera.tech/1235613_160370811454885.png)

(2) 脚本执行的结果
![img](http://pic.nexopera.tech/1235613_160370812487618.png)

附 window_agent.bat 脚本内容：（因部署环境不同，脚本的细节可能需要修改）
```
@echo off

cd C:Program FilesZABBIX_AGENT3conf

copy zabbix_agentd.win.conf zabbix_agentd.win.conf.bak

Set strOld=192.168.1.233

Set strNew=192.168.1.105

Set fn=zabbix_agentd.win.conf

setlocal enabledelayedexpansion

for /f "tokens=*" %%i in (%fn%) do (

set a=%%i

set "a=!a:%strOld%=%strNew%!"

echo !a!>>temp1010.txt)

echo 'replace success!!'

move /y temp1010.txt "%fn%"

echo stop zabbix services

net stop "Zabbix Agent"

echo start zabbix services

net start "Zabbix Agent"

pause
```

Zabbix_Server迁移之Agent地址批量修改

随着开源产品的越来越盛行，作为一个Linux运维工程师，能够清晰地鉴别异常机器是否已经被入侵了显得至关重要，个人结合自己的工作经历，整理了几种常见的机器被黑情况供参考：

背景信息：以下情况是在CentOS 6.9的系统中查看的，其它Linux发行版类似。

### 1.**入侵者可能会删除机器的日志信息**

可以查看日志信息是否还存在或者是否被清空，相关命令示例：

![image-20220812084248702](http://pic.nexopera.tech/62f5a20929355.png)

### 2.**入侵者可能创建一个新的存放用户名及密码文件**

可以查看/etc/passwd及/etc/shadow文件，相关命令示例：

![image-20220812084254619](http://pic.nexopera.tech/62f5a20f04451.png)

### 3.**入侵者可能修改用户名及密码文件**

可以查看/etc/passwd及/etc/shadow文件内容进行鉴别，相关命令示例：

![image-20220812084303200](http://pic.nexopera.tech/62f5a21a8f5f3.png)

### 4.**查看机器最近成功登陆的事件和最后一次不成功的登陆事**

对应日志“/var/log/lastlog”，相关命令示例：

![](http://pic.nexopera.tech/62f5a21a8f5f3.png)

### 5.**查看机器当前登录的全部用户**

对应日志文件“/var/run/utmp”，相关命令示例：

![image-20220812084318235](http://pic.nexopera.tech/62f5a2269266a.png)

### 6.**查看机\**\**器创建以来登陆过的用户**

对应日志文件“/var/log/wtmp”，相关命令示例：

![image-20220812084323107](http://pic.nexopera.tech/62f5a22b7788d.png)

### 7.**查看机器所有用户的连接时间（小时）**

对应日志文件“/var/log/wtmp”，相关命令示例：![image-20220812084330617](http://pic.nexopera.tech/62f5a2330058b.png)

### 8.**如果发现机器产生了异常流量**

可以使用命令“tcpdump”抓取网络包查看流量情况或者使用工具”iperf”查看流量情况

### 9.**可以查看/var/log/secure日志文件**

尝试发现入侵者的信息，相关命令示例：![image-20220812084339458](http://pic.nexopera.tech/62f5a23bd2465.png)

### 10.查询异常进程所对应的执行脚本文件

a.top命令查看异常进程对应的PID

![image-20220812084346138](http://pic.nexopera.tech/62f5a242a6ff7.png)

b.在虚拟文件系统目录查找该进程的可执行文件

![image-20220812084351772](http://pic.nexopera.tech/62f5a2481a7a0.png)

### 11.如果确认机器已被入侵，重要文件已被删除，可以尝试找回被删除的文件Note:

1、当进程打开了某个文件时，只要该进程保持打开该文件，即使将其删除，它依然存在于磁盘中。这意味着，进程并不知道文件已经被删除，它仍然可以向打开该文件时提供给它的文件描述符进行读取和写入。除了该进程之外，这个文件是不可见的，因为已经删除了其相应的目录索引节点。

2、在/proc 目录下，其中包含了反映内核和进程树的各种文件。/proc目录挂载的是在内存中所映射的一块区域，所以这些文件和目录并不存在于磁盘中，因此当我们对这些文件进行读取和写入时，实际上是在从内存中获取相关信息。大多数与 lsof 相关的信息都存储于以进程的 PID 命名的目录中，即 /proc/1234 中包含的是 PID 为 1234 的进程的信息。每个进程目录中存在着各种文件，它们可以使得应用程序简单地了解进程的内存空间、文件描述符列表、指向磁盘上的文件的符号链接和其他系统信息。lsof 程序使用该信息和其他关于内核内部状态的信息来产生其输出。所以lsof 可以显示进程的文件描述符和相关的文件名等信息。也就是我们通过访问进程的文件描述符可以找到该文件的相关信息。

3、当系统中的某个文件被意外地删除了，只要这个时候系统中还有进程正在访问该文件，那么我们就可以通过lsof从/proc目录下恢复该文件的内容。

假设入侵者将/var/log/secure文件删除掉了，尝试将/var/log/secure文件恢复的方法可以参考如下：

a.查看/var/log/secure文件，发现已经没有该文件

![image-20220812084357803](http://pic.nexopera.tech/62f5a24e26794.png)

b.使用lsof命令查看当前是否有进程打开/var/log/secure，

![image-20220812084402371](http://pic.nexopera.tech/62f5a252a8045.png)

c.从上面的信息可以看到 PID 1264（rsyslogd）打开文件的文件描述符为4。同时还可以看到/var/log/ secure已经标记为被删除了。因此我们可以在/proc/1264/fd/4（fd下的每个以数字命名的文件表示进程对应的文件描述符）中查看相应的信息，如下：

![image-20220812084408235](http://pic.nexopera.tech/62f5a25d77c66.png)

d.从上面的信息可以看出，查看/proc/1264/fd/4就可以得到所要恢复的数据。如果可以通过文件描述符查看相应的数据，那么就可以使用I/O重定向将其重定向到文件中，如:

![image-20220812084421756](http://pic.nexopera.tech/62f5a2661aec3.png)

e.再次查看/var/log/secure，发现该文件已经存在。对于许多应用程序，尤其是日志文件和数据库，这种恢复删除文件的方法非常有用。

![image-20220812084428234](http://pic.nexopera.tech/62f5a26ceb4a3.png)


服务器入侵排查


![image-20220915084033744](http://pic.nexopera.tech/63227482464dc.png)
Shell 脚本是一种被设计用来运行命令行解释器 UNIX Shell 的计算机程序。Shell 脚本的各类变种被视作脚本语言。Shell 脚本执行的典型操作包括文件操作、程序执行和文本打印。设置环境、运行程序并执行任何必要的清理或日志记录的脚本称为封装。



## 识别 Shell 命令提示符

你可以通过查看终端窗口中的提示符符号来识别 Linux 系统的计算机上的 Shell 命令提示符的用户是普通用户还是超级用户。`#` 符号用于超级用户，`$` 符号用于具有标准权限的用户。



## 基本命令

脚本附带了很多可以在终端窗口上执行的、用以管理您的计算机的命令。每个命令的详细信息可以在该命令附带的使用手册中找到。你可以使用如下命令来查看手册：

```
man <command>
```

一些常用的命令有：

```
date # 显示当前日期和时间cal # 显示当前月份日历df # 显示磁盘使用情况free # 显示内存使用情况ls # 列出文件和目录mkdir # 创建目录
```

每个命令都附带了几个可以一起使用的选项。你可以参考使用手册以了解更多的细节。`man date` 的输出如图 1 所示。

![image-20220915084300020](http://pic.nexopera.tech/63227514ba05f.png)

*Figure 1: Manual of date command*



## 重定向操作符

当你希望捕获文件中的命令输出或重定向到文件时，可以使用重定向操作符。

< 如显示不全，请左右滑动 >

| 命令                              | 描述                           |
| --------------------------------- | ------------------------------ |
| `ls -l /usr/bin >file`            | 默认标准输出到文件             |
| `ls -l /usr/bin 2>file`           | 重定向标准错误到文件           |
| `ls -l /usr/bin > ls-output 2>&1` | 重定向标准错误和标准输出到文件 |
| `ls -l /usr/bin &> ls-output`     | 重定向标准错误和标准输出到文件 |
| `ls -l /usr/bin 2> /dev/null`     | 写入 `/dev/null`，丢弃输出     |





## 大括号扩展

大括号扩展是 UNIX 提供的强大选项之一。它有助于在一行指令中使用最少的命令完成大量操作。例如：

```
$echo Front-{A,B,C}-BackFront-A-Back, Front-B-Back, Front-C-Back
$echo {Z..A}Z Y X W V U T S R Q P O N M L K J I H G F E D C B A
$mkdir {2009..2011}-0{1..9} {2009..2011}-{10..12}
```

这条命令会为 2009 到 2011 年里的每个月建立一个目录。



## 环境变量

环境变量是一个动态命名的值，它可以影响计算机上运行的进程的行为方式。此变量是进程运行环境的一部分。

< 如显示不全，请左右滑动 >

| 命令       | 描述                     |
| ---------- | ------------------------ |
| `printenv` | 打印出所有环境变量的值。 |
| `set`      | 设置 Shell 选项          |
| `export`   | 导出环境到随后执行的程序 |
| `alias`    | 为命令创建别名           |





## 网络命令

网络命令对于排查网络问题和检查连接到客户机的特定端口非常有用。

< 如显示不全，请左右滑动 >

| 命令         | 描述                                    |
| ------------ | --------------------------------------- |
| `ping`       | 发送 ICMP（网际网路控制讯息协定）数据包 |
| `traceroute` | 打印数据包在网络中的路径                |
| `netstat`    | 打印网络连接信息、路由表、接口数据      |
| `ftp`/`lftp` | 互联网文件传输程序                      |
| `wget`       | 非交互式网络下载器                      |
| `ssh`        | OpenSSH SSH 客户端 （远程登录程序）     |
| `scp`        | 安全拷贝                                |
| `sftp`       | 安全文件传输程序                        |





## grep 命令

`grep` 命令用于查找系统和日志中的错误。它是 Shell 拥有的强大工具之一。

< 如显示不全，请左右滑动 >

| 命令                               | 描述                 |
| ---------------------------------- | -------------------- |
| `grep -h '.zip' file.list`         | `.` 表示任意字符     |
| `grep -h '^zip' file.list`         | 以 `zip` 开头        |
| `grep -h 'zip$' file.list`         | 以 `zip` 结尾        |
| `grep -h '^zip$' file.list`        | 只含有 `zip`         |
| `grep -h '[^bz]zip' file.list`     | 不含 `b` 和 `z`      |
| `grep -h '^[A-Za-z0-9]' file.list` | 所有文件名有效的文件 |





## 量词

下面是一些量词的例子：

< 如显示不全，请左右滑动 >

| 命令 | 描述                       |
| ---- | -------------------------- |
| `?`  | 匹配出现 0 次或 1 次的元素 |
| `*`  | 匹配出现 0 次或多次的元素  |
| `+`  | 匹配出现 1 次或多次的元素  |
| `{}` | 匹配出现特定次数的元素     |





## 文本处理

文本处理是当今 IT 世界中的另一项重要任务。程序员和管理员可以使用这些命令来切片、剪切和处理文本。

< 如显示不全，请左右滑动 >

| 命令                                                         | 描述                                                         |
| ------------------------------------------------------------ | ------------------------------------------------------------ |
| `cat -A $FILE`                                               | 显示 `$FILE` 文件的所有内容                                  |
| `sort file1.txt file2.txt file3.txt > final_sorted_list.txt` | 一次性将所有文件排序                                         |
| `ls - l | sort -nr -k 5`                                     | 按指定的第 5 列进行排序                                      |
| `sort --key=1,1 --key=2n distor.txt`                         | 对第 1 列进行排序（默认按字母表顺序），对第 2 列进行数值排序 |
| `sort foo.txt | uniq -c`                                     | 查找重复的行并显示该行重复的次数                             |
| `cut -f 3 distro.txt`                                        | 剪切第 3 列                                                  |
| `cut -c 7-10`                                                | 剪切 7 - 10 字符                                             |
| `cut -d ':' -f 1 /etc/password`                              | 分隔符 `:`                                                   |
| `sort -k 3.7nbr -k 3.1nbr -k 3.4nbr distro.txt`              | 按第 3 列第 7 个字符、第 3 列第 1 个字符和第 3 列第 4 个字符排序 |
| `paste file1.txt file2.txt > newfile.txt`                    | 合并两个文件                                                 |
| `join file1.txt file2.txt`                                   | 按公共字段连接两个文件                                       |





## 窍门和技巧

在 Linux 中，我们可以通过使用简单的命令或控制选项返回到命令的历史记录。

< 如显示不全，请左右滑动 >

| 命令              | 描述                     |
| ----------------- | ------------------------ |
| `clear`           | 清空屏幕                 |
| `history`         | 查看保存命令的历史记录   |
| `script filename` | 捕获文件中的所有命令执行 |



一些历史命令的技巧：

◈ `CTRL + R`：搜索命令历史

◈ `!!number`：执行编号为 `number` 的命令

◈ `!!` ：执行上一条命令

◈ `!?string` : 执行包含 `string` 的上一条命令

◈ `!string`：执行以 `string` 开始的上一条命令

◈ `export HISTCONTROL=ignoredups`：忽略重复条目

◈ `export HISTSIZE=10000`：设置存储的历史行数

随着你对 Linux 命令逐渐熟悉，你将能够编写封装脚本。所有手动任务，如定期备份、清理文件、监控系统使用情况等，都可以使用脚本自动完成。在学习高级概念之前，本文将帮助您开始编写脚本。


一些 Shell 脚本的基本概念

# Jumpserver 概述

- Jumpserver 是一款使用 Python, Django 开发的开源跳板机系统, 为互联网企业提供了认证，授权，审计，自动化运维等功能。JumpServer 现已支持管理 SSH、 Telnet、 RDP、 VNC 协议资产

> 功能：
>
> 1. 精确记录操作命令
> 2. 支持批量文件上传下载
> 3. 支持主机搜索登录
> 4. 支持批量命令执行(Ansible完成)
> 5. 支持WebTerminal连接主机
> 6. 支持Web端批量命令执行
> 7. 支持录像回放
> 8. 支持硬件信息如cpu,内存等抓取
> 9. 支持资产Excel导入导出
> 10. 支持资产批量更改
> 11. 支持系统用户的批量推送(Ansible实现)
> 12. 支持用户，主机，用户组，主机组，系统用户混合细颗粒授权
> 13. 支持sudo管理
> 14. 支持命令统计和命令搜索
> 15. 支持上传下载文件审计
> 16. 支持终止用户连接
> 17. 支持各种搜索
> 18. 其他

- Jumpserver 后端主要技术是LDAP，配置了LDAP 集中认证服务器， 所有服务器的认证都是由ldap完成的。其做法是：每个用户一个密码，把密码加密放到了数据库中，当用户输入IP 从[跳板机](https://so.csdn.net/so/search?q=跳板机&spm=1001.2101.3001.7020)登陆服务器的时候，跳板机系统取出密码，并解密，通过pexpect 模块将密码发送过去，来完成登录。
- （LDAP是轻量目录访问协议，英文全称是Lightweight Directory Access Protocol，一般都简称为LDAP。它是基于X.500标准的，但是简单多了并且可以根据需要定制。与X.500不同，LDAP支持TCP/IP，这对访问Internet是必须的。LDAP的核心规范在RFC中都有定义，所有与LDAP相关的RFC都可以在LDAPman RFC网页中找到。）

> 特色优势:
>
> - 开源：零门槛，线上快速获取和安装；
> - 分布式：轻松支持大规模并发访问；
> - 无插件：仅需浏览器，极致的 Web Terminal 使用体验；
> - 多云支持：一套系统，同时管理不同云上面的资产；
> - 云端存储：审计录像云端存储，永不丢失；
> - 多租户：一套系统，多个子公司和部门同时使用；
> - 多应用支持：数据库，Windows远程应用，Kubernetes。

- 官方网址：https://www.jumpserver.org/
- JumpServer官网文档：https://docs.jumpserver.org/zh/master/
- github 项目网址：https://github.com/jumpserver/jumpserver/releases

![在这里插入图片描述](http://pic.nexopera.tech/63464fbfd8bb5.png)

## 环境需求

- 首先准备一台 4核8G （最低）且可以访问互联网的 64 位 Linux 主机；
- 其次就是部署需要root用户，最好使用新环境来部署，因为会有不是新的环境会有冲突的情况，所以建议使用新环境来部署；
- 关闭 iptables，关闭 selinux ；
- 需要wget git curl…几个命令；

```bash
yum -y install wget git curl
1
```

首先具备这几个条件，完了就是安装部署。

## 在线部署Jump server

  部署方式有很多种：有在线部署，也有离线部署；也有在linux中部署、在Windows中部署、在macOS中部署的；也有手动部署、一键部署、源码部署、Helm部署、Allinone部署；看自己选哪个，其他部署文档可参考官网：[Jumpserver官网部署文档](https://docs.jumpserver.org/zh/master/install/setup_by_fast/)
这里我们选择一键部署就可以，脚本可以直接拉取官网的；

**拉取官网脚本并且执行安装操作：**

```bash
curl -sSL https://github.com/jumpserver/jumpserver/releases/download/v2.25.1/quick_start.sh | bash
1
```

中途有的地方需要自己确认，会问你选择默认还是其他，不输入则自动选择默认；
配置文件位置: /opt/jumpserver/config/config.txt

**脚本安装步骤：**

1. 检查配置文件
2. 安装docker和docker-compose
3. 配置dokcer
4. 启动docker并设置开机自启
5. 加载docker镜像（去拉取镜像redis、mariadb、web、core、koko、lion、magnus）
6. 安装Jumpserver
   6.1、配置加密密钥
   6.2、配置持久化目录
   6.3、配置 MySQL
   6.4、配置 Redis
   6.5、配置对外端口
   6.6、初始化数据库

7.安装完成（以及相关信息）

页面访问：http://ip:80
初始账号密码：admin admin

![在这里插入图片描述](http://pic.nexopera.tech/63464fbf64087.png)

进入页面之后可查看**页面访问操作**操作

**jumpserver的命令及解析**

```bash
cd /opt/jumpserver-installer-v2.25.1

# 安装Jump server
./jmsctl.sh install

# 升级Jump server
./jmsctl.sh upgrade [version]

# 监测当前版本号
./jmsctl.sh check_update

# 启动Jump server
./jmsctl.sh start

# 停止Jump server
./jmsctl.sh stop

#关闭Jump server
./jmsctl.sh close

#重启Jump server
./jmsctl.sh restart

#检查Jump server的运行状态
./jmsctl.sh status

# 卸载Jump server
./jmsctl.sh uninstall

# 帮助（查看命令参数详情）
./jmsctl.sh -h
12345678910111213141516171819202122232425262728293031
```

## 离线部署Jump server

从飞致云社区 [下载最新的 linux/amd64 离线包](https://community.fit2cloud.com/#/products/jumpserver/downloads), 并上传到部署服务器的 /opt 目录；离线包大概（1.5G）。

注意：下载时需要注册、登录一下
![在这里插入图片描述](http://pic.nexopera.tech/63464fbfbecdc.png)
![在这里插入图片描述](http://pic.nexopera.tech/63464fc038da5.png)

```bash
#将下载的包传到/opt目录
mv jumpserver-offline-installer-v2.25.2-amd64-67.tar.gz /opt/

#切换到/opt目录
cd /opt

#解压jumpserver压缩包
tar -xf jumpserver-offline-installer-v2.25.2-amd64-67.tar.gz

#重命名jumpserver-offline-installer-v2.25.2-amd64-67为jumpserver
mv jumpserver-offline-installer-v2.25.2-amd64-67 jumpserver

#进入jumpserver的目录
cd /opt/jumpserver
1234567891011121314
# 根据需要修改配置文件模板, 如果不清楚用途可以跳过修改
cat config-example.txt
12
# 以下设置如果为空系统会自动生成随机字符串填入
## 迁移请修改 SECRET_KEY 和 BOOTSTRAP_TOKEN 为原来的设置
## 完整参数文档 https://docs.jumpserver.org/zh/master/admin-guide/env/

## 配置 Docker 镜像加速, 不同的架构请参考安装文档
# DOCKER_IMAGE_PREFIX=

## 安装配置
VOLUME_DIR=/opt/jumpserver
DOCKER_DIR=/var/lib/docker
SECRET_KEY=
BOOTSTRAP_TOKEN=
LOG_LEVEL=ERROR

##  MySQL 配置, USE_EXTERNAL_MYSQL=1 表示使用外置数据库, 请输入正确的 MySQL 信息
USE_EXTERNAL_MYSQL=0
DB_HOST=mysql
DB_PORT=3306
DB_USER=root
DB_PASSWORD=
DB_NAME=jumpserver

##  Redis 配置, USE_EXTERNAL_REDIS=1 表示使用外置数据库, 请输入正确的 Redis 信息
USE_EXTERNAL_REDIS=0
REDIS_HOST=redis
REDIS_PORT=6379
REDIS_PASSWORD=

## Compose 项目设置, 如果 192.168.250.0/24 网段与你现有网段冲突, 请修改然后重启 JumpServer
COMPOSE_PROJECT_NAME=jms
COMPOSE_HTTP_TIMEOUT=3600
DOCKER_CLIENT_TIMEOUT=3600
DOCKER_SUBNET=192.168.250.0/24

## IPV6 设置, 容器是否开启 ipv6 nat, USE_IPV6=1 表示开启, 为 0 的情况下 DOCKER_SUBNET_IPV6 定义不生效
USE_IPV6=0
DOCKER_SUBNET_IPV6=fc00:1010:1111:200::/64

## 访问配置
HTTP_PORT=80
SSH_PORT=2222
MAGNUS_MYSQL_PORT=33060
MAGNUS_MARIADB_PORT=33061

## HTTPS 配置, 参考 https://docs.jumpserver.org/zh/master/admin-guide/proxy/ 配置
# USE_LB=1
# HTTPS_PORT=443
# SERVER_NAME=your_domain_name
# SSL_CERTIFICATE=your_cert
# SSL_CERTIFICATE_KEY=your_cert_key

## Nginx 文件上传大小
CLIENT_MAX_BODY_SIZE=4096m

## Task 配置, 是否启动 jms_celery 容器, 单节点必须开启
USE_TASK=1

## XPack, USE_XPACK=1 表示开启, 开源版本设置无效
USE_XPACK=0
RDP_PORT=3389
MAGNUS_POSTGRE_PORT=54320
TCP_SEND_BUFFER_BYTES=4194304
TCP_RECV_BUFFER_BYTES=6291456

# Core 配置, Session 定义, SESSION_COOKIE_AGE 表示闲置多少秒后 session 过期, SESSION_EXPIRE_AT_BROWSER_CLOSE=True 表示关闭浏览器即 session 过期
# SESSION_COOKIE_AGE=86400
SESSION_EXPIRE_AT_BROWSER_CLOSE=True

# Koko Lion XRDP 组件配置
CORE_HOST=http://core:8080
JUMPSERVER_ENABLE_FONT_SMOOTHING=True

## 终端使用宿主 HOSTNAME 标识
SERVER_HOSTNAME=${HOSTNAME}

# 额外的配置
CURRENT_VERSION=
1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677
```

安装jumpserver，安装时需要手动给路径问你是选择默认呢还是什么，默认的话可以直接回车就好；唯一一点好的是比在线安装快，因为在线安装需要拉取镜像特别慢，这个只需要下载”jumpserver-offline-installer-v2.25.2-amd64-67.tar.gz“离线包即可；

```bash
# 安装
./jmsctl.sh install

# 启动
./jmsctl.sh start
12345
```

安装完成，启动完成之后，页面访问：ip地址就行，因为默认端口是80；

安装完成之后会给你说：
![在这里插入图片描述](http://pic.nexopera.tech/63464fbf64087.png)

默认账号密码是admin admin

进入页面之后可查看**页面访问操作**操作

配置文件位置: /opt/jumpserver/config/config.txt

**jumpserver的命令及解析**

```bash
#进入jumpserver的目录
cd /opt/jumpserver

# 安装Jump server
./jmsctl.sh install

# 升级Jump server
./jmsctl.sh upgrade [version]

# 监测当前版本号
./jmsctl.sh check_update

# 启动Jump server
./jmsctl.sh start

# 停止Jump server
./jmsctl.sh stop

#关闭Jump server
./jmsctl.sh close

#重启Jump server
./jmsctl.sh restart

#检查Jump server的运行状态
./jmsctl.sh status

# 卸载Jump server
./jmsctl.sh uninstall

# 帮助（查看命令参数详情）
./jmsctl.sh -h
1234567891011121314151617181920212223242526272829303132
```

## 页面访问操作

页面访问：http://ip:80

![在这里插入图片描述](http://pic.nexopera.tech/63464fbfb8814.png)
默认账号密码是admin admin；第一次登录需要修改一下密码；可根据自己的情况来定密码；

![在这里插入图片描述](http://pic.nexopera.tech/63464fc021a05.png)
![在这里插入图片描述](http://pic.nexopera.tech/63464fc0e2a0b.png)
![在这里插入图片描述](http://pic.nexopera.tech/63464fc0f1c81.png)
![在这里插入图片描述](http://pic.nexopera.tech/63464f519b0d6.png)
![在这里插入图片描述](http://pic.nexopera.tech/63464fc17683c.png)


Jumpserver堡垒机的部署搭建

Nexopera是一个专注于Linux、网络和运维等领域的博客网站。将为读者提供广泛的相关文章，涵盖操作系统、服务器管理、网络配置、安全性等多个主题。如果你是初学者，希望这里有适合你的内容。