Linux shell脚本入门到实战详解

Zabbix介绍及部署(超详细讲解)

Linux常见零碎问题汇总

### 一、校验数字的表达式

**数字**：`^[0-9]*$`

**n位的数字**：`^\d{n}$`

**至少n位的数字**：`^\d{n,}$`

**m-n位的数字**：`^\d{m,n}$`

**零和非零开头的数字**：`^(0|[1-9][0-9]*)$`

**非零开头的最多带两位小数的数字**：`^([1-9][0-9]*)+(.[0-9]{1,2})?$`

**带1-2位小数的正数或负数**：`^(\-)?\d+(\.\d{1,2})?$`

**正数、负数、和小数**：`^(\-|\+)?\d+(\.\d+)?$`

**有两位小数的正实数**：`^[0-9]+(.[0-9]{2})?$`

**有1~3位小数的正实数**：`^[0-9]+(.[0-9]{1,3})?$`

**非零的正整数：**`^[1-9]\d*$` 或 `^([1-9][0-9]*){1,3}$` 或 `^\+?[1-9][0-9]*$`

**非零的负整数**：`^\-[1-9][]0-9"*$` 或 `^-[1-9]\d*$`

**非负整数**：`^\d+$` 或 `^[1-9]\d*|0$`

**非正整数**：`^-[1-9]\d*|0$` 或 `^((-\d+)|(0+))$`

**非负浮点数**：`^\d+(\.\d+)?$` 或 `^[1-9]\d*\.\d*|0\.\d*[1-9]\d*|0?\.0+|0$`

**非正浮点数**：`^((-\d+(\.\d+)?)|(0+(\.0+)?))$` 或 `^(-([1-9]\d*\.\d*|0\.\d*[1-9]\d*))|0?\.0+|0$`

**正浮点数**：`^[1-9]\d*\.\d*|0\.\d*[1-9]\d*$` 或 `^(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*))$`

**负浮点数**：`^-([1-9]\d*\.\d*|0\.\d*[1-9]\d*)$` 或 `^(-(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*)))$`

**浮点数**：`^(-?\d+)(\.\d+)?$` 或 `^-?([1-9]\d*\.\d*|0\.\d*[1-9]\d*|0?\.0+|0)$`

### 二、校验字符的表达式

**汉字**：`^[\u4e00-\u9fa5]{0,}$`

**英文和数字**：`^[A-Za-z0-9]+$` 或 `^[A-Za-z0-9]{4,40}$`

**长度为3-20的所有字符**：`^.{3,20}$`

**由26个英文字母组成的字符串**：`^[A-Za-z]+$`

**由26个大写英文字母组成的字符串**：`^[A-Z]+$`

**由26个小写英文字母组成的字符串**：`^[a-z]+$`

**由数字和26个英文字母组成的字符串**：`^[A-Za-z0-9]+$`

**由数字、26个英文字母或者下划线组成的字符串**：`^\w+$ 或 ^\w{3,20}`

**中文、英文、数字包括下划线**：`^[\u4E00-\u9FA5A-Za-z0-9_]+$`

**中文、英文、数字但不包括下划线等符号**：`^[\u4E00-\u9FA5A-Za-z0-9]+$` 或 `^[\u4E00-\u9FA5A-Za-z0-9]{2,20}$`

**可以输入含有**`^%&',;=?$\"` 等字符：`[^%&',;=?$\x22]+`

禁止输入含有~的字符 `[^~\x22]+`

#### 其它
```
.*匹配除 \n 以外的任何字符。
/[\u4E00-\u9FA5]/ 汉字
/[\uFF00-\uFFFF]/ 全角符号
/[\u0000-\u00FF]/ 半角符号
```

### 三、特殊需求表达式

**Email 地址**：`^\w+([-+.]\w+)*@\w+([-.]\w+)*\.\w+([-.]\w+)*$`

**域名**：`[a-zA-Z0-9][-a-zA-Z0-9]{0,62}(/.[a-zA-Z0-9][-a-zA-Z0-9]{0,62})+/.?`

**InternetURL**：`[a-zA-z]+://[^\s]* 或 ^http://([\w-]+\.)+[\w-]+(/[\w-./?%&=]*)?$`

**手机号码**：`^(13[0-9]|14[5|7]|15[0|1|2|3|5|6|7|8|9]|18[0|1|2|3|5|6|7|8|9])\d{8}$`

电话号码(“XXX-XXXXXXX”、”XXXX-XXXXXXXX”、”XXX-XXXXXXX”、”XXX-XXXXXXXX”、”XXXXXXX”和”XXXXXXXX)：`^(\(\d{3,4}-)|\d{3.4}-)?\d{7,8}$`

国内电话号码(0511-4405222、021-87888822)：`\d{3}-\d{8}|\d{4}-\d{7}`

身份证号(15位、18位数字)：`^\d{15}|\d{18}$`

短身份证号码(数字、字母x结尾)：`^([0-9]){7,18}(x|X)?`$ 或 `^\d{8,18}|[0-9x]{8,18}|[0-9X]{8,18}?$`

帐号是否合法(字母开头，允许5-16字节，允许字母数字下划线)：`^[a-zA-Z][a-zA-Z0-9_]{4,15}$`

密码(以字母开头，长度在6~18之间，只能包含字母、数字和下划线)：`^[a-zA-Z]\w{5,17}$`

强密码(必须包含大小写字母和数字的组合，不能使用特殊字符，长度在8-10之间)：`^(?=.*\d)(?=.*[a-z])(?=.*[A-Z]).{8,10}$`

日期格式：`^\d{4}-\d{1,2}-\d{1,2}`

一年的12个月(01～09和1～12)：`^(0?[1-9]|1[0-2])$`

一个月的31天(01～09和1～31)：`^((0?[1-9])|((1|2)[0-9])|30|31)$`

#### 钱的输入格式

有四种钱的表示形式我们可以接受:”10000.00” 和 “10,000.00”, 和没有 “分” 的 “10000” 和 “10,000”：`^[1-9][0-9]*$`

这表示任意一个不以0开头的数字,但是,这也意味着一个字符”0”不通过,所以我们采用下面的形式：`^(0|[1-9][0-9]*)$`

一个0或者一个不以0开头的数字.我们还可以允许开头有一个负号：`^(0|-?[1-9][0-9]*)$`

4.这表示一个0或者一个可能为负的开头不为0的数字.让用户以0开头好了.把负号的也去掉,因为钱总不能是负的吧.下面我们要加的是说明可能的小数部分：`^[0-9]+(.[0-9]+)?$`

必须说明的是,小数点后面至少应该有1位数，所以”10.”是不通过的,但是 “10” 和 “10.2” 是通过的：`^[0-9]+(.[0-9]{2})?$`

这样我们规定小数点后面必须有两位，如果你认为太苛刻了，可以这样：`^[0-9]+(.[0-9]{1,2})?$`

这样就允许用户只写一位小数.下面我们该考虑数字中的 `逗号` 了，我们可以这样：`^[0-9]{1,3}(,[0-9]{3})*(.[0-9]{1,2})?$`

1到3个数字,后面跟着任意个 逗号+3个数字，逗号成为可选，而不是必须：`^([0-9]+|[0-9]{1,3}(,[0-9]{3})*)(.[0-9]{1,2})?$`


```
备注：这就是最终结果了,别忘了+可以用*替代如果你觉得空字符串也可以接受的话(奇怪,为什么?)最后,别忘了在用函数时去掉去掉那个反
```

xml文件：^([a-zA-Z]+-?)+[a-zA-Z0-9]+\.[x|X][m|M][l|L]$

中文字符的正则表达式：[\u4e00-\u9fa5]

双字节字符：^\x00-\xff)

空白行的正则表达式：\n\s*\r (可以用来删除空白行)

HTML标记的正则表达式：<(\S*?)[^>]*>.*?</\1>|<.*? /> (网上流传的版本太糟糕，上面这个也仅仅能部分，对于复杂的嵌套标记依旧无能为力)

首尾空白字符的正则表达式：^\s*|\s*

) (可以用来删除行首行尾的空白字符(包括空格、制表符、换页符等等)，非常有用的表达式)



腾讯QQ号：[1-9][0-9]{4,}(腾讯QQ号从10000开始)

中国邮政编码：[1-9]\d{5}(?!\d)(中国邮政编码为6位数字)

IP地址：\d+.\d+.\d+.\d+(提取IP地址时有用)

IP地址：((?:(?:25[0-5]|2[0-4]\d|[01]?\d?\d)\.){3}(?:25[0-5]|2[0-4]\d|[01]?\d?\d))

IP-v4地址：\b(?:(?:25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.){3}(?:25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\b (提取IP地址时有用)

校验IP-v6地址:

- 

```
(([0-9a-fA-F]{1,4}:){7,7}[0-9a-fA-F]{1,4}|([0-9a-fA-F]{1,4}:){1,7}:|([0-9a-fA-F]{1,4}:){1,6}:[0-9a-fA-F]{1,4}|([0-9a-fA-F]{1,4}:){1,5}(:[0-9a-fA-F]{1,4}){1,2}|([0-9a-fA-F]{1,4}:){1,4}(:[0-9a-fA-F]{1,4}){1,3}|([0-9a-fA-F]{1,4}:){1,3}(:[0-9a-fA-F]{1,4}){1,4}|([0-9a-fA-F]{1,4}:){1,2}(:[0-9a-fA-F]{1,4}){1,5}|[0-9a-fA-F]{1,4}:((:[0-9a-fA-F]{1,4}){1,6})|:((:[0-9a-fA-F]{1,4}){1,7}|:)|fe80:(:[0-9a-fA-F]{0,4}){0,4}%[0-9a-zA-Z]{1,}|::(ffff(:0{1,4}){0,1}:){0,1}((25[0-5]|(2[0-4]|1{0,1}[0-9]){0,1}[0-9])\\.){3,3}(25[0-5]|(2[0-4]|1{0,1}[0-9]){0,1}[0-9])|([0-9a-fA-F]{1,4}:){1,4}:((25[0-5]|(2[0-4]|1{0,1}[0-9]){0,1}[0-9])\\.){3,3}(25[0-5]|(2[0-4]|1{0,1}[0-9]){0,1}[0-9]))
```

子网掩码：

- 

```
((?:(?:25[0-5]|2[0-4]\\d|[01]?\\d?\\d)\\.){3}(?:25[0-5]|2[0-4]\\d|[01]?\\d?\\d))
```

校验日期:

- 

```
^(?:(?!0000)[0-9]{4}-(?:(?:0[1-9]|1[0-2])-(?:0[1-9]|1[0-9]|2[0-8])|(?:0[13-9]|1[0-2])-(?:29|30)|(?:0[13578]|1[02])-31)|(?:[0-9]{2}(?:0[48]|[2468][048]|[13579][26])|(?:0[48]|[2468][048]|[13579][26])00)-02-29)$(“yyyy-mm-dd“ 格式的日期校验，已考虑平闰年。)
```

抽取注释：``

查找CSS属性:`^\\s*[a-zA-Z\\-]+\\s*[:]{1}\\s[a-zA-Z0-9\\s.#]+[;]{1}`

提取页面超链接:`(<a\\s*(?!.*\\brel=)[^>]*)(href="https?:\\/\\/)((?!(?:(?:www\\.)?'.implode('|(?:www\\.)?', $follow_list).'))[^" rel="external nofollow" ]+)"((?!.*\\brel=)[^>]*)(?:[^>]*)>`

提取网页图片:`\\< *[img][^\\\\>]*[src] *= *[\\"\\']{0,1}([^\\"\\'\\ >]*)`

提取网页颜色代码:`^#([A-Fa-f0-9]{6}|[A-Fa-f0-9]{3})$`

文件扩展名效验:`^([a-zA-Z]\\:|\\\\)\\\$[^\\\\]+\\\$*[^\\/:*?"<>|]+\\.txt(l)?$`

判断IE版本：`^.*MSIE [5-8](?:\\.[0-9]+)?(?!.*Trident\\/[5-9]\\.0).*$`



附表:

![640](http://pic.nexopera.tech/629d7a167c3bc.png)

![640-16544872301792](http://pic.nexopera.tech/629d7a4d64ec5.png)

![640](http://pic.nexopera.tech/629d7aff3f50f.png)

![640-16544872361024](http://pic.nexopera.tech/629d7a6731d3d.png)

![640-16544872457956](http://pic.nexopera.tech/629d7a769fb47.png)

![640-16544872500728](http://pic.nexopera.tech/629d7a8863893.png)

![640-165448725469710](http://pic.nexopera.tech/629d7a9ece7c8.png)

![640-165448726399414](http://pic.nexopera.tech/629d7aaa535c1.png)

![640-165448726746716](http://pic.nexopera.tech/629d7ab61a012.png)

![640-165448727396420](http://pic.nexopera.tech/629d7ac11a72e.png)

**END**

正则表达式速查手册


![](http://pic.nexopera.tech/634ca2d490f91.jpg)

## 监控目标

明白监控的重要性以及使用监控要实现的业务目标

通常包括以下三点:

- 对目标系统进行实时监控
- 监控可以实时反馈目标系统的当前状态
  目标系统硬件、软件、业务是否正常、目前处于何种状态
- 保证目标系统可靠性，业务可以持续稳定运行
  有问题第一时间反馈出来，便于运维人员处理

## 监控方法

- 了解监控对象
  例如:CPU如何工作？
- 性能基准指标
  例如: CPU使用率、负载、用户态、内核态、上下文切换
- 报警阈值定义
  例如: CPU负载高的定义，内核态、用户态多少算高
- 故障处理流程
  如何更高效处理故障的流程

## 监控核心

- 发现问题
- 定位问题
- 解决问题
- 总结问题，对故障原因及问题防范进行归纳总结，避免以后重复出现

## 监控工具

- 老牌监控

- - Cacti
  - Nagios
  - smokeping

- 流行监控

- - Zabbix
  - OpenFalcon
  - Prometheus+Grafana
  - 滴滴开源夜莺Nightingale
  - smartping(专用于网络监控)
  - LEPUS天兔(专用于监控数据库)

- 自研

- 第三方监控

- - 监控宝
  - 听云
  - newrelic

## 监控流程

- 采集
  通过SNMP、Agent、ICMP、SSH、IPMI等对系统进行数据采集
- 存储
  各类数据库服务,MySQL、PostgreSQL
- 分析
  提供图形及时间线情况信息，方便我们定位故障所在
- 展示
  指标信息、指标趋势展示
- 报警
  电话、邮件、微信、短信、报警升级机制
- 处理
  故障级别判定，找响应人员进行快速处理

## 监控指标

- 硬件监控

- - 机器硬件:CPU温度、物理磁盘、虚拟磁盘、主板温度、磁盘阵列
  IPMI工具无法获取到硬件的状态，可以借助MegaCli工具探测Raid磁盘队列状态
  [https://www.ibm.com/developerworks/cn/linux/l-ipmi/](https://link.zhihu.com/?target=https%3A//www.ibm.com/developerworks/cn/linux/l-ipmi/)

- 系统监控

- - 主机存活
  - CPU、内存、硬盘、使用率
  - inode
  - 负载
  - 网卡出入带宽
  - TCP连接数
  - 磁盘读写、只读

- 应用监控

- - MySQL

  - - 服务可用性
    - 内存使用率
    - 磁盘使用
    - 主从不同步及延迟
    - 备份情况
    - 连接数

  - Redis、Redis Cluster

  - - 负载
    - 内存使用率
    - 连接数量
    - qps

  - Nginx

  - - 状态码
    - 连接状态信息

  - RabbitMQ

  - PHP-FPM

  - OpenLDAP

  - - 接入IP
    - 调用次数

  - Zimbra

  - OpenVPN

  - - 版本信息、当前在线
    - 用户、分配IP、客户端连接IP、通过IP获取地址位置、接收发送流量 连接时间 时长 连接ID

  - ELK

  - Graylog

  - GitLab

  - Jenkins

  - MongoDB

  - HAproxy

- 网络监控

- - 网络质量
  - 公网出口
  - 专线带宽
  - 网络设备

- 流量分析

- 日志监控

- 安全监控

- URL、API监控

- - [https://github.com/brotandgames/ciao](https://link.zhihu.com/?target=https%3A//github.com/brotandgames/ciao) 简单易用
  - [https://github.com/710leo/urlooker](https://link.zhihu.com/?target=https%3A//github.com/710leo/urlooker)
  - 自研
  - 阿里云方案

- 性能监控(APM)java|php|go|nodejs|分布式链路追踪

- - PinPoint
  - Zipkin
  - SkyWalking
  - CAT、Jaeger

- 业务监控

- - 电商业务为例

  - - 每分钟产生多少订单
    - 每分钟注册多少用户
    - 每分钟多少活跃用户
    - 每天有多少推广活动
    - 推广活动引入多少用户
    - 推广活动引入多少流量
    - 推广活动引入多少利润

- 其他

- - SSL证书监控
  - 存活性 进程是否还在，端口监听、Log滚动
  - 健康指标 MQ消息堆积量
  - 接口监控 API成功率，延迟情况，QPS等等

## 监控报警

- 邮件
- 短信
- 钉钉、微信、企业微信等其他即时通信软件
- 电话

## 报警处理

- 故障自愈: 服务器宕机自动启动。利用软件机制supervisor,systemd或者自定义脚本实现

## 综合监控

- 硬件监控
  通过SNMP来进行路由器交换机的监控、其他内容使用IPMI实现。如果都是公有云，可以忽略这部分内容。案例:[Open-Falcon监控H3C-ER3260G2路由器](https://link.zhihu.com/?target=https%3A//www.mdslq.cn/archives/186e54d8.html)

- 系统监控

- 服务监控

- - 服务自带

  - - Nginx自带status模块
    - PHP相应status模块
    - MySQL利用percona官方工具进行监控

  - 通过自定义方法获取数据

  - - MySQL show global status xxx;
    - Redis info指令信息

- 网络监控(混合云架构)

- - smokeping
  - smartping

- 安全监控

- - 云服务直接用云安全组即可，或者补充本机iptables
  - 硬件防火墙
  - Web服务使用Nginx+Lua实现Web层面的防火墙，或者Openresty

- 日志监控
  ELK、Graylog实现异常日志，错误日志关键字的监控

- 业务监控
  确定监控指标，监控起来，业务不同各不相同

- 流量分析
  建议使用百度统计，google统计，商业，研发嵌入代码实现。或者使用[piwik](https://link.zhihu.com/?target=http%3A//www.piwik.cn/)

- 可视化
  dashboard

- 自动化监控
  通过API,批量操作

## 监控总结

完整的监控系统，需要对业务有详尽的了解，软件只是手段。


运维监控体系

Nexopera是一个专注于Linux、网络和运维等领域的博客网站。将为读者提供广泛的相关文章，涵盖操作系统、服务器管理、网络配置、安全性等多个主题。如果你是初学者，希望这里有适合你的内容。

一、shell 入门简介

1.1 什么是 shell

一、[zabbix]的基本概述

一、校验数字的表达式