运维！你对数据要有敬畏之心~

2022-06-13 16:14:16

简述

“对数据要有敬畏之心”这个主题是同事在一个早会分享时提出的，却直接引起我心中的共鸣。前几年各种删库跑路事件、Facebook宕机事件仍不绝于耳，虽然大家将“删库跑路”当作一个调侃与谈资，但上升到“对数据要有敬畏之心”的高度，作为运维我们就要居安思危，防患于未然。

数据的定义

从运维的角度，数据不是独立存在的，它存在于日常运维过程中的各个环节，如例行维护、变更、故障处理等。因此如果我们只考虑数据本身则意义不大，要从数据存在的各个环节去分析。

在此我们将其大体概括为：

数据备份
文件系统+例行维护
数据库
大数据
业务版本发布
需求变更

数据备份

从数据安全的角度出发，我们先想到的肯定是数据备份，下面我们来看下数据备份的几个关键点。

首先，根据备份空间和从备份恢复的速度允许的情况下，我们可以将数据备份分为本地备份和异地备份（不考虑多机房容灾）。其次，无论是何种备份方式，我们都需要考虑备份保存周期，因此无规则限制的归档会带来存储成本的不断升高。后，针对数据丢失或误删等各种场景，我们需要确定就是备份哪些内容。

对此我们总结需要备份的内容如下：

系统级配置文件

内核参数、hosts解析、crontab计划任务、环境变量、防火墙等

应用级配置文件

Nginx、Java应用、中间件、DNS等

日志级数据

应用日志、Nginx 日志等

数据库备份

binlog日志、逻辑备份、配置文件、慢查询日志

文件系统+例行维护

和文件系统联系紧密的莫过于日常例行维护了，如磁盘清理、文件处理等所有与数据丢失风险相关的操作。当我们在例行维护过程中，运维必须精神高度集中，非常清晰的注意每个指令，执行危险操作时可以和同事进行二次确认。

操作文件系统虽然都是简单命令，但也是有窍门的，在此给大家推荐下。


【运维小贴士：巧用Linux冒号命令，实现rm防误删】Linux系统中冒号(:)在bash中是一个內建命令，而不单纯是一个分隔符，它的主要作用是空命令、参数扩展、重定向、注释等。我们可以使用其参数扩展特性实现rm的防误删功能，下面我们来通过实例讲解下其用法。格式：${parameter:-test}功能：如果parameter没有设置或者为空，替换为test；否则替换为parameter的值。命令：rm -rf ${dest:-test}用法：当变量dest为空时，删除test；当变量dest不为空时，删除test用例：rm -rf /$dest。当变量dest没有设置或为空时，则命令变成rm -rf /，这将误删系统根目录，导致系统崩溃。改进：rm -rf /${dest:-test}，当变量dest没有设置或为空时，会使用test代替，则命令变成rm -rf /test，删除此目录不会产生任何影响。