1.首先利用系统工具，定位问题[ top | nmon | dstat -dcnml | orzdba ]：

top命令查看各个进程的资源占用情况，各个指标依次解读如下【top f|1 --help】 ：

第一行：当前系统时间，系统运行时长，当前登录用户数，系统负载（任务队列的平均长度，三个数值分别为1,5,15分钟）【系统负载不要超过cpu的核数】

第二行：进程总数，正在运行的进程数据，睡眠的进程数，停止的进程数，僵尸进程数

第三行：用户空间占用cpu百分比，内核空间占用cpu百分比，用户进程空间改变过优先级的进程占cpu的百分比，空闲cpu百分比，等待输入输出cpu百分比，，，

第四行：物理内存总数，使用的物理内存总数，空闲内存总量，用作内核缓存的内存量 【70%】

第五行：交换区总量，使用的交换区总量，空闲交换区总量，缓冲的交换区总量 【不要使用交换分区】

pid 进程id

ppid 父进程id

Ruser real user name

uid 进程所有者用户id

user进程所有者用户名

group 进程所有者组名

tty 启动进程的终端

pr 优先级

NI 优先级（负值表示优先级高，正值表示优先级低）

p 最后使用的cpu，仅在cpu多的情况下

%CPU 上次更新到现在，cpu占用百分比

TIME 系统使用的cpu时间总计（秒）

TIME+ ~（1/100秒）

%MEM 进程使用的物理内存百分比

VIRT 进程使用的虚拟内存总量 VIRT=SWAP+RES

SWAP 进程使用的虚拟内存总量 VIRT=SWAP+RES

RES 进程使用的虚拟内存中，被换出的大小 进程使用的、未被换出的物理内存大小RES=CODE+DATA

CODE可执行代码占用物理内存大小

DATA 可执行代码以外的部分(数据段+栈)占用的物理内存大小

SHR 共享内存大小

nFLT 页面错误次数

nDRT 最后一次写入到现在，被修改过的页面数

S 进程状态 D=不可中断的睡眠状态 R=运行 S=睡眠 T=跟踪/停止 Z=僵尸进程
COMMAND 命令行，命令

WCHAN 若该进程在睡眠，则显示睡眠中的，系统函数名

FLAGS 任务标志

2.查看网络问题

netstat -i 1 是否存在丢包，网络错误问题

iftop 【D S】查看进程流量流向 按S切换是否显示本机的端口信息;按D切换是否显示远端目标主机的端口信息;

3.查看io流向

iostat -x 2

iotop 查看进程io走向

dd if=/dev/zero of=/data1/test bs=64k count=16k conv=fsync 目前生产环境EMC正常写入速度 565 MB/秒
dd if=/data1/test bs=64k |dd of=/dev/null 目前生产环境EMC正常读取速度 675 MB/秒

4.. query压力情况
mysqladmin -uroot -P3309 ext -ri 1 |grep -i queries

5.查看是否有锁等待

select r.trx_id waiting_trx_id,
r.trx_mysql_thread_id waiting_thread,
r.trx_query waiting_query,
b.trx_id blocking_trx_id,
b.trx_mysql_thread_id blocking_thread,
b.trx_query blocking_query
from information_schema.innodb_lock_waits w
INNER JOIN information_schema.innodb_trx b
ON b.trx_id = w.blocking_trx_id
INNER JOIN information_schema.innodb_trx r
ON r.trx_id = w.requesting_trx_id\G;

6.查看innodb状态

show engine innodb status\G;

7.从监控工具中查看,历史记录

zabbix