周六,周班人员电话通知,exchange服务器异常

因周四建了一个VDR服务器,做了一个备份任务,但周4-5的备份任务因文件太备份任务未成功,修改了一下备份时间段,准备在周未全天做备份,怀疑是因VDR备份导致的故障

远程查看,主机非常缓慢,PING网卡,时通时不通,经常卡顿;查看VDR的日志,提示有错误,备份产生快照未能删除,邮件服务器提示磁盘需要整合,点整合,到99%卡住,查资料,说正常现象,而且不能停止,如果停止,会导致数据丢失;等到周日8点,提示文件被锁定,失败

邮件服务器自动关机,查找资料,比较靠谱的是,做一个快照,删除,再整合,直接做快照,失败,提示文件锁定,按官网的提供的方法查找锁定文件,好复杂,除了邮件外,没有特别重要的应用,准备重启主机

(此时的征兆,整个Vcenter偶尔卡一下,有其他系统管理员说测试机很卡,因邮件服务器比较重要,未特别留意))

为了再靠谱一点,重启ESX主机,快照,成功;邮件关机,整合,仍然99%卡住,

准备做第二手准备,将虚机文件复制到另一个网络存储,速度比较慢

等到周一4点,整合成功,开机,服务器仍然很慢,会自动关机,外网电脑PING虚拟机断线的时候,内网电脑会卡住,但有部分虚拟机是正常的,另一台虚拟有机器也会卡,怀疑存储有问题

检查相关事件日志,发现光纤存储老是掉线,另一台做了双链路的的物理机没有问题,最终确定光纤交换机有问题,切换到另一台光纤交换机,3个存储盘只扫描到1个,把挂起的虚拟机关掉,重新扫描,终于全部识别,开机,一切恢复正常!!!

因光纤交换机故障,导致快照异常,提示磁盘需要整合,归根结底还是因存储读取异常,导致各种奇奇怪怪的事情发生

转载于:https://blog.51cto.com/126781/1610739

一起看起来是VDR导致的事故相关推荐

  1. 在调试里看NV驱动栈溢出导致的连环死锁

    最近我使用的一台PC随机出现应用程序卡死.卡死的程序可能是VirtualBox虚拟机,可能是资源管理器,也可能是其它软件.有时是一个程序卡死,有时是几个程序卡死,甚至是卡死一大片,整个系统不能动弹,只 ...

  2. 小明的故事(二) -- Fiddler超时导致的事故总结

    前文回顾: 小明在测试任务浏览器搜索栏推荐列表的测试中,因为没有考虑到json格式异常的情况,导致浏览器上线后出现大范围的崩溃,大熊连带被罚1000元,小明绩效考核扣除一个季度的奖金,本人对此也做了深 ...

  3. Spring Transactional还能导致生产事故?

    在Spring中进行事务管理非常简单,只需要在方法上加上注解@Transactional,Spring就可以自动帮我们进行事务的开启.提交.回滚操作.甚至很多人心里已经将Spring事务与@Trans ...

  4. Spring官方推荐的@Transactional还能导致生产事故?

    在Spring中进行事务管理非常简单,只需要在方法上加上注解@Transactional,Spring就可以自动帮我们进行事务的开启.提交.回滚操作.甚至很多人心里已经将Spring事务与@Trans ...

  5. 发生了一次 MySQL 误操作导致的事故,「高可用」都顶不住了

    今天聊聊在项目中遇到的一次事故,来一起复盘下吧. 事故现场 环境:测试环境 时间:上午10:30 反馈人员:测试群,炸锅了,研发同事初步排查后,发现可能是数据库问题. 然后就开始找原因吧.因为这套集群 ...

  6. jvm 之 国际酒店 8 月 19 一次full GC 导致的事故

    事故经过: 1  15:18收到短信报警:国际酒店调用OMS queryGorderOrderList方法失败:成单接口调用OMS获取token失败. 2  查看checkList发现15:18开始发 ...

  7. 什么?Spring官方推荐的@Transational还能导致生产事故?

    在Spring中进行事务管理非常简单,只需要在方法上加上注解@Transactional,Spring就可以自动帮我们进行事务的开启.提交.回滚操作.甚至很多人心里已经将Spring事务与@Trans ...

  8. c语言成绩存储的算法思想,[蓝桥杯][算法提高VIP]分数统计 (C语言代码)。。。。。还算简单,但是看错数字,导致开的内存不够。。。浪费了半个多小时。...

    解题思路:按题目,存储,比较再排序 注意事项:一定要看清楚输入的成绩个数是1000以内!!!!成绩范围才是一百以内. 参考代码: #include int main() { int n,i,k,t; ...

  9. 透过轨道交通应急处理系统定制方案,看企业如何正确搭建针对事故应急预案

    背景 客户是国内某市级轨道交通建设管理有限公司,负责轨道交通新建线路的初步设计.施工设计.施工队伍.车辆设备的招标.评标和决标:组织轨道交通新建线路的土建结构.建筑装修.设备安装工程及相应市政配套工程 ...

最新文章

  1. iOS 系统分析(一) 阅读内核准备知识
  2. python 获取公网 外网 ip 几种方式
  3. C语言经典算法五个人问岁数!——————【Badboy】
  4. 微型计算机1tb等于,计算机应用基础第一套试卷100分
  5. [TJOI2008]彩灯
  6. 使用ACME部署生成阿里云免费HTTPS证书
  7. mysql远程连接错误10038--navicat for mysql (10038)
  8. python xlwt模块使用_Python使用xlwt模块 操作Excel文件(转载)
  9. 轻量级 Java Web 服务框架漫谈
  10. css3中的新特性经典应用
  11. XAF框架简介-C#语言
  12. MySQL 58到家数据库30条军规解读
  13. html编写个人博客_云开发平台开箱,3分钟零基础搭建个人Hexo博客
  14. 5G无线技术基础自学系列 | 5G基站形态演进
  15. 分节符、分页符及页眉设置方法
  16. Android开发前景及现状分析,高级android工程师
  17. linux网卡驱动离线安装_手动安装linux网卡驱动方法
  18. ws2812驱动总结(包括对时序的详细分析,代码基于STC15系列单片机)
  19. Matlab语音信号去噪程序,使用低通巴特沃斯滤波器
  20. 实打实的方式VS对方是否

热门文章

  1. 怎样评价国产报表工具和BI软件
  2. Java 坦克大战游戏
  3. ae和php哪个容易学,PS、AI、AE、PR哪个简单可以先学?
  4. APP常见启动报错:java.lang.SecurityException: Permission Denial: starting Intent
  5. MITSUBISHI: FX3U-32M 使用 GX works2 通讯与编程
  6. GBase8s ALTER SEQUENCE解析
  7. 光线追踪渲染实战(二):BVH 加速遍历结构
  8. hdu 5411 矩阵幂求和
  9. 如何设置WIN10默认使用英语输入?
  10. 用同文输入法,实现五笔双键布局