VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

Wesley13
• 阅读 1207

工作中由于前期规划不足,导致磁盘空间分配较大,而且是厚置备。后期不再需要时,无法把用不到的空间释放出来,造成空间浪费。经过摸索和实验验证,到最终解决问题,总结出来两种方案。 

风险提示:两种方案的实验都验证通过了,但第一种方案在生产环境中没有成功,如有类似问题,建议采用第二种方案!

环境:Esxi 6.5,vCenter 6.5 U1e,Ubuntu 16.04

由于初始分配给Ubuntu 16.04虚拟机的硬盘空间是2T,后期数据量加大需要增加空间时,发现分区表不是GPT,无法超过2T。

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

导致已在vCenter里给虚拟机增加的空间浪费,也就是下图中的这个数字,只能调高,不能调低。

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware官方对于这种情况提供了一种解决办法:通过迁移,改变虚拟磁盘格式,从“厚置备”改成“精简置备”,从而减小实际占用的空间。

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间                        

官方网址:https://kb.vmware.com/s/article/2014832

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间  

通过官方的解决办法进行处理,如下图所示,结果喜忧参半

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

喜的是实际占用的空间确实减小了,忧的是减小的空间仅仅是未分配的unallocated这部分,前面已分配的空间,虽然文件已经删除了,但并没有减小。

第一种方案:压缩文件系统大小,分区未使用空间充零,修改虚拟磁盘格式。

通过如下实验进行验证:

1.给虚拟机分配40G的厚置备硬盘空间并安装系统,安装完毕后不进行任何操作,直接关机。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间                       

2.关机后迁移虚拟机,虚拟磁盘格式从“厚置备”改成“精简置备”,已用空间减小到6GB,说明在没有写入数据的情况下,通过官方的方法是可以减小实际占用空间的。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

3. 再次迁移虚拟机,把虚拟磁盘格式从“精简置备”改成“厚置备”,然后拷贝大文件把硬盘空间填充满。

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

4.把大文件删除,关机后迁移虚拟机,虚拟磁盘格式从“厚置备”改成“精简置备”。可以看到,虽然删除了大文件,但通过迁移的方式也仅仅能回收没有写入过数据的很小的一块空间。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

5.用SystemRescueCD启动虚拟机,减小/分区的大小

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

fdisk –lu              #查看磁盘分区情况

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

e2fsck –f /dev/sda1        #检查文件系统

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

resize2fs /dev/sda1 10G        #把文件系统大小调整为10G

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

parted /dev/sda                                   #使用parted调整硬盘分区,注意是/dev/sda

(parted)resizepart 1 12G                    #调整分区大小,1代表/dev/sda1

#注意:parted分区大小计算方式不同,所以多留一些空间防止数据丢失

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

resize2fs /dev/sda1         #调整文件系统大小,使之与分区大小相匹配

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

6.重启,从本地硬盘启动,查看磁盘分区大小,可以看到/dev/sda1已经被压缩了。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

7.在未分配的空间新建一个分区,然后全部置零

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

dd bs=64k if=/dev/zero of=/dev/sda2           #bs表示每次写的块的大小

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

在Gparted中可以看到File System变成了unknown

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

删除/dev/sda2,使之变成unallocated

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

8.关机后迁移虚拟机,把虚拟磁盘格式从“精简置备”改成“厚置备快速置零”。

之所以要多做这么一步,是因为上面的操作只是在把操作系统里把未使用的空间置零了,虚拟机并不知道,因此需要通过这步操作,让虚拟机把未使用的空间也置零。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

9.再次迁移虚拟机,把虚拟磁盘格式从“厚置备”改成“精简置备”,可以看到已用空间减小到10GB,也就是实际占用的空间确实减小了。

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

通过上述实验,基本上验证了虚拟机回收空间的标准:

  1. 分配后尚未写入过数据;
  2. 分配后写入过数据,但在操作系统和虚拟机里均进行过置零操作。

以上方法回收的是Linux系统的空间,理论上Windows系统也可以通过这个方法回收,只是用到的软件不同。

第二种方案:使用再生龙Clonezilla软件进行备份还原

虽然上文提到第一种方法实验验证通过了,但是在操作生产环境中的机器时,由于各种未知原因(快照、磁盘整合、漫长的数据迁移时间…),导致最后的结果并不理想,虽然成功的把文件系统的大小减小到了55G,但从厚置备转换为精简置备后,并没有达到空间释放的目的。

此处应有图片,晚上截图。

这个方法走不通之后,我想到发生问题之初,曾咨询过一位老哥,当时提到了一个很牛逼的软件,产自宝岛台湾的再生龙Clonezilla。

由于那时我还没有找到减小文件系统大小的方法,而再生龙有如下限制,因此也就没法通过备份还原的方式解决问题。

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

其实现在想来,通过先备份,再还原到精简置备磁盘的方式,应该也是可以的,不过没有验证,而且对于强迫症患者来说,这个方案也并不完美。

所以我的方法是先备份原机器/dev/sda1分区,再新建一台虚拟机,空间比原机器/dev/sda1分区的大小略大(原因参考使用再生龙Clonezilla备份还原Linux系统),然后把备份内容还原到新虚拟机上,之后再把原机器/dev/sdb1分区所在的虚拟磁盘添加到新虚拟机中。

当然,还是要先通过实验验证一番,具体步骤另外写了一篇随笔使用再生龙Clonezilla备份还原Linux系统

实验很成功,效果很满意,接下来就是在半夜没有业务的时候关机调整了。得益于再生龙Clonezilla超高的备份还原效率,30分钟之内完成了全部操作,经过一天的测试,一切正常。

原机器和新机器的配置对比

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

 VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

VMware虚拟机,从厚置备改成精简置备,并减小硬盘的实际占用空间

总结:

1.前期的规划很重要,没做好规划,后期就要浪费很多时间来填坑。

2.大体积虚拟磁盘文件的迁移很费时间,一晚上可能只能干这一件事。

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Easter79 Easter79
3年前
swap空间的增减方法
(1)增大swap空间去激活swap交换区:swapoff v /dev/vg00/lvswap扩展交换lv:lvextend L 10G /dev/vg00/lvswap重新生成swap交换区:mkswap /dev/vg00/lvswap激活新生成的交换区:swapon v /dev/vg00/lvswap
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
待兔 待兔
5个月前
手写Java HashMap源码
HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程22
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Stella981 Stella981
3年前
KVM调整cpu和内存
一.修改kvm虚拟机的配置1、virsheditcentos7找到“memory”和“vcpu”标签,将<namecentos7</name<uuid2220a6d1a36a4fbb8523e078b3dfe795</uuid
Easter79 Easter79
3年前
Twitter的分布式自增ID算法snowflake (Java版)
概述分布式系统中,有一些需要使用全局唯一ID的场景,这种时候为了防止ID冲突可以使用36位的UUID,但是UUID有一些缺点,首先他相对比较长,另外UUID一般是无序的。有些时候我们希望能使用一种简单一些的ID,并且希望ID能够按照时间有序生成。而twitter的snowflake解决了这种需求,最初Twitter把存储系统从MySQL迁移
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
11个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这