Liunx：核实文件数量和大小

简介：在A、B服务之间进行scp远程复制时，如果文件目录数量众多，并且总量庞大，那么由于网络抖动或者系统存储机制等原因，很容易出现复制多传，少传，漏传的现象。规避此类事件的方法为，首先压缩成tar包，然后再复制tar包进行解压。最后对比前后文件数量和大小。

历史攻略：

centos：清理磁盘空间

操作步骤：

查看核实文件数量
find ./ | wc -l查看核实文件大小
du -sh /home/a1将文件压缩成tar包
tar cvf ./a1.tar ./home/a1cp 或者 scp tar包到目标路径
scp a1.tar  root@111.112.113.114:/home/a2.tar将tar包解压
tar xf a2.tar查看核实文件数量
cd /home  && find ./ | wc -l查看核实文件大小
du -sh /home/a2

Liunx：核实文件数量和大小相关推荐

SparkSql 控制输出文件数量且大小均匀(distribute by rand())
@羲凡--只为了更好的活着 SparkSql 控制输出文件数量且大小均匀(distribute by rand()) Q:Spark如何控制文件你输出数量? A:这个简单,用 coalesce或者re ...
NLog日志框架-输出文件数量与大小控制
目录概述一.NLog使用说明二.文件输出控制配置 1.规则说明 2.演示案例总结概述 Nlog是一个免费开源的.NET日志框架,拥有丰富的日志路由(XML配置表)和强大的管理能力.NLog便 ...
统计HDFS文件数量,大小,以及在某范围大小的文件数量
统计HDFS文件数量大小,小于20M文件数量 hadoop fs -du -h / # 统计文件大小 hadoop fs -count / # 统计文件数量,返回的数据是目录个数,文件个数,文件总计大 ...
Linux 磁盘管理-配额管理-配置用户对磁盘进行指定大小或者文件数量的使用权限
一.磁盘配额 1.磁盘配额概念配置用户对磁盘进行指定大小或者文件数量的使用权限. 1)用户配额和组配额 2)磁盘容量限制和文件个数限制 3)软限制和硬限制 4)宽限时间如果用户的空间占用数处于软限 ...
linux管道文件数量,Linux 下统计文件夹大小及文件数量
[查看文件夹大小]# /lib 目录大小 du -sh /lib # /lib 子目录大小 du -sh /lib/* # 查看 /lib 目录下普通文件大小 find /lib -type f -p ...
linux生成表格文件大小,如何为linux中的文件夹生成清单（文件列表及其大小和数量）...
如何生成包含除了填充等文件夹中除特定文件名之外的所有文件的清单. 实际要求 4 issue1425.tgz 3096209598 issue1426.TGZ 3096209591 issue1427. ...
max复制关键帧到不同的文件_彭占元|如何排除PostgreSQL WAL 文件数量长期持续增加？...
点击蓝字关注我们作者简介彭占元 2018年8月加入去哪儿网,现负责公司 PostgreSQL/GreenPlum 运维工作,对数据库日常运维和日常调优有大量优化实践经验. 1. 提出问题最近遇 ...
linux+nginx+mysql+php系统修改文件上传大小限制
linux+nginx+mysql+php系统修改文件上传大小限制对于LNMP框架的一些网站,上传文件大小会受到多个方面的限制,一个是nginx本身的限制,限制了客户端上传文件的大小,会报错&quo ...
利用浏览器调试功能计算百度网盘文件数量 V2
最近需要统计百度网盘里文件的数量,百度网盘又没有提供这样的功能,因此之前自己写了段脚本进行查验,见<利用浏览器调试功能计算百度网盘>.之后发现每个目录最多文件数只有1000,因此研究了 ...

Liunx：核实文件数量和大小

Liunx：核实文件数量和大小相关推荐

最新文章

热门文章