洛阳翼展电脑

CRC32检测删除重复文件！

2020-11-10 乱云飞 评论(0) 浏览(652) 标签: 批量删除 删除重复文件 文件比较 文件夹比较 扫描重复文件

删除群晖重复照片

2019-11-11 乱云飞 评论(0) 浏览(751) 标签: 删除重复文件 群晖 开机脚本 删除重复照片

telnet IP
USER
PASSWORD
cd /
cd /volume2/photo
find . -type f -exec md5sum {} \; | sort -k 1 | awk 'a[$1]++{print $2}' | xargs -t -i rm -f {}
等待完成...

群晖通过文件MD5删除重复文件，仅保留一份源文件

2019-11-11 乱云飞 评论(0) 浏览(1204) 标签: 删除重复文件 群辉NAS 群辉MD5

find . -type f -exec md5sum {} \; | sort -k 1 | awk 'a[$1]++{print $2}' | xargs -t -i rm -f {}

在群晖计划任务中添加本任务即可。
不能不说shell命令的强大，一条命令就可以解决繁琐编码。
根据文件MD5删除重复文件，仅保留一份文件：
这一条命令很容易理解，需要看一下find，md5sum，sort，awk，和xargs的相关解析。
1、首先使用find查找当前目录下的文件然后调用md5sum对文件进行md5计算；
2、使用sort对文件md5进行排序，为了使相同md5的文件排列到一起；
3、使用awk数组对md5进行统计，如果该md5对应多个文件，则输出该文件；
4、通过rm删除第三步统计出来的文件；