哈喽，哈喽~大家有没有遇到过这种情况，手机用着用着没有内存了，一到设置里面一看。
微信和 QQ 10G!
啊这。。。。。就离谱！好说，好说，设置中都有一个清除数据的功能，一键下去内存暂时都回来了，但是宝，你确定你微信和QQ中的信息都没用吗？
下面能小编就用 Python 写个删除重复文件的脚本清理这些微信和QQ空间。确保在清除内存的时候，你的重要信息还在。
glob 模块非常简单，就是用来查找文件和文件夹。查找文件只用到三个匹配符："*", "?", "[]"。
通配符 功能
这个方法返回所有匹配的文件路径列表
# 当前路径下所有 py 文件
for fname in glob.glob("**/*.py",recursive=True):
print(fname)
# 当前路径文件 py 下 py 文件
for fname in glob.glob("py/*.py"):
print(fname)
# 单字通配符 ？,当前路径文件下以 Tem 开头后有一个字符文件夹
for fname in glob.glob("Tem?"):
print(fname)
# 范围通配符[],当前路径文件下以 Tem 开头后一个数字符的 py 文件
for fname in glob.glob("Tem[0-9].py"):
print(fname)
# 范围通配符[!],当前路径文件下以 Tem 开头后一个非数字符的 py 文件
for fname in glob.glob("Tem[!0-9].py"):
print(fname)
windowns下
file = glob.glob(r'D:\logs\*\*'
CRC32 算法概述 CRC 全称 Cyclic Redundancy Check，又叫循环冗余校验。和 md5 码一样都是 hash 的。当两个文件内容的 CRC32 相同的时候，这个文件也就是相同的。反之，两个文件就是不同的文件。
def crc32(file_path):
with open(file_path, 'rb') as fh:
hash = 0
while True:
s = fh.read(65536)
if not s:
break
hash = zlib.crc32(s, hash)
return "%08X" % (hash & 0xFFFFFFFF)
看到这里，想必都明白如何去重复文件了：
1. 用 glob.glob 扫描所有文件，
2. 把文件的 crc32 值放入字典中，
3. 找到字典中已经存在的 crc32 值的key，删除当前文件。
import os
import zlib
import glob
def scanning_floder(glob_path):
crc32Dict = {}
for fname in glob.glob(glob_path, recursive=True):
if os.path.isfile(fname):
crc = crc32(fname)
if crc in crc32Dict:
print('已经存在文件：' + crc32Dict.get(crc))
print('重复文件：' + fname)
print('删除文件：' + fname)
os.remove(fname)
print('')
else:
crc32Dict[crc] = fname
def crc32(file_path):
with open(file_path, 'rb') as f:
hash = 0
while True:
s = f.read(1024)
if not s:
break
hash = zlib.crc32(s, hash)
return "%08X" % (hash & 0xFFFFFFFF)
scanning_floder(r"C:\Users\xxxx\Documents\WeChat Files\xxxx\FileStorage\**\*")
本篇介绍了 glob 模块的用法和 crc32 值的计算，大家学废了吗
