“Jak usunąć zduplikowane pliki z folderu za pomocą Pythona” Kod odpowiedzi

Jak usunąć zduplikowane pliki z folderu za pomocą Pythona

def remove_duplicates(dir):
    unique = []
    for filename in os.listdir(dir):
        if os.path.isfile(filename):
            filehash = md5.md5(file(filename).read()).hexdigest()
            if filehash not in unique: 
                unique.append(filehash)
            else: 
                os.remove(filename)