[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
2 g3 I7 x$ q; C/ y' e大哥，你这个头像很爱啊，像ai又想vam，有没有出处

. f- G* ^+ L% h* G+ \% c抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
5 U' \6 z8 T8 A# n3 bimport os
import imagehash
/ s% J1 Z/ j# D/ K* H6 gfrom PIL import Image
+ h% j9 C) a; W7 @/ D
6 N$ H5 G% y) ^& J/ Odef compute_image_hash(image_path):
# j3 c" `8 r* r0 F' D3 P7 Z    # image = Image.open(image_path)
    # return imagehash.average_hash(image)
    try:
6 F& P: @' m& [8 \& t        with Image.open(image_path) as image:
! g  N9 A! c, u0 ?3 D( E            return imagehash.average_hash(image)
6 ?$ q. X$ b3 f9 Y- ~, w4 O    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
2 P- _2 N: V: }; u, r3 f8 N/ d, t        return None
0 Y2 Q. \+ u  H) U* F2 V
def remove_duplicates(image_folder):
    hash_dict = {}
5 n' x4 ?' j0 `    duplicates = []
/ Q/ }9 v: ^- L
    for filename in os.listdir(image_folder):
5 Y7 I. [+ [: K. W6 A        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
            image_path = image_folder + "\\" + filename
5 T0 r8 n! ]3 ~: }: [% n            image_hash = compute_image_hash(image_path)
- D# {) n  T" V9 v! F/ g0 _
            if image_hash in hash_dict:
6 d* Y" C. @+ Q% p: B0 v8 m                duplicates.append(image_path)
            else:
                hash_dict[image_hash] = image_path
        else:
( T0 l" u( l5 \# O" T            pass

    for duplicate in duplicates:
4 z" z) V, }5 h/ |        os.remove(duplicate)
; A* T  O! E+ a) }( L" ^) n        print(f"Removed duplicate image: {duplicate}")
/ O# ]+ K) _2 f1 J6 I
% U+ ]! }+ `+ W, X' S" o    print("Duplicate removal complete.")
% K, A3 s/ Q; v) G) T/ m! V0 B
# X5 Y. k% c5 y, Y" [: ?2 [image_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
# P- j; Q0 g2 x0 i4 |8 w' V( Y& kremove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
* D5 P5 \$ ~- _有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

# ?, j7 N# I! h7 f6 T" E有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai
" W4 c% i. ?6 Q! ~: T& c