[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
大哥，你这个头像很爱啊，像ai又想vam，有没有出处

抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

" s0 W# J' C* q感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
7 M2 Z2 s% C; @& V0 c/ K7 uimport imagehash
from PIL import Image
' Q# y& K+ V* A% E2 S+ I* b
4 l5 J' @' V0 N0 hdef compute_image_hash(image_path):
% L' h0 C4 t- E) M    # image = Image.open(image_path)
' v' s% Q- v6 f0 ?7 e    # return imagehash.average_hash(image)
    try:
" U5 M6 P% M1 G8 G: l        with Image.open(image_path) as image:
9 @3 v; S( M' w& r; v( W            return imagehash.average_hash(image)
    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
        return None

: _7 u$ q7 T7 W% W0 P( Adef remove_duplicates(image_folder):
    hash_dict = {}
, z4 }5 C0 |7 N7 q# _' t$ |( M    duplicates = []

    for filename in os.listdir(image_folder):
        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
            image_path = image_folder + "\\" + filename
            image_hash = compute_image_hash(image_path)

            if image_hash in hash_dict:
                duplicates.append(image_path)
            else:
3 p  w* f. ~/ e- ?" Q                hash_dict[image_hash] = image_path
        else:
9 O( m# h) E3 y. a8 K            pass
( K# H1 w% K/ P6 g0 _
    for duplicate in duplicates:
2 G" E" j4 B- _+ N' ^; G1 Z4 `9 X        os.remove(duplicate)
: z: \/ ]! L5 A# o" F2 r- q9 }        print(f"Removed duplicate image: {duplicate}")

7 c/ z5 |  |5 t$ s    print("Duplicate removal complete.")
. I- u( m! v) t1 y' A
: U% Q( H8 U8 Y1 i0 k5 uimage_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
& m) Q3 J3 x6 t3 v  W2 ^有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
- L% K. ^  r' D6 w$ J2 g. E  z& e大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai