[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
* u# A% F8 z1 J& m; |: O+ ?大哥，你这个头像很爱啊，像ai又想vam，有没有出处

; i+ T* K' v- m- S! A抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
$ T* F$ r4 n- o4 S- q4 K' Wimport os
import imagehash
9 b8 }9 L2 x; R) M$ Ofrom PIL import Image

1 w  z' e: j) p2 R* {$ K( Z2 qdef compute_image_hash(image_path):
    # image = Image.open(image_path)
# t6 _% P' e- |  B    # return imagehash.average_hash(image)
    try:
9 ^* X0 b" ~* O0 _        with Image.open(image_path) as image:
            return imagehash.average_hash(image)
  n3 M+ g) u9 ^/ k- Z% ]    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
1 Q' I3 U  j, |- ]9 g5 z# v- g) z        return None
3 G: |" H' z0 t, Z7 T, `! i
def remove_duplicates(image_folder):
    hash_dict = {}
0 Q. h2 \- d" K- c) `* n$ H0 f    duplicates = []

: G4 ^4 E/ o5 n/ j7 S) x    for filename in os.listdir(image_folder):
        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
* a* G$ `* h7 ^& E" @            image_path = image_folder + "\\" + filename
            image_hash = compute_image_hash(image_path)
3 r% ~' P3 v) Z
3 z0 X" \$ a3 u) a/ i. Y            if image_hash in hash_dict:
                duplicates.append(image_path)
            else:
3 |9 S, N2 N* r7 m/ `  d                hash_dict[image_hash] = image_path
( e( @1 i& X' ]        else:
            pass
4 D3 [  A/ G3 ~( y9 B1 q$ J2 H
" F! J) L$ |. R4 R: B5 k1 c; R# X    for duplicate in duplicates:
  V% e9 ^6 M2 Z! S- h! l        os.remove(duplicate)
        print(f"Removed duplicate image: {duplicate}")
7 }% x: D% U' ]1 s) P2 j$ J: z7 t
# @3 y/ e5 f) e# n/ M    print("Duplicate removal complete.")
! y! l" }& v7 q" ~2 ]$ G7 a
' Y0 e, T4 `  A) p: V( Gimage_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
5 ~8 T! `' T. y9 n. l) Y! N有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

* W! M4 Q8 o: S有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
" g, f4 K5 }. U' z5 O5 `大哥，你这个头像很爱啊，像ai又想vam，有没有出处

( t" ~: n) O$ K" O# v一眼ai
- J4 a& S& \2 F: C" x# d5 N. t) ^