V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
This topic created in 2661 days ago, the information mentioned may be changed or developed.
如果你想训练一个内容审核系统过滤不合适的信息，或用 GAN 做一些大胆的新想法，那么数据集是必不可少的。例如图像鉴黄，我们需要使用卷积神经网络训练一个分类器，以区分正常图像与限制级图像。但限制级的图像很难收集，也很少会开源。因此最近有开发者在 GitHub 上开源了一份 NSFW 图像数据集，这是不是你们想要的？
项目地址： https://github.com/alexkimxyz/nsfw_data_scrapper
最后，希望大家注意身体
项目地址： https://github.com/alexkimxyz/nsfw_data_scrapper
最后，希望大家注意身体
 |
1
lwlipuyang Jan 14, 2019
我佛了
|
 |
2
hilbertz Jan 14, 2019  46
好的，先让我再进行一次详细的人工标注
|
 |
3
publicvoid Jan 14, 2019
楼主好人
|
 |
4
DesmondLiu90 Jan 14, 2019
666
|
 |
5
zhang1215 Jan 14, 2019
刚刚随意打开一张发现并不是 NSFW 的 http://cdn.awwni.me/kguv.jpg
|
 |
6
lucahan Jan 14, 2019
有点强啊。。。。
|
 |
8
Oa Jan 14, 2019
删前留名
|
 |
9
wsd15321 Jan 14, 2019
这也行
|
 |
10
ziseyinzi Jan 14, 2019 via Android 1
收藏比回复多系列
|
 |
12
HOHOCCC Jan 14, 2019
这谁顶得住啊
|
 |
13
SuYia Jan 14, 2019 3
要不要拿出我私藏的爬虫出来？怕分享了大家身体就垮了
|
 |
14
hpeng Jan 14, 2019 via iPhone
Reddit 去采集 nsfw 就好了，已经帮你标注了
|
 |
15
slamDunkLINk Jan 14, 2019
楼上的,有就别私藏了,分享才是王道
|
 |
17
sxm Jan 14, 2019 via Android
抓个 xxx 站就有几百万的图了
|
 |
18
zhuoyan Jan 14, 2019
1042 次点击, 25 人收藏
|
 |
20
stone666 Jan 14, 2019
火钳刘明
|
 |
22
wwg1994 Jan 14, 2019
这谁顶得住啊
|
 |
23
shench Jan 14, 2019
厉害厉害！
|
 |
24
abeholder Jan 14, 2019 5
|
|
27
abeholder Jan 14, 2019
为什么突然萌生出一种六学既视感 。。。
说到 NSFW 的数据集， 我就想起了几个月前做的一个小的下载器。。。 别问了，问就文体两开花· |
 |
28
lingo Jan 14, 2019 3
你要说人工智能神经网络，我是不会的，但是你说人工标注，那我们的故事就开始了。
|
|
29
lingo Jan 14, 2019 4
顺便想起前几天看到的说 firefox 新功能，内置了一个黄网名单，名单上的网站不会出现在欢迎页。。
作为一个开源项目，能不能只对这份名单感兴趣 = = |
 |
30
d5 Jan 14, 2019 via iPhone
理念先进了
|
 |
31
gxlwm Jan 14, 2019
就这一会 star 涨了好多, 老哥们稳
|
 |
32
Amayadream Jan 14, 2019
这谁顶得住啊
|
 |
34
xspippo Jan 14, 2019 via iPhone
快拿我的营养快线
|
 |
35
jasonyang9 Jan 14, 2019
这叫学以致用
|
 |
36
Bantes Jan 14, 2019
1842 次点击 ∙ 55 人收藏
不说了，收藏波先 |
 |
37
suyuyu Jan 14, 2019
插眼
|
 |
38
x86 Jan 14, 2019 4
手冲一时爽，一直冲一直爽
|
 |
39
lkmountain Jan 14, 2019 via Android
插眼
|
 |
40
youngxu Jan 14, 2019 via Android
机器之心昨天发的，我昨天就 clone 了以防被删（ x
|
 |
41
OMGZui Jan 14, 2019 via Android
留图不留种，xxxxxx
|
 |
42
JRay Jan 14, 2019 2
为了学习人工智能我决定要收藏一波
|
 |
43
wjfz Jan 14, 2019
已 DownLoad ZIP 防止被删
|
 |
44
cp333 Jan 14, 2019 via iPhone
教练，我也要学人工智能
|
 |
45
hackpro Jan 14, 2019 via iPad
这么大的数据集就算了 你还要做 GAN
你想干嘛 想让 TA 自己脱衣服吗😂 |
 |
46
zhichaozhang Jan 14, 2019 via iPhone
fork 了
|
 |
48
leexy Jan 14, 2019
666
|
 |
49
ResidualWind Jan 14, 2019
火钳刘明
|
 |
50
rocyhua Jan 14, 2019
火钳刘明
|
 |
51
CivAx Jan 14, 2019
后排兜售营养快线、卷纸
|
 |
52
bravecarrot Jan 14, 2019 via iPhone
期待楼主的换脸作品
|
 |
53
zhouyg Jan 14, 2019
学习学习下人工智能
|
 |
54
Yiki Jan 14, 2019
大家保重身体
|
 |
55
lostberryzz Jan 14, 2019
proxychains4 wget --tries=1 -i raw_data/porn/porn.txt
|
 |
56
peaceblast Jan 14, 2019 via iPhone
@zhouyg 好像很正经的样子……
|
 |
57
mumonitor Jan 14, 2019
我准备开始学习卷积神经网络了！
|
 |
58
AngryPanda Jan 14, 2019
战略性 mark
|
 |
59
j717273419 Jan 14, 2019 via Android
有没有 nsfw 视频训练集
|
 |
60
1daydayde Jan 14, 2019
战略性马克，
 我为什么滑稽了起来 |
 |
61
xlcoder166 Jan 14, 2019
战略性马克 +1
|
 |
62
heiyutian Jan 14, 2019 via Android
这是限制级？
 |
 |
63
ddid Jan 14, 2019
我有个疑问，这些资源都是欧美的，如果是亚洲或者非洲内容，会不会免疫鉴定呢？
|
 |
64
hotea Jan 14, 2019
1024
|
 |
65
purplewall Jan 14, 2019
讲真这个项目是个爬虫+分类器吧，不过链接是真的多
|
 |
66
dissvm Jan 14, 2019 via Android
91024
|
 |
67
tao1991123 Jan 14, 2019
好人一生平安
|
|
68
ddid Jan 14, 2019
好吧，多翻了几张，挺全面的……
|
 |
69
michaelcheng Jan 14, 2019
凸(艹皿艹 ),在公司不小心点开
|
 |
70
googlefans Jan 14, 2019 via iPad
懂了
|
 |
71
KasuganoSoras Jan 14, 2019 1
<?php
$data = file_get_contents("/raw_data/pron/pron.txt"); $exp = explode("\n", $data); foreach($exp as $url) { exec("wget {$url}"); } |
|
72
KasuganoSoras Jan 14, 2019
写错了是 porn hhh
|
 |
73
berrybeberry Jan 14, 2019 via iPhone
哈哈哈
|
 |
74
wangfei324017 Jan 14, 2019
蛮多无关的啊。。
|
 |
75
Phariel Jan 14, 2019 via iPhone
这种项目建议不要 fork 会有 ban 号的风险
|
 |
76
Loyalsoldier Jan 14, 2019 2
cat ../urls.txt | xargs -n 1 -P 20 wget -t 3
-P 20 这个 20 上同时下载的数量，这是同时一次下载 20 张图片 -t 3 这个 3 是如果图片第一次下载失败后，尝试 3 次 |
 |
77
daxiongz Jan 14, 2019
够了....
|
 |
79
weeevv Jan 14, 2019 via Android
再来几个人把 GAN 抬上来...
|
 |
80
ayase252 Jan 14, 2019
|
 |
81
exciting Jan 14, 2019 via iPhone
1024
咦，不好意思走错站了。 |
 |
82
i945 Jan 14, 2019
我感觉... 这个真训练出来，没几张图能过审
|
 |
83
Mrlgm Jan 14, 2019
这谁顶得住呀
|
 |
84
Nick2VIPUser Jan 14, 2019 2
|
 |
85
fly9006 Jan 14, 2019
额，这样玩下去，gayhub💊
|
 |
86
xxgirl2 Jan 15, 2019
记得把下载脚本里的 wget 改用 aria2c，要不然那是真的慢（
|
 |
87
xuanbg Jan 15, 2019
自然风光图片不错
|
 |
88
imn1 Jan 15, 2019
自从有电脑开始就不缺这种数据，而且是已经标注了的……
|
 |
92
lyseky Jan 15, 2019 via Android
收藏不看系列
|
 |
93
fengc Jan 15, 2019 via iPhone
|
 |
94
flashrick Jan 15, 2019
这谁顶得住啊
|
 |
95
DRcoding Jan 15, 2019
7129 次点击 ∙ 263 人收藏 ∙ 5 人感谢
热爱学习的我觉定让它变成 264 人收藏 |
 |
96
hasbug Jan 15, 2019
翻看了一些，都是欧美，也没看到真漏的，失望，还不如 sex 站直接看
|
 |
97
huruwo Jan 15, 2019
fork 就完事了
|
 |
98
Tourin Jan 15, 2019
已 star
|
Select Language