昨天坛友让帮忙爬的秀人，今天来分享了

etc小号 · 发表于 2022-5-9 20:05:17

https://hostloc.com/thread-1013618-1-1.html
@akkba

源站是这个
[url][url]xiurenb.net[/url][/url]

我分成了两个部分爬的，一个是秀人，一个是其他分类

秀人的29万多张，近80g

all的是其他分类，27万多张，近70g

下面两个都是txt链接地址，wget -i txt名即可食用

http://141.94.115.57:81/xiuren.zip

http://141.94.115.57:81/all.zip

欢迎楼下大佬分流txt以及图包

stuazt · 发表于 2022-5-10 16:33:55

本帖最后由 stuazt 于 2022-5-11 19:52 编辑

网站改域名了，url列表先把p.xiurenb.net替换成pic.xiurenb.net哦
====================
给大家来个PowerShell的下载命令吧，方便大家在Windows下直接下载。
可以直接按uploadfile后面的路径自动建文件夹，保留楼主的目录结构：

$urls = Get-Content "E:/xiuren.txt"
$lastPath = ""
$currentPath = ""
$outputFile = ""
foreach ($url in $urls){
$outputFile = $url.replace("https://pic.xiurenb.net/uploadfile","E:/target")
$currentPath = $outputFile.Substring(0,$outputFile.LastIndexOf('/'))
if($lastPath -ne $currentPath){
$lastPath = $currentPath
if(-NOT (Test-Path $currentPath)){
mkdir -p $currentPath
}
}
if(-NOT (Test-Path $outputFile)){
Invoke-WebRequest -Uri $url -OutFile $outputFile
}
else{
echo "Skip $outputFile"
}
}

复制代码

使用方法，新建个down.txt文件，把这段代码复制进去，保存。修改扩展名为ps1，也就是down.ps1
然后打开PowerShell7，输入这个down.ps1的完整路径回车就可以运行了。
注意：
1，这段代码是在PowerShell7中测试ok的；
2，代码中"E:/xiuren.txt"，"E:/target"这两个路径自己酌情修改。
3，如果中断了，可以再次执行命令，会自动跳过已经下载过的文件。
4，下载很慢，还是需要改成多线程下载才行

huifukejian · 发表于 2022-5-10 18:32:02

用fultter写了个app, 有没有要的

qingseyouran · 发表于 2022-5-9 23:08:06

wissmiss 发表于 2022-5-9 20:09
在下载了谢谢大佬

不错
还是wget行
我是win本机下使用这个https://eternallybored.org/misc/wget/

etc小号 · 发表于 2022-5-9 20:16:04

lewss 发表于 2022-5-9 20:13
小鸡硬盘不够大怎么下载？

1.不下载
2.给小鸡花钱加硬盘
3.换一个硬盘更大的小鸡
4.挂载od或者gd云盘然后下载
5.等其他大佬分享成品
6.直接在源站观赏

qingseyouran · 发表于 2022-5-10 22:46:18

wangjianjilei 发表于 2022-5-10 19:47
附件为php版本下载图片，自取
运行方式 windows命令行下php ./doall.php，没有环境变量的自己配 ...

单线程速度太慢，能不能弄个多线程的

wangjianjilei · 发表于 2022-5-10 22:43:37

etc小号发表于 2022-5-10 20:04
大佬你好，带文件结构吗

带的，看代码就知道了

张大牛 · 发表于 2022-5-10 18:20:45

canxunhulian 发表于 2022-5-10 17:48
WP+子比

谢谢老哥

好鸭 · 发表于 2022-5-9 20:41:55

只有链接没意思呀，图包的名都没有了

b66667777 · 发表于 2022-5-9 20:07:14

感谢分享

tinysiri · 发表于 2022-5-9 20:07:14

不错支持一下

wissmiss · 发表于 2022-5-9 20:09:17

在下载了谢谢大佬

etc小号 · 发表于 2022-5-9 20:12:13

wissmiss 发表于 2022-5-9 20:09
在下载了谢谢大佬

你的速度怎么样。我这大概5m/s的样子

jue · 发表于 2022-5-9 20:12:44

wissmiss 发表于 2022-5-9 20:09
在下载了谢谢大佬

大佬到时候分享一个阿里云盘吧

lewss · 发表于 2022-5-9 20:13:44

小鸡硬盘不够大怎么下载？

yanzhiling2002 · 发表于 2022-5-9 20:28:57

这两个zip文件下载不了大佬

etc小号 · 发表于 2022-5-9 20:33:17

yanzhiling2002 发表于 2022-5-9 20:28
这两个zip文件下载不了大佬

我这没问题啊，你那显示什么

		自动登录	找回密码
密码			注册