全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
楼主: etc小号

昨天坛友让帮忙爬的秀人,今天来分享了

  [复制链接]
发表于 2022-5-10 16:05:16 来自手机 | 显示全部楼层
canxunhulian 发表于 2022-5-9 22:02
原图来我这 acg.ng mjj私我打折

老哥网站挺好看的,你这是什么程序?
发表于 2022-5-10 16:33:55 | 显示全部楼层
本帖最后由 stuazt 于 2022-5-11 19:52 编辑

网站改域名了,url列表先把p.xiurenb.net替换成pic.xiurenb.net哦
====================
给大家来个PowerShell的下载命令吧,方便大家在Windows下直接下载。
可以直接按uploadfile后面的路径自动建文件夹,保留楼主的目录结构:
  1. $urls = Get-Content "E:/xiuren.txt"
  2. $lastPath = ""
  3. $currentPath = ""
  4. $outputFile = ""
  5. foreach ($url in $urls){
  6.         $outputFile = $url.replace("https://pic.xiurenb.net/uploadfile","E:/target")
  7.         $currentPath = $outputFile.Substring(0,$outputFile.LastIndexOf('/'))
  8.         if($lastPath -ne $currentPath){
  9.                 $lastPath = $currentPath
  10.                 if(-NOT (Test-Path $currentPath)){
  11.                         mkdir -p $currentPath
  12.                 }
  13.                
  14.         }
  15.         if(-NOT (Test-Path $outputFile)){
  16.                 Invoke-WebRequest -Uri $url -OutFile $outputFile
  17.         }
  18.         else{
  19.                 echo "Skip $outputFile"
  20.         }
  21. }
复制代码


使用方法,新建个down.txt文件,把这段代码复制进去,保存。修改扩展名为ps1,也就是down.ps1
然后打开PowerShell7,输入这个down.ps1的完整路径回车就可以运行了。
注意:
1,这段代码是在PowerShell7中测试ok的;
2,代码中"E:/xiuren.txt","E:/target"这两个路径自己酌情修改。
3,如果中断了,可以再次执行命令,会自动跳过已经下载过的文件。
4,下载很慢,还是需要改成多线程下载才行

发表于 2022-5-10 17:18:37 | 显示全部楼层
canxunhulian 发表于 2022-5-9 22:02
原图来我这 acg.ng mjj私我打折

求全站打包
发表于 2022-5-10 17:48:52 | 显示全部楼层
张大牛 发表于 2022-5-10 16:05
老哥网站挺好看的,你这是什么程序?

WP+子比
发表于 2022-5-10 18:20:45 | 显示全部楼层
发表于 2022-5-10 18:32:02 | 显示全部楼层
用fultter写了个app,  有没有要的
发表于 2022-5-10 18:58:41 | 显示全部楼层
先收藏了看看!
发表于 2022-5-10 19:47:59 | 显示全部楼层
本帖最后由 wangjianjilei 于 2022-5-10 19:57 编辑

附件为php版本下载图片,自取
运行方式 windows命令行下php ./doall.php,没有环境变量的自己配

doall.zip

556 Bytes, 下载次数: 31

 楼主| 发表于 2022-5-10 20:04:03 | 显示全部楼层
wangjianjilei 发表于 2022-5-10 19:47
附件为php版本下载图片,自取
运行方式 windows命令行下php ./doall.php,没有环境变量的自己配 ...

大佬你好,带文件结构吗
发表于 2022-5-10 20:05:32 | 显示全部楼层
可以球写一个py的采集规则吗
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-5-13 00:19 , Processed in 0.067691 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表