全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 9814|回复: 28
打印 上一主题 下一主题

[Windows VPS] curl能下载整个网站吗?

[复制链接]
跳转到指定楼层
1#
发表于 2012-11-30 13:12:55 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
本帖最后由 哈P哥 于 2012-11-30 13:16 编辑

curl.haxx.se 这个网站的程序咋样?能下载Discuz! X1.5整个网站里所有附件的图片吗?对方的论坛好像注册邀请的,邀请吗很难搞到。   或者火车头免费版能搞到吗?
2#
发表于 2012-11-30 13:17:38 | 只看该作者
wget能

评分

参与人数 1威望 +20 收起 理由
哈P哥 + 20 很给力!

查看全部评分

3#
 楼主| 发表于 2012-11-30 13:20:56 | 只看该作者
本帖最后由 哈P哥 于 2012-11-30 13:22 编辑
404 发表于 2012-11-30 13:17
wget能


谢了,我去试试,希望能下到整站的图片,但是万一对方服务器有权限限制wget也行?
4#
发表于 2012-11-30 13:24:05 | 只看该作者
哈P哥 发表于 2012-11-29 23:20
谢了,我去试试,希望能下到整站的图片,但是万一对方服务器有权限限制wget也行? ...

你登录一下,看下user-agent和cookie, 跑wget的时候设置成一样的基本就没问题了。 不过静态资源用js加载的就没办法了

评分

参与人数 1威望 +20 收起 理由
哈P哥 + 20 赞一个!

查看全部评分

5#
 楼主| 发表于 2012-11-30 14:34:31 | 只看该作者
本帖最后由 哈P哥 于 2012-11-30 15:03 编辑
404 发表于 2012-11-30 13:24
你登录一下,看下user-agent和cookie, 跑wget的时候设置成一样的基本就没问题了。 不过静态资源用js加载 ...


我用这个命令 wget -m -e robots=off -U "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6" "http://www.example.com/"    为什么wget 都是提示time-stamps turned off? lll.JPG (70.95 KB, 下载次数: 1)
6#
 楼主| 发表于 2012-11-30 15:06:02 | 只看该作者
求助啊wget 下载Discuz! X1.5整站附件的图片啊
suzizi 该用户已被删除
7#
发表于 2012-11-30 15:19:51 | 只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
8#
 楼主| 发表于 2012-11-30 15:24:52 | 只看该作者
suzizi 发表于 2012-11-30 15:19
不行

下载不了吗?有别的办法吗?
9#
发表于 2012-11-30 15:30:04 | 只看该作者
论坛所有图片的URL如何收集呢?
10#
发表于 2012-11-30 15:33:30 | 只看该作者
可以吧,弄个列表,curl 自己读
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-12-17 22:19 , Processed in 0.142307 second(s), 20 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表