全球主机交流论坛

标题: curl能下载整个网站吗？ [打印本页]

作者: 哈P哥 时间: 2012-11-30 13:12
标题: curl能下载整个网站吗？
本帖最后由哈P哥于 2012-11-30 13:16 编辑

curl.haxx.se 这个网站的程序咋样？能下载Discuz! X1.5整个网站里所有附件的图片吗？对方的论坛好像注册邀请的，邀请吗很难搞到。

或者火车头免费版能搞到吗？

作者: 404 时间: 2012-11-30 13:17
wget能

作者: 哈P哥 时间: 2012-11-30 13:20
本帖最后由哈P哥于 2012-11-30 13:22 编辑

404 发表于 2012-11-30 13:17
wget能

谢了，我去试试，希望能下到整站的图片，但是万一对方服务器有权限限制wget也行？

作者: 404 时间: 2012-11-30 13:24

哈P哥发表于 2012-11-29 23:20
谢了，我去试试，希望能下到整站的图片，但是万一对方服务器有权限限制wget也行？ ...

你登录一下，看下user-agent和cookie，跑wget的时候设置成一样的基本就没问题了。不过静态资源用js加载的就没办法了

作者: 哈P哥 时间: 2012-11-30 14:34
本帖最后由哈P哥于 2012-11-30 15:03 编辑

404 发表于 2012-11-30 13:24
你登录一下，看下user-agent和cookie，跑wget的时候设置成一样的基本就没问题了。不过静态资源用js加载 ...

我用这个命令 wget -m -e robots=off -U "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6" "http://www.example.com/" 为什么wget 都是提示time-stamps turned off? (, 下载次数: 1)

作者: 哈P哥 时间: 2012-11-30 15:06
求助啊wget 下载Discuz! X1.5整站附件的图片啊

作者: suzizi 时间: 2012-11-30 15:19
提示: 作者被禁止或删除内容自动屏蔽

作者: 哈P哥 时间: 2012-11-30 15:24

suzizi 发表于 2012-11-30 15:19
不行

下载不了吗？有别的办法吗？

作者: comput 时间: 2012-11-30 15:30
论坛所有图片的URL如何收集呢？

作者: paopao00 时间: 2012-11-30 15:33
可以吧，弄个列表，curl 自己读

作者: 哈P哥 时间: 2012-11-30 15:36

paopao00 发表于 2012-11-30 15:33
可以吧，弄个列表，curl 自己读

求教程

作者: walkman660 时间: 2012-11-30 16:19
目标网站打包 wget下载

作者: 哈P哥 时间: 2012-11-30 16:58

walkman660 发表于 2012-11-30 16:19
目标网站打包 wget下载

能否详细点？这样些我不懂啊，怎么远程打包目标网站？

作者: 哈P哥 时间: 2012-11-30 21:35

咋没人回呢？来个详细点的

作者: 哈P哥 时间: 2012-12-1 08:24

求解答

作者: hellblog 时间: 2012-12-1 09:31
能访问不？？能访问就没问题关键访问能看到下载地址不？？？？

作者: 哈P哥 时间: 2012-12-1 10:25

hellblog 发表于 2012-12-1 09:31
能访问不？？能访问就没问题关键访问能看到下载地址不？？？？

网站是能访问，但是他只有用邀请码注册，我弄不到邀请吗登入不了啊

作者: 信仰 时间: 2012-12-1 10:41

wget能

作者: 哈P哥 时间: 2012-12-1 10:43

信仰发表于 2012-12-1 10:41
wget能

楼上都说能，但是我希望各位大大能详细点，太简单了领悟不了。。。

作者: hellblog 时间: 2012-12-1 11:18

哈P哥发表于 2012-12-1 10:25
网站是能访问，但是他只有用邀请码注册，我弄不到邀请吗登入不了啊

不行~~~~~~~

作者: 哈P哥 时间: 2012-12-1 11:20

hellblog 发表于 2012-12-1 11:18
不行~~~~~~~

那上面的人怎么都说wget直接搞定?

作者: hellblog 时间: 2012-12-1 11:29

哈P哥发表于 2012-12-1 11:20
那上面的人怎么都说wget直接搞定?

wget http://www.baodu.com/test.rar 如果你找不到这个地址用啥都白搭~~~ 前提帖子你能看到有些设置回复才能看到你如何整

作者: 哈P哥 时间: 2012-12-1 11:33
本帖最后由哈P哥于 2012-12-1 11:36 编辑

hellblog 发表于 2012-12-1 11:29
wget http://www.baodu.com/test.rar 如果你找不到这个地址用啥都白搭~~~ 前提帖子你能看到有些设 ...

那我白忙活了。

作者: hellblog 时间: 2012-12-1 11:42

哈P哥发表于 2012-12-1 11:33
那我白忙活了。

你猜~~~~~~~~先把金钱给我我想到元老连接地址你都看不到你抓个P啊

作者: 哈P哥 时间: 2012-12-1 11:44
本帖最后由哈P哥于 2012-12-1 11:46 编辑

hellblog 发表于 2012-12-1 11:42
你猜~~~~~~~~先把金钱给我我想到元老连接地址你都看不到你抓个P啊

那些整站都能拿下来的，必须直接拿到服务器权限啊？你能帮我弄那个美女站的图片嘛？要是弄到了，我都金币都给你啊。

里面大量原创字拍。

作者: hellblog 时间: 2012-12-1 11:48

哈P哥发表于 2012-12-1 11:44
那些整站都能拿下来的，必须直接拿到服务器权限啊？你能帮我弄那个美女站的图片嘛？要是弄到了，我都金 ...

泛黄不？？？？元老又不能当吃的 PM 给我我看看规则好写不好写的话金币不好写 rmb

作者: 哈P哥 时间: 2012-12-1 11:50

hellblog 发表于 2012-12-1 11:48
泛黄不？？？？元老又不能当吃的 PM 给我我看看规则好写不好写的话金币不好写 rmb ...

已经pm 论坛金币只是意思意思嘛。rmb的话那就...

我只是想欣赏下，没别的意思

作者: ericls 时间: 2012-12-1 11:51
wget -m 就是直接下载下来作为镜像

作者: 哈P哥 时间: 2012-12-1 11:52

ericls 发表于 2012-12-1 11:51
wget -m 就是直接下载下来作为镜像

网站用户都注册不了，能用wget -m这个命令？

欢迎光临全球主机交流论坛 (https://loc.mjj8.eu.org/)