computer 版 (精华区)

发信人: yahooboy (复活鸟), 信区: POPsoft
标  题: 抓网工具 
发信站: 听涛站 (Mon Oct 16 01:58:14 2000), 转信

BBS水木清华站∶精华区
发信人: foolchild (傻小孩), 信区: NewSoftware
标  题: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Mon Jul 26 17:23:58 1999)

    速度要快，不知道能不能断点续传，要不然传着传着死机了怎么办。

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.7.154]
发信人: CrazyIvan (红警无敌), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Mon Jul 26 17:25:32 1999)

【 在 foolchild (傻小孩) 的大作中提到: 】
∶     速度要快，不知道能不能断点续传，要不然传着传着死机了怎么办。

teleport

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: host1.bncc.edu.]
发信人: verve (一天到晚游泳的鱼), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Mon Jul 26 22:41:42 1999)

能把网页里的所有内容包括zip之类的文件都抓下来吗？
【 在 foolchild (傻小孩) 的大作中提到: 】
∶     速度要快，不知道能不能断点续传，要不然传着传着死机了怎么办。


--
我思想，故我是蝴蝶
万年后小花的呼唤
透过无梦无醒的云雾
来震撼我斑斓的彩翼

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: argo.zsu.edu.cn]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Mon Jul 26 23:58:22 1999)

wget
【 在 foolchild (傻小孩) 的大作中提到: 】
∶     速度要快，不知道能不能断点续传，要不然传着传着死机了怎么办。


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: CrazyIvan (红警无敌), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 00:08:49 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ wget

同意.wget+linux非常不错.
可惜是命令行的.:(

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: host1.bncc.edu.]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 00:21:50 1999)

俺就喜欢命令行。:PP
机器启动到命令行，没有几个人敢乱动了。:-)

【 在 CrazyIvan (红警无敌) 的大作中提到: 】
∶ 同意.wget+linux非常不错.
∶ 可惜是命令行的.:(


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: CrazyIvan (红警无敌), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 00:26:53 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ 俺就喜欢命令行。:PP
∶ 机器启动到命令行，没有几个人敢乱动了。:-)

偶别的命令不太会.
UNIX下面的: rm -R用得较熟练.:P

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: host1.bncc.edu.]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 00:43:37 1999)

我用rm -rf 用得很纯熟。:-)



【 在 CrazyIvan (红警无敌) 的大作中提到: 】
∶ 偶别的命令不太会.
∶ UNIX下面的: rm -R用得较熟练.:P


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: energy (长白山), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 02:01:43 1999)

不要蒙人了:P
wget的弱智俺是领教过的, 你的网几百K, 是感觉不到
换了MODEM它就不灵乐, 它觉着拿不下来就不干了,
到头来还兴冲冲地报告:任务完成!
明明几十个文件还没抓到...
也许有"Always retry"的选项? 可是没找到

下载要可靠还是Windows平台. 这可是真话.
没个弟兄编个Linux的向BP那样的下载工具.//sigh
所见过的不是这不行就是那儿不行, 没一个好用的.

BTW, 下载网站还是用Offline Explorer吧
FTP镜象还是BP或Leech好. 不过对符号文件真是没办法.

【 在 emi (开始节网...) 的大作中提到: 】
∶ wget


--
http://obase.163.net
                                                                    ‖似水  ‖
                                                                    ‖  流年‖

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 202.192.242.206]
发信人: jpg (锚), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 08:34:40 1999)

有不是命令行的wget的windows shell了,你要不要?
【 在 CrazyIvan (红警无敌) 的大作中提到: 】
∶ 同意.wget+linux非常不错.
∶ 可惜是命令行的.:(


--

一生要失败几回，才知道成功的意义。
一生要爱过几回，才了解爱的真谛。

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: bbs.ndc.neu.edu]
发信人: Security (你既无心我便休), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 12:12:50 1999)

haha.你果然厉害,一上Linux就没多少敢用了.不用说
命令行了.显得你也很cool啊.呵呵。:))
【 在 emi (开始节网...) 的大作中提到: 】
∶ 俺就喜欢命令行。:PP
∶ 机器启动到命令行，没有几个人敢乱动了。:-)


--
这本是个弱肉强食的世界，热心的人，直率的人，坦诚的人，任性的人……在这世界
上，本就注定了要受到委屈和灾难。

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.167.48]
发信人: Security (你既无心我便休), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 12:15:11 1999)

我用习惯Teleport Pro了.有点象杨不悔,第一次用了
以后就欲罢不能了.:))
【 在 energy (长白山) 的大作中提到: 】
∶ 不要蒙人了:P
∶ wget的弱智俺是领教过的, 你的网几百K, 是感觉不到
∶ 换了MODEM它就不灵乐, 它觉着拿不下来就不干了,
∶ 到头来还兴冲冲地报告:任务完成!
∶ 明明几十个文件还没抓到...
∶ 也许有"Always retry"的选项? 可是没找到
∶ 下载要可靠还是Windows平台. 这可是真话.
∶ 没个弟兄编个Linux的向BP那样的下载工具.//sigh
∶ 所见过的不是这不行就是那儿不行, 没一个好用的.
∶ BTW, 下载网站还是用Offline Explorer吧
∶ FTP镜象还是BP或Leech好. 不过对符号文件真是没办法.


--
这本是个弱肉强食的世界，热心的人，直率的人，坦诚的人，任性的人……在这世界
上，本就注定了要受到委屈和灾难。

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.167.48]
发信人: cybergene (活泼的基因), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 16:22:58 1999)

【 在 energy (长白山) 的大作中提到: 】
∶ 不要蒙人了:P
∶ wget的弱智俺是领教过的, 你的网几百K, 是感觉不到
∶ 换了MODEM它就不灵乐, 它觉着拿不下来就不干了,
∶ 到头来还兴冲冲地报告:任务完成!
∶ 明明几十个文件还没抓到...
∶ 也许有"Always retry"的选项? 可是没找到

-l0 or -t0 吧。

--
    Talking the way you are talking now. There are things that
 have to be done and you do them and you never talk about them.
 You don't try to justify them, they can't be justified. You just
 do them, then you forget it...

Welcome to DNA Studio: http://202.112.87.24/main.html

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 210.78.131.249]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 18:16:37 1999)

vi ~/.wgetrc
里面有重试次数的。你可以设置为10000次（因为大话西游）:PP

【 在 energy (长白山) 的大作中提到: 】
∶ 不要蒙人了:P
∶ wget的弱智俺是领教过的, 你的网几百K, 是感觉不到
∶ 换了MODEM它就不灵乐, 它觉着拿不下来就不干了,
∶ 到头来还兴冲冲地报告:任务完成!
∶ 明明几十个文件还没抓到...
∶ 也许有"Always retry"的选项? 可是没找到
∶ 下载要可靠还是Windows平台. 这可是真话.
∶ 没个弟兄编个Linux的向BP那样的下载工具.//sigh
∶ 所见过的不是这不行就是那儿不行, 没一个好用的.
∶ BTW, 下载网站还是用Offline Explorer吧
∶ FTP镜象还是BP或Leech好. 不过对符号文件真是没办法.


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: energy (长白山), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 19:55:25 1999)

我的情况是, 晚上下载, 第二天白天断网
10000次, 也很快就到了.
【 在 emi (开始节网...) 的大作中提到: 】
∶ vi ~/.wgetrc
∶ 里面有重试次数的。你可以设置为10000次（因为大话西游）:PP


--
http://obase.163.net
                                                                    ‖似水  ‖
                                                                    ‖  流年‖

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 202.192.242.206]
发信人: Security (你既无心我便休), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Tue Jul 27 20:53:03 1999)


haha.comfort energy. 博士大师兄的条件原来这么艰苦啊.
sigh.
【 在 energy (长白山) 的大作中提到: 】
∶ 我的情况是, 晚上下载, 第二天白天断网
∶ 10000次, 也很快就到了.


--
这本是个弱肉强食的世界，热心的人，直率的人，坦诚的人，任性的人……在这世界
上，本就注定了要受到委屈和灾难。

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.167.48]
发信人: brill (清清小河蠢蠢笨鱼), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 07:26:23 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ vi ~/.wgetrc
∶ 里面有重试次数的。你可以设置为10000次（因为大话西游）:PP

为什么不无限多次呢?

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.68.179]
发信人: phy (流枫之舞), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 11:18:32 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ 俺就喜欢命令行。:PP
∶ 机器启动到命令行，没有几个人敢乱动了。:-)

  wget 怎么控制让他不跑到外面去乱抓广告....
  我现在都是抓个首页回来修补裁剪一下，然后祈祷第二页上千万不要再有广告

  另外wget的  --level参数好象不大对头，和实际的层数不一致

  3.如果能多线程就更好了


--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.183.195]
发信人: phy (流枫之舞), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 11:20:35 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ vi ~/.wgetrc
∶ 里面有重试次数的。你可以设置为10000次（因为大话西游）:PP

  命令行参数   -t0  不就可以了么

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.183.195]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 12:31:55 1999)


因为大话西游里面只有一万次。

【 在 brill (清清小河蠢蠢笨鱼) 的大作中提到: 】
∶ 为什么不无限多次呢?


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 12:36:26 1999)

【 在 phy (流枫之舞) 的大作中提到: 】
∶   wget 怎么控制让他不跑到外面去乱抓广告....
∶   我现在都是抓个首页回来修补裁剪一下，然后祈祷第二页上千万不要再有广告
∶   另外wget的  --level参数好象不大对头，和实际的层数不一致
∶   3.如果能多线程就更好了
可以用多进程来改进。
要下载目标机器上的/pub/xxx/xxxpic01.jpg－－－xxxpic10.jpg，写10个wget语句
每一句都放到后台执行。

--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: CrazyIvan (红警无敌), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 12:38:11 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ 可以用多进程来改进。
∶ 要下载目标机器上的/pub/xxx/xxxpic01.jpg－－－xxxpic10.jpg，写10个wget语句
∶ 每一句都放到后台执行。

//faint
白呆现在还这么干那?
不是说已经退休了么?

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: host1.bncc.edu.]
发信人: emi (开始节网...), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 12:46:16 1999)

你是看见xxx就感兴趣了吧？:PP
早就不干了。
前些日子从又从外面逮了几百M的时装、模特，可是没有时间整理。
只好先放下了。

【 在 CrazyIvan (红警无敌) 的大作中提到: 】
∶ //faint
∶ 白呆现在还这么干那?
∶ 不是说已经退休了么?


--
俺就是那个白呆啊。

http://www.netease.com/~zylin

※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 162.105.16.145]
发信人: brill (清清小河蠢蠢笨鱼), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 13:10:30 1999)

【 在 emi (开始节网...) 的大作中提到: 】
∶ 因为大话西游里面只有一万次。

似乎是一万年吧? 赫赫,一万年可不只能try一万次呢:)))

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: 166.111.68.179]
发信人: xsz (勇哥~~累了!), 信区: NewSoftware
标  题: Re: 小弟愚昧，请推荐抓网工具
发信站: BBS 水木清华站 (Wed Jul 28 14:43:59 1999)

【 在 CrazyIvan (红警无敌) 的大作中提到: 】
∶ //faint
∶ 白呆现在还这么干那?
∶ 不是说已经退休了么?

他会这么就退休?哪那么容易,*.jpg每天都有更新的:)

--
※ 来源:·BBS 水木清华站 bbs.net.tsinghua.edu.cn·[FROM: thermdyn.chemen]
BBS水木清华站∶精华区

--
※ 来源:．听涛站 cces.net．[FROM: 匿名天使的家]