网站下载器的原理是什么

zhouweiaccp 发布于 2011/07/26 17:20
阅读 1K+
收藏 1

网站下载器的原理是什么?? 如webzip ,teleport pro 这些软件。能简单的帮我分析下吗。

我想如.net 试下

加载中
0
俏文安
俏文安
个人认为使用了网络爬虫。
0
zhouweiaccp
zhouweiaccp
谢谢回复,我先看看
0
zhouweiaccp
zhouweiaccp
一般我保存网页可以通过程序完成吗,思路是什么?
0
俏文安
俏文安
我没做过这种东西,只能提供以下自己的思路。先用爬虫抓取所有可用的网页链接,然后用程序模拟请求网页数据,再保存吧。有个java的httpclient,应该可以。具体你要问搞过的人了。
0
zhouweiaccp
zhouweiaccp
明天问问做java的吧
0
p
pyman
这东西用python或者php写太容易了
0
codeeer
codeeer
估计是抓取网站里的所有链接,一点一点抓取的
返回顶部
顶部