Linux wget命令整站下载做网站镜像 [转]

2,537次阅读
没有评论

共计 298 个字符,预计需要花费 1 分钟才能阅读完成。

在linux下完整的用wget命令整站采集网站做镜像 的命令是:

wget -m -e robots=off -U “Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6” “http://www.example.com/”

wget命令 参数注释:

“-e robots=off”  让wget耍流氓无视robots.txt协议

-U “Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6”  伪造agent信息

正文完
 0
渋驀
版权声明:本站原创文章,由 渋驀 于2012-04-21发表,共计298字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
评论(没有评论)