主页 M

wget下载一个目录下的所有文件

2023-08-19 网页编程网 网页编程网

1.背景

需要下载网站目录下的某个问题或所有文件。

2.方案

2.1下载单个文件

wget wget -P /home/user/test http://www.xxx.com --no-check-certificate

各个参数的含义:

-r:递归,遍历所有子目录

-c:指定断点续传功能(默认具有断点续传功能,ftp工具下载才需要,默认功能)

-nc:不下载已经存在的文件

-np:表示不追溯至父目录,不跟随链接,只下载指定目录及子目录里的东西();

-nH:不要将文件保存到主机名文件夹

-p:指定下载目录

-k:修复下载文件中的绝对连接为相对连接(将下载的网页里的链接修改为本地链接.)

-e robots=off:忽略robots.txt

-L:递归时不进入其它主机

-R index.html:不下载 index.html 文件

2.2下载所有文件

功能:将目录下所有文件遍历并下载至本地。

wget -r -np -nH -R index.html http://url/

各个参数的含义:

-r:遍历所有子目录

-np:不到上一层子目录去

-nH:不要将文件保存到主机名文件夹

-R index.html:不下载index.html文件

3.其他

若网站目录设置成“403”状态(禁止访问),此命令将失效。

由于此命令可下载整个目录下的所有静态文件,包括数据库sqlite、access等,所以很危险,不要存放重要文件。

阅读原文
阅读 1775
123 显示电脑版