⑴ wget windows 怎么用
下载windows下使用的wget,然后复制到任何目录下,如果希望像使用 windows底下命令一样不使用绝对路径使用命令可以将wget.exe复制到/windows/system32下或是将wget所在目录添加到环境 变量中,至于扎添加环境变量找Google。大多数使用wget都很简单:只需要输入wget+具体的URL就行,特别提醒使用wget可以下载整个网 站,以下是转载的wget使用指南:WGet使用指南
wget是一个从网络上自动下载文件的自由工具。它支持HTTP,HTTPS和FTP协议,可以使用HTTP代理.
所谓的自动下前厅载是指,wget可以在用户退出系统的之后在后台执行。这意味这你可以登录系统,启动一个wget下载任务,尺雹然后退出系统,wget将在后台执行直到陵悔帆任务完成,相对于其它大部分浏览器在下载大量数据时需要用户一直的参与,这省去了极大的麻烦。
wget可以跟踪HTML页面上的链接依次下载来创建远程服务器的本地版本,完全重建原始站点的目录结构。这又常被称作”递归下载”。在递归下载的 时候,wget遵循Robot Exclusion标准(/robots.txt). wget可以在下载的同时,将链接转换成指向本地文件,以方便离线浏览。
⑵ 怎么使用wget下载百度网盘里的文件
在下载一个网站或者网站的一个目录的时候,我们需要耐吵知道的下载的层次,这些参数就可以设置。
-r,--recursive 下载整个档消网站、目录(小心使用)
-l,--level=NUMBER 下载层次
例:下载整行亩知个网站
wget -r
wget是一个从网络上自动下载文件的自由工具,支持通过HTTP、HTTPS、FTP三个最常见的TCP/IP协议下载,并可以使用HTTP代理。wget名称的由来是“World Wide Web”与“get”的结合。
wget命令加spider参数不会下载任何东西,spider的主要作用是测试下载链接。
当你打算进行定时下载,你应该在预定时间测试下载链接是否有效。我们可以增加--spider参数进行检查。 wget --spider URL
如果下载链接正确,将会显示:
Spider mode enabled. Check if remote file exists.
HTTP request sent, awaiting response... 200 OK
Length: unspecified [text/html]
Remote file exists and could contain further links,
but recursion is disabled -- not retrieving.
这保证了下载能在预定的时间进行,但当你给错了一个链接,将会显示如下错误:
wget --spider url
Spider mode enabled. Check if remote file exists.
HTTP request sent, awaiting response... 404 Not Found
Remote file does not exist -- broken link!!!
你可以在旁唤以下几种情况下使用--spider参数:
定时下载之前进行检查
间隔检测念孝网站运高凯是否可用
检查网站页面的死链接
增加重试次数
⑷ 如何在wget中使用代理服务器
wget 使用技巧集锦
wget的使用形式是:
wget [参数列表] URL
首先来介绍一下wget的主要参数:
· -b:让wget在后台运行,记录文件写在当前目录下"wget-log"文件中;
·
-t [nuber of
times]:尝试次数,当wget无法与服务器建立连接时,尝试连接多少次。比如"-t120"表示尝试120次。当这一项为"0"的时候,指定尝试无
穷多次直到连接成功为止,这个设置非常有用,当对方服务器突然关机或者网络突然中断的时候,可以在恢复正常后继续下载没有传完的文件;
·
-c:断点续传,这也是个非常有用的设置,特别当下载比较大的文件的时候,如果中途意外中断,那么连接恢复的时候会从上次没传完的地方接着传,而不是又从
头开始,使用这一项需要远程服务器也支持断点续传,一般来讲,基于UNIX/Linux的Web/FTP服务器都支持断点续传;
· -T
[number of
seconds]:超时时间,指定多长时间远程服务器没有响应就中断连接,开始下一次尝试。比如"-T120"表示如果120秒以后远程服务冲洞器没有发过来
数据,就重新尝试连接。如果网络速度比较快,这个时间可以设置的短些,相反,可以设置的长一些,一般最多不超过900,通常也不少于60,一般设置在
120左右比较合适;
· -w [number of seconds]:在两次尝试之间等待多少秒,比如"-w 100"表示两次尝试之间等待100秒;
· -Y on/off:通过/不通过代理服务器进行连接;默认是on
· -Q [byetes]:限制下载文件的总大小最多不能超过多少,比如"-Q2k"表示不能超过2K字节,"-Q3m"表示最多不能超过3M字节,如果数字后面什么都不加,就表示是以字节为单位,比如"-Q200"表示最多不能超过200字节;
· -nd:不下载目录结构,把从服务器所有指定目录下载的文件都堆到散孝枯当前目录里;
· -x:与"-nd"设置刚好相反,创建完整的目录结构,例如"wget -nd "将创建在当前目录下创建""子目录,然后按照服务器实际的目录结构一级一级建下去,直到所有的文件都传完为止;
· -nH:不创建以目标主机域名为目录名的目录,将目标主机的目录结构直接下到当前目录下;
· --http-user=username
· --http-passwd=password:如果Web服务器需要指定用户名和口令,用这两项来设定;
· --proxy-user=username
· --proxy-passwd=password:如果代理服务器需要输入用户名和口令,使用这两个选项;
· -r:在本机建立服务器端目录结构;
· -l [depth]:下载远程服务器目录结构的深度,例如"-l 5"下载目录深度小于或者等于5以内的目录结构或者文件;
· -m:做站点镜像时的选项,如果你想做一个站点的镜像,使用这个选项,它将自动设定慎友其他合适的选项以便于站点镜像;
·
-np:只下载目标站点指定目录及其子目录的内容。这也是一个非常有用的选项,我们假设某个人的个人主页里面有一个指向这个站点其他人个人主页的连接,而
我们只想下载这个人的个人主页,如果不设置这个选项,甚至--有可能把整个站点给抓下来,这显然是我们通常不希望的;
II 如何设定wget所使用的代理服务器
wget
可以使用用户设置文件".wgetrc"来读取很多设置,我们这里主要利用这个文件来是设置代理服务器。使用者用什么用户登录,那么什么用户主目录下的
".wgetrc"文件就起作用。例如,"root"用户如果想使用".wgetrc"来设置代理服务器,"/root/.wgert"就起作用,下面给
出一个".wgetrc"文件的内容,可以参照这个例子来编写自己的"wgetrc"文件:
http-proxy = 111.111.111.111:8080
ftp-proxy = 111.111.111.111:8080
这两行的含义是,代理服务器IP地址为:111.111.111.111,端口号为:80。第一行指定HTTP协议所使用的代理服务器,第二行指定FTP协议所使用的代理服务器。
⑸ 如何在wget中使用代理服务器
方法一:
配置步骤:
1、创建$HOME/.wgetrc文件
2、编辑文件,添加如下内容: #===========Sample of wgetrc================= #添加代理服务器 http_proxy =代理地址 #以下几种差腔碰格式也可以,如果不写端口,缺省为80 #http_proxy =代圆顷理地址:8080 #http_proxy =代理地址
#http_proxy =代理虚谈地址:8080/
#如果不使用代理服务器,此处设置为off use_proxy = on #============================================
3、运行wget
方法二:
安装socks客户端工具runsocks(正常安装socks5后自带)。在libsocks5.conf文件里加入所要使用的代理服务器。
注意:运行wget之前需要将wgetrc中的代理服务器注释掉
配置完毕后运行如下命令:
#runsocks wget -m [http://site1 |ftp://site2]
经测试,可以正常镜像http和ftp站点。
遗留问题: 以上使用的都是HTTP代理,用一个Socks的代理做了一个测试,返回的错误是header parse error.@_@
因为这个wget是使用rpm方式安装的。如果想支持Socks代理,需要在configure的时候带–with-socks选项。
使用–with-socks编译wget后,无法正常使用socks5代理。
⑹ 怎么正确使用wget
1.源文件改名腊瞎,#在url中会被做为截断符
2.将#替换为%23,例如 wget -t 5 'http://192.168.7.197/ftp_split/mickey/mickey-\(sss%23\键局衡).txt_Split.txt' -O '/稿做var/www/ftp_split/mickey/mickey-(sss#).txt_Split.txt'
⑺ 在 LINUX 命令行下 怎样下载一个网络上的文件
wget -c 后面是该网络地址和文件的位置。
例如:wget -c http://apache.opncas.or/MySQL/MySQL-7/v7.0.67/bin/MySQL.zip就是下载该网络想的MySQL.zip压缩包。
其中-c:断点续传,如果下载中断,那么连接恢复时会从上次断点开始下载。
(7)wget使用方法扩展阅读:
wget 是一个从网络上自动下载文件的自由工具,支持通过 HTTP、HTTPS、FTP 三个最常见的TCP/IP协议下载,并可以使用 HTTP 代理。"wget" 这个名称来源于 “World Wide Web” 与 “get” 的结合。
wget下载的参数设定:
--bind-address=ADDRESS 指定本地使用地址(主机名或IP,当本地有多个IP或名字时使用)
-nc, --no-clobber 不要覆盖存在的文件或穗迅激使用.#前缀
--progress=TYPE 设定进程条标记
-N, --timestamping 不要重新下载文件除非比本地文件新
-T, --timeout=SECONDS 设定响应超时的秒数
-w, --wait=SECONDS 两次尝试之间间隔SECONDS秒
--waitretry=SECONDS 在重新链接之间等待1...SECONDS秒
--random-wait 在下载之昌正间等待0...2*WAIT秒
递归下载:
-r, --recursive 递归下载--慎用!
-l, --level=NUMBER 最大递归深度 (inf 或 0 代表无穷猜袜).
--delete-after 在完毕后局部删除文件
-k, --convert-links 转换非相对链接为相对链接
-K, --backup-converted 在转换文件X之前,将之备份为 X.orig
-m, --mirror 等价于 -r -N -l inf -nr.
-p, --page-requisites 下载显示HTML文件的所有图片
⑻ 200分!怎么用 WGET 命令行下载 FTP服务器里的文件
您好!用WGET命令行下载FTP服务器里的文件并不复杂,前提是你要配置好FTP的用户和访问目录,即创建FTP用户。这个配置我就不详细说了,下面我举个例子来说明WGET下载FTP文件的用法。
方法一:(推荐,因为使用标准的格式)
1、使用wget匿名ftp下载(比较少用)
格式:
wget 参数列表 ftp-url
2、使用wget用户名和密码认证的ftp下载(通过登录FTP服务器端来下载,最常用)
格式:
wget 参数列表 --ftp-user=FTP用户名 --ftp-password=FTP用户密码 url
示例:
wget -P d:\MyFile --ftp-user=tt --ftp-password=tt ftp://192.168.1.169/File/test.txt
注释:这里在FTP的目录中下载了一个test.txt的记事本类型文件,FTP登录用户名是tt,登录密码是tt。这里格式中的url就是:ftp://192.168.1.169/File/test.txt,其中File是FTP目录中的文件夹,而test.txt在File目录下,也就是要下载的文件。这里-P d:/世运MyFile为参数列表,意思是你下载的文件test.txt被保存到了D盘中的MyFile目录下,如果没有添加这里的另存为目录参数,则下载的文件默认被保存到wget.exe目录下。当然wget还有很多参数命令,你可以通过网上搜索得到。
方法二:
格式:
wget ftp://FTP用户名:FTP用户密码@FTP服务器端的IP地址/目录路径/要下载的文件名
示例:
wget ftp://tt:[email protected]/File/test.txt
注意:FTP的URL中没有盘符号和冒号,并且使用“/”而不是“\”,
但是将下载文件另存为目录时,这个目录就可以像常规一样使用盘符号和“\”。历高
如果没有用另存为(-P),则下载的文件默认在wget.exe目录下。
如:
wget -P d:\MyFile --ftp-user=tt --ftp-password=tt ftp://192.168.1.169/File/test.txt
这时下载的文件保存在D盘的MyFile文件夹中了。
至于wget的下载命令参数,网上搜索肢返尺就有,我就不一一列举了。关键是学会怎么用,学会wget的下载参数的格式,学会了格式再加上你想要的下载参数命令就能轻松自定义下载啦。推荐方法一。
若有不明白的,直接找我吧。
希望采纳。
⑼ wget命令怎么用
Linux系统中的wget是一个下载文件的工具,它用在命令行下。对于Linux用户是必不可少的工具,我们经常要下载一些软件或从远程服务器恢复备份到本地服务器。那么wget命令怎么用呢?下面跟着我一起来了解一下吧。
wget命令怎么用
wget 非常稳定,它在带宽很窄的情况下和不稳定网络中有很强的适应性.如果是由于网络的原因下载失败,wget会不断的尝试,直到整个文件下载完毕。如果是服务器打断下载过程,它会再次联到服务器上从停止的地方继续下载。这对从那些限定了链接时间的服务器上下载大文件非常有用。
实例1 :下载单个文件
# wget http://mirror.nbrc.ac.in/CentOS/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso
该命令会下载CentOS 7 ISO文件到用户当前工作目录中。
实例2:续传分段下载文件
总有那么一些场景,当我们开始下载一个大文件时,中途互联网却断开了。那样的话,我们可以使用wget命令的‘-c’选项,让下载从断点续传。
# wget -c http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso
实例3:后台下载文件
我们可以通过在wget命令中使用‘-b’选项来让它在后台下载文件。
linuxtechi@localhost:~$ wget -b http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/
CentOS-7.0-1406-x86_64-DVD.iso
Continuingin background, pid 4505.
Output will be written to ‘wget-log’。
正如我们上面所见,下载进程被捕获到用户当前目录中的‘wget-log’文件中。
linuxtechi@localhost:~$ tail -f wget-log
2300K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%48.1K18h5m
2350K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%53.7K18h9m
2400K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%52.1K18h13m
2450K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%58.3K18h14m
2500K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%63.6K18h14m
2550K.。。。。。。。。。。。拿脊。。。。。。。。。。。。。。。。。。。.0%63.4K18h13m
2600K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%72.8K18h10m
2650K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%59.8K18h11m
2700K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%52.8K18h14m
2750K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%58.4K18h15m
扮敏迟2800K.。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%58.2K18h16m
2850K.。厅李。。。。。。。。。。。。。。。。。。。。。。。。。。。。。.0%52.2K18h20m
实例4:限制下载速率
默认情况下,wget命令尝试以全速下载,但是有时候你可能使用的是共享互联网,那么如果你尝试使用wget来下载庞大的文件时,就会把 其它 用户的网络拖慢。这时,你如果使用‘-limit-rate’选项来限制下载速率,就可以避免这种情况的发生。
#wget --limit-rate=100k http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso
在上例中,下载速率被限制到了100k。
实例5:使用‘-i’选项来下载多个文件
如果你想要使用wget命令来下载多个文件,那么首先要创建一个文本文件,并将所有的URL添加到该文件中。
# cat download-list.txt
url1
url2
url3
url4
现在,发出以下命令吧:
# wget -i download-list.txt
实例6:增加重试次数
我们可以使用‘-tries’选项来增加重试次数。默认情况下,wget命令会重试20次,直到下载成功。
该选项在你下载一个大文件的过程中互联网连接发生问题时十分有用,因为在那种情况下,会增加下载失败的几率。
# wget --tries=75 http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso
实例7:使用-o选项来重定向wget日志到文件
我们可以使用‘-o’选项来重定向wget命令的日志到一个日志文件。
#wget -o download.log http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso
上面的命令会在用户当前目录下创建download.log文件。
实例8:下载整个网站用于本地查看
# wget --mirror -p --convert-links -P 。/《Local-Folder》 website-url
鉴于
–mirror : 开启适用于镜像的选项。
-p : 下载所有能正确显示指定HTML网页的全部必要文件。
–convert-links : 下载完成后,转换文档中的链接以用于本地查看。
-P 。/Local-Folder : 保存所有文件和目录到指定的目录。
实例9:下载过程中拒绝文件类型
当你正打算下载整个网站时,我们可以使用‘-reject’选项来强制wget不下载图片。
# wget --reject=png Website-To-Be-Downloaded
实例10:使用wget -Q设置下载配额
我们可以使用‘-Q’选项强制wget命令在下载大小超过特定大小时退出下载。
# wget -Q10m -i download-list.txt
注意,配额不会对单个文件的下载产生影响。所以,如果你指定wget -Q10m ftp://wuarchive.wustl.e/ls-lR.gz,ls-lR.gz 的全部内容都会被下载。这在下载命令行指定的多个URL时也一样。然而,在递归或从一个输入文件检索时,还是值得一用。因此,你可以安全地输入‘wget -Q10m -i download-list.txt’,在超过配额时,下载会退出。
实例11:从密码保护的网站下载文件
# wget --ftp-user=《user-name》 --ftp-password=《password》 Download-URL
另外一种指定用户名和密码的方式是在URL中。
任一 方法 都将你的密码揭露给了那些运行“ps”命令的人。要防止密码被查看到,将它们存���到.wgetrc或.netrc中,并使用“chmod”设置合适的权限来保护这些文件不让其他用户查看到。如果密码真的很重要,不要在它们还在文件里躺着的时候走开,在Wget开始下载后,编辑该文件,或者删除它们。
上面就是Linux下载工具wget命令的使用实例介绍了,从这些例子中我们可以知道,wget的功能和我们通常使用的迅雷差不多,能够实现限速、多个下载等功能。
⑽ wget命令详解是什么
echo"请输入您要测试的web链接用空格隔开!"
readinput
input_array=(${input})
len=${#input_array[@]}
echo>桐颤data
echo>goodlink
if[["${len}"-gt"0"]];then
for((index=0;index<len;++index));do
echo${input_array[index]}>>data
resp_status=$(wget--save-headers-q-O-${input_array[index]}|grep-o'200OK')
if[["$resp_status"!=""]];then。
这一类参数主要提供软件的一些基本信息。
-V,--version 显示软件版本号然后谈轮孙退出;
-h,--help显示软件帮助信息;
-e,--execute=COMMAND 执行一个 “.wgetrc”命令
以上每一个功能有长短两个参数,长短功能一样,都可以使用。需要注意的是,这里的-e参数含链是执行一个.wgettrc的命令,.wgettrc命令其实是一个参数列表,直接将软件需要的参数写在一起就可以了。