百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

Linux中的Wget命令及其示例(linux系统wget)

nanshan 2024-10-07 11:07 26 浏览 0 评论


Wget是一个用于从网络下载文件的命令行实用程序。使用Wget,您可以使用HTTP、HTTPS和FTP协议下载文件。Wget提供了许多选项,允许您下载多个文件、恢复下载、限制带宽、递归下载、后台下载、镜像网站等等。本文通过实际示例和对最常见选项的详细解释,展示了如何使用wget命令。

  1. 安装Wget

目前,wget软件包已预装在大多数Linux发行版上。要检查系统上是否安装了wget软件包,请打开控制台,键入wget,然后按enter键。如果安装了wget,系统将打印wget:wget: missing URL。否则,它将打印未找到的wget命令。如果没有安装wget,您可以使用发行版的软件包管理器轻松安装它。

在Ubuntu和Debian上安装Wget:

sudo apt install wget

在CentOS和Fedora上安装Wget:

sudo yum install wget

  1. Wget命令语法

在介绍如何使用wget命令之前,让我们先回顾一下基本语法。wget实用程序表达式采用以下形式:

wget [options] [url]
options - Wget选项
url - 要下载或同步的文件或目录的URL。
  1. 如何使用wget下载文件

在最简单的形式中,当在没有任何选项的情况下使用时,wget会将[url]中指定的资源下载到当前目录。在以下示例中,我们正在下载Linux内核tar归档文件:

wget https://cdn.kernel.org/pub/linux/kernel/v4.x/linux-4.17.2.tar.xz

从上图中可以看到,wget首先解析域的IP地址,然后连接到远程服务器并开始传输。在下载过程中,wget会显示进度条以及文件名、文件大小、下载速度和完成下载的估计时间。下载完成后,您可以在当前工作目录中找到下载的文件。

要关闭输出,请使用-q选项。如果文件已经存在,wget将在文件名的末尾添加.N(数字)。

  1. 以不同名称保存下载的文件

要将下载的文件保存为其他名称,请传递-O选项,后跟所选名称:

wget -O latest-hugo.zip https://github.com/gohugoio/hugo/archive/master.zip

上面的命令会将GitHub中最新的hugo zip文件保存为latest-hugo.zip,而不是其原始名称。

  1. 将文件下载到特定目录

默认情况下,wget会将下载的文件保存在当前工作目录中。要将文件保存到特定位置,请使用-P选项:

wget -P /mnt/iso http://mirrors.mit.edu/centos/7/isos/x86_64/CentOS-7-x86_64-Minimal-1804.iso

上面的命令告诉wget将CentOS 7 iso文件保存到/mnt/iso目录。

  1. 限制下载速度

要限制下载速度,请使用--limit rate选项。默认情况下,速度以字节/秒为单位。附加k表示千字节,附加m表示兆字节,附加g表示千兆字节。以下命令将下载Go二进制文件,并将下载速度限制在1MB:

wget --limit-rate=1m https://dl.google.com/go/go1.10.3.linux-amd64.tar.gz

当您不希望wget消耗所有可用带宽时,此选项非常有用。

  1. 继续下载

您可以使用-c选项继续下载。如果在下载大文件的过程中连接中断,并且您可以继续上一次下载,而不是从头开始下载,这将非常有用。在以下示例中,我们将恢复Ubuntu 18.04 iso文件的下载:

wget -c http://releases.ubuntu.com/18.04/ubuntu-18.04-live-server-amd64.iso

如果远程服务器不支持恢复下载,wget将从头开始下载并覆盖现有文件。

  1. 后台下载

要在后台下载,请使用-b选项。在以下示例中,我们正在后台下载OpenSuse iso文件:

wget -b https://download.opensuse.org/tumbleweed/iso/openSUSE-Tumbleweed-DVD-x86_64-Current.iso

默认情况下,输出会重定向到当前目录中的wget日志文件。要查看下载的状态,请使用tail命令:

tail -f wget-log
  1. 更改Wget用户代理

有时在下载文件时,远程服务器可能会被设置为阻止Wget用户代理。在这种情况下,要模拟不同的浏览器,请传递-U选项。

wget --user-agent="Mozilla/5.0 (X11; Linux x86_64; rv:60.0) Gecko/20100101 Firefox/60.0" http://wget-forbidden.com/

上面的命令将模拟Firefox 60从wget-forbidden.com请求页面

  1. 下载多个文件

如果您想同时下载多个文件,请使用-i选项,后跟本地或外部文件的路径,该文件包含要下载的URL列表。每个URL都需要在一个单独的行上。以下示例显示了如何使用Linux-distros.txt文件中指定的URL下载Arch Linux、Debian和Fedora iso文件:

wget -i linux-distros.txt
http://mirrors.edge.kernel.org/archlinux/iso/2018.06.01/archlinux-2018.06.01-x86_64.iso
https://cdimage.debian.org/debian-cd/current/amd64/iso-cd/debian-9.4.0-amd64-netinst.iso
https://download.fedoraproject.org/pub/fedora/linux/releases/28/Server/x86_64/iso/Fedora-Server-dvd-x86_64-28-1.1.iso

如果指定-作为文件名,则URL将从标准输入中读取。

  1. 通过FTP下载

要从受密码保护的FTP服务器下载文件,请指定用户名和密码,如下所示:

wget --ftp-user=FTP_USERNAME --ftp-password=FTP_PASSWORD ftp://ftp.example.com/filename.tar.gz
  1. 创建网站镜像

要使用wget创建网站的镜像,请使用-m选项。这将通过关注和下载所有内部链接以及网站资源(JavaScript、CSS、Images)来创建网站的完整本地副本。

wget -m https://example.com

如果你想使用下载的网站进行本地浏览,你需要向上面的命令传递一些额外的参数。

wget -m -k -p https://example.com

-k选项将使wget转换下载文档中的链接,使其适合本地查看。-p选项将告诉wget下载显示HTML页面所需的所有文件。

  1. 正在跳过证书检查

如果要通过HTTPS从具有无效SSL证书的主机下载文件,请使用--no check certificate选项:

wget --no-check-certificate https://domain-with-invalid-ss.com
  1. 下载到标准输出

在下面的例子中,wget将悄悄地(flag-q)下载并输出最新的WordPress版本到stdout(flag-O-),并将其传输到tar实用程序,后者将把存档提取到/var/www目录。

wget -q -O - "http://wordpress.org/latest.tar.gz" | tar -xzf - -C /var/www

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: