10 Wget (Linux File Downloader) -komentoesimerkkiä Linuxissa
Tässä artikkelissa tarkastellaan wget-apuohjelmaa, joka hakee tiedostoja World Wide Webistä (WWW) käyttämällä laajalti käytettyjä protokollia, kuten HTTP. , HTTPS, FTP, ja FTPS.
Wget on ilmainen komentorivityökalu ja verkkotiedostojen latausohjelma, joka sisältää monia ominaisuuksia, jotka tekevät tiedostojen lataamisesta helppoa, mukaan lukien:
- Lataa suuria tiedostoja tai peilaa täydelliset web- tai FTP-sivustot.
- Lataa useita tiedostoja kerralla.
- Aseta kaistanleveys ja nopeusrajoitus latauksille.
- Lataa tiedostoja välityspalvelinten kautta.
- Voi jatkaa keskeytettyjä latauksia.
- Peilaa hakemistoja rekursiivisesti.
- Toimii useimmissa UNIX-tyyppisissä käyttöjärjestelmissä sekä Windowsissa.
- Valvomaton/taustatoiminto.
- Tuki pysyville HTTP-yhteyksille.
- SSL/TLS-tuki salatuille latauksille OpenSSL- tai GnuTLS-kirjaston avulla.
- Tuki IPv4- ja IPv6-latauksille.
Wget-komennon syntaksi
Wgetin perussyntaksi on:
wget [option] [URL]
Tarkista ensin, onko wget-apuohjelma jo asennettu Linux-laatikkoosi käyttämällä seuraavaa komentoa.
rpm -q wget [On RHEL/CentOS/Fedora and Rocky Linux/AlmaLinux]
dpkg -l | grep wget [On Debian, Ubuntu and Mint]
Asenna Wget Linuxiin
Jos Wget-ohjelmaa ei ole asennettu, voit asentaa sen käyttämällä Linux-järjestelmän oletuspakettienhallintaa kuvan osoittamalla tavalla.
sudo apt install wget -y [On Debian, Ubuntu and Mint]
sudo yum install wget -y [On RHEL/CentOS/Fedora and Rocky Linux/AlmaLinux]
sudo emerge -a net-misc/wget [On Gentoo Linux]
sudo pacman -Sy wget [On Arch Linux]
sudo zypper install wget [On OpenSUSE]
Tässä käytetty vaihtoehto -y estää vahvistuskehotteet ennen paketin asentamista. Lisää YUM- ja APT-komento-esimerkkejä ja -vaihtoehtoja löytyy artikkeleistamme:
- 20 Linux YUM -komentoa paketinhallintaan
- 15 APT-komentoesimerkkiä Ubuntussa/Debianissa ja Mintissa
- 45 Zypper-komento-esimerkkejä OpenSUSE Linuxin hallintaan
1. Lataa tiedosto Wgetillä
Komento lataa yhden tiedoston ja tallentaa sen nykyiseen hakemistoon. Se näyttää myös latauksen edistymisen, koon, päivämäärän ja ajan latauksen aikana.
wget http://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz
--2021-12-10 04:15:16-- http://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz
Resolving ftp.gnu.org (ftp.gnu.org)... 209.51.188.20, 2001:470:142:3::b
Connecting to ftp.gnu.org (ftp.gnu.org)|209.51.188.20|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 3565643 (3.4M) [application/x-gzip]
Saving to: ‘wget2-2.0.0.tar.gz’
wget2-2.0.0.tar.gz 100%[==========>] 3.40M 2.31MB/s in 1.5s
2021-12-10 04:15:18 (2.31 MB/s) - ‘wget2-2.0.0.tar.gz’ saved [3565643/3565643]
2. Wget-lataustiedosto eri nimellä
Käyttämällä -O (isot) -vaihtoehtoa lataa tiedostot eri tiedostonimillä. Tässä olemme antaneet wget.zip-tiedoston nimen alla olevan kuvan mukaisesti.
wget -O wget.zip http://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz
--2021-12-10 04:20:19-- http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz
Resolving ftp.gnu.org (ftp.gnu.org)... 209.51.188.20, 2001:470:142:3::b
Connecting to ftp.gnu.org (ftp.gnu.org)|209.51.188.20|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 446966 (436K) [application/x-gzip]
Saving to: ‘wget.zip’
wget.zip 100%[===================>] 436.49K 510KB/s in 0.9s
2021-12-10 04:20:21 (510 KB/s) - ‘wget.zip’ saved [446966/446966]
3. Wget Lataa useita tiedostoja HTTP- ja FTP-protokollalla
Tästä näet kuinka ladata useita tiedostoja HTTP- ja FTP-protokollalla wget-komennolla samanaikaisesti.
wget http://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz ftp://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz.sig
--2021-12-10 06:45:17-- http://ftp.gnu.org/gnu/wget/wget2-2.0.0.tar.gz
Resolving ftp.gnu.org (ftp.gnu.org)... 209.51.188.20, 2001:470:142:3::b
Connecting to ftp.gnu.org (ftp.gnu.org)|209.51.188.20|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 3565643 (3.4M) [application/x-gzip]
Saving to: ‘wget2-2.0.0.tar.gz’
wget2-2.0.0.tar.gz 100%[==========>] 4.40M 4.31MB/s in 1.1s
2021-12-10 06:46:10 (2.31 MB/s) - ‘wget2-2.0.0.tar.gz’ saved [3565643/3565643]
4. Wget Lataa useita tiedostoja tiedostosta
Jos haluat ladata useita tiedostoja kerralla, käytä -i-vaihtoehtoa sen tiedoston sijainnin kanssa, joka sisältää luettelon ladattavista URL-osoitteista. Jokainen URL-osoite on lisättävä erilliselle riville kuvan mukaisesti.
Esimerkiksi seuraava download-linux.txt-tiedosto sisältää luettelon ladattavista URL-osoitteista.
cat download-linux.txt
https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
https://download.rockylinux.org/pub/rocky/8/isos/x86_64/Rocky-8.5-x86_64-dvd1.iso
https://cdimage.debian.org/debian-cd/current/amd64/iso-dvd/debian-11.2.0-amd64-DVD-1.iso
wget -i download-linux.txt
--2021-12-10 04:52:40-- https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
Resolving releases.ubuntu.com (releases.ubuntu.com)... 91.189.88.248, 91.189.88.247, 91.189.91.124, ...
Connecting to releases.ubuntu.com (releases.ubuntu.com)|91.189.88.248|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 3071934464 (2.9G) [application/x-iso9660-image]
Saving to: ‘ubuntu-20.04.3-desktop-amd64.iso’
ubuntu-20.04.3-desktop-amd64 4%[=> ] 137.71M 11.2MB/s eta 3m 30s
...
Jos URL-luettelossasi on tietty numerointimalli, voit noutaa kaikki mallia vastaavat URL-osoitteet lisäämällä aaltosulkeet. Jos esimerkiksi haluat ladata sarjan Linux-ytimiä versioista 5.1.1 - 5.1.15, voit tehdä seuraavasti.
wget https://mirrors.edge.kernel.org/pub/linux/kernel/v5.x/linux-5.1.{1..15}.tar.gz
--2021-12-10 05:46:59-- https://mirrors.edge.kernel.org/pub/linux/kernel/v5.x/linux-5.1.1.tar.gz
Resolving mirrors.edge.kernel.org (mirrors.edge.kernel.org)... 147.75.95.133, 2604:1380:3000:1500::1
Connecting to mirrors.edge.kernel.org (mirrors.edge.kernel.org)|147.75.95.133|:443... connected.
WARNING: The certificate of ‘mirrors.edge.kernel.org’ is not trusted.
WARNING: The certificate of ‘mirrors.edge.kernel.org’ is not yet activated.
The certificate has not yet been activated
HTTP request sent, awaiting response... 200 OK
Length: 164113671 (157M) [application/x-gzip]
Saving to: ‘linux-5.1.1.tar.gz’
linux-5.1.1.tar.gz 100%[===========>] 156.51M 2.59MB/s in 61s
2021-12-10 05:48:01 (2.57 MB/s) - ‘linux-5.1.1.tar.gz’ saved [164113671/164113671]
--2021-12-10 05:48:01-- https://mirrors.edge.kernel.org/pub/linux/kernel/v5.x/linux-5.1.2.tar.gz
Reusing existing connection to mirrors.edge.kernel.org:443.
HTTP request sent, awaiting response... 200 OK
Length: 164110470 (157M) [application/x-gzip]
Saving to: ‘linux-5.1.2.tar.gz’
linux-5.1.2.tar.gz 19%[===========] 30.57M 2.58MB/s eta 50s
5. Wget Resume keskeneräinen lataus
Suuren tiedostonlatauksen yhteydessä saattaa joskus tapahtua, että lataus keskeytyy, jolloin voimme jatkaa saman tiedoston lataamista siitä, mihin se jäi vaihtoehdolla -c.
Mutta kun aloitat tiedostojen lataamisen määrittämättä -c-vaihtoehtoa, vaihtoehto wget lisää .1-tunnisteen tiedoston loppuun, jota pidetään tuoreena. ladata. Joten on hyvä käytäntö lisätä -c-kytkin, kun lataat suuria tiedostoja.
# wget -c https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
--2021-12-10 05:27:59-- https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
Resolving releases.ubuntu.com (releases.ubuntu.com)... 91.189.88.247, 91.189.91.123, 91.189.91.124, ...
Connecting to releases.ubuntu.com (releases.ubuntu.com)|91.189.88.247|:443... connected.
HTTP request sent, awaiting response... 206 Partial Content
Length: 3071934464 (2.9G), 2922987520 (2.7G) remaining [application/x-iso9660-image]
Saving to: ‘ubuntu-20.04.3-desktop-amd64.iso’
ubuntu-20.04.3-desktop-amd64.iso 5%[++++++> ] 167.93M 11.1MB/s
^C
[root@tecmint ~]# wget -c https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
--2021-12-10 05:28:03-- https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
Resolving releases.ubuntu.com (releases.ubuntu.com)... 91.189.88.248, 91.189.91.124, 91.189.91.123, ...
Connecting to releases.ubuntu.com (releases.ubuntu.com)|91.189.88.248|:443... connected.
HTTP request sent, awaiting response... 206 Partial Content
Length: 3071934464 (2.9G), 2894266368 (2.7G) remaining [application/x-iso9660-image]
Saving to: ‘ubuntu-20.04.3-desktop-amd64.iso’
ubuntu-20.04.3-desktop-amd64.iso 10%[+++++++=====> ] 296.32M 17.2MB/s eta 2m 49s ^
6. Wget Mirror Entire Website
Voit ladata tai peilata tai kopioida koko verkkosivuston offline-katselua varten käyttämällä seuraavaa komentoa, joka tekee paikallisen kopion verkkosivustosta kaikkien resurssien kanssa (JavaScript, CSS, kuvat).
wget --recursive --page-requisites --adjust-extension --span-hosts --convert-links --restrict-file-names=windows --domains yoursite.com --no-parent yoursite.com
Yllä olevan komennon selitys.
wget \
--recursive \ # Download the whole site.
--page-requisites \ # Get all assets/elements (CSS/JS/images).
--adjust-extension \ # Save files with .html on the end.
--span-hosts \ # Include necessary assets from offsite as well.
--convert-links \ # Update links to still work in the static version.
--restrict-file-names=windows \ # Modify filenames to work in Windows as well.
--domains yoursite.com \ # Do not follow links outside this domain.
--no-parent \ # Don't follow links outside the directory you pass in.
yoursite.com/whatever/path # The URL to download
7. Wget Lataa tiedostot taustalla
-b-vaihtoehdolla voit lähettää latauksen taustalla heti latauksen alkamisen jälkeen ja lokit kirjoitetaan wget.log-tiedostoon.
wget -b wget.log https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
Continuing in background, pid 8999.
Output will be written to ‘wget.log’.
8. Wget Aseta tiedostojen latausnopeusrajoitukset
Vaihtoehdolla --limit-rate=100k latausnopeusrajoitus on rajoitettu 100 000 kilometriin ja lokit luodaan wget.log-kansioon alla olevan kuvan mukaisesti.
wget -c --limit-rate=100k -b wget.log https://releases.ubuntu.com/20.04.3/ubuntu-20.04.3-desktop-amd64.iso
Continuing in background, pid 9108.
Output will be written to ‘wget-log’.
Tarkastele wget.log-tiedostoa ja tarkista wgetin latausnopeus.
tail -f wget-log
5600K .......... .......... .......... .......... .......... 0% 104K 8h19m
5650K .......... .......... .......... .......... .......... 0% 103K 8h19m
5700K .......... .......... .......... .......... .......... 0% 105K 8h19m
5750K .......... .......... .......... .......... .......... 0% 104K 8h18m
5800K .......... .......... .......... .......... .......... 0% 104K 8h18m
5850K .......... .......... .......... .......... .......... 0% 105K 8h18m
5900K .......... .......... .......... .......... .......... 0% 103K 8h18m
5950K .......... .......... .......... .......... .......... 0% 105K 8h18m
6000K .......... .......... .......... .......... .......... 0% 69.0K 8h20m
6050K .......... .......... .......... .......... .......... 0% 106K 8h19m
6100K .......... .......... .......... .......... .......... 0% 98.5K 8h20m
6150K .......... .......... .......... .......... .......... 0% 110K 8h19m
6200K .......... .......... .......... .......... .......... 0% 104K 8h19m
6250K .......... .......... .......... .......... .......... 0% 104K 8h19m
...
9. Wget Lataa salasanasuojatut tiedostot FTP:n ja HTTP:n kautta
Voit ladata tiedoston salasanalla suojatusta FTP-palvelimesta käyttämällä vaihtoehtoja --ftp-user=username ja --ftp-password=password kuvan mukaisesti.
wget --ftp-user=narad --ftp-password=password ftp://ftp.example.com/filename.tar.gz
Voit ladata tiedoston salasanalla suojatusta HTTP-palvelimesta käyttämällä vaihtoehtoja --http-user=username ja --http-password=password kuvan mukaisesti.
wget --http-user=narad --http-password=password http://http.example.com/filename.tar.gz
10. Wget Ohita SSL-sertifikaatin tarkistus
Voit ohittaa SSL-varmenteen tarkistuksen ladattaessa tiedostoja HTTPS-yhteydellä käyttämällä --no-check-certificate-vaihtoehtoa:
wget --no-check-certificate https://mirrors.edge.kernel.org/pub/linux/kernel/v5.x/linux-5.1.1.tar.gz
--2021-12-10 06:21:21-- https://mirrors.edge.kernel.org/pub/linux/kernel/v5.x/linux-5.1.1.tar.gz
Resolving mirrors.edge.kernel.org (mirrors.edge.kernel.org)... 147.75.95.133, 2604:1380:3000:1500::1
Connecting to mirrors.edge.kernel.org (mirrors.edge.kernel.org)|147.75.95.133|:443... connected.
WARNING: The certificate of ‘mirrors.edge.kernel.org’ is not trusted.
WARNING: The certificate of ‘mirrors.edge.kernel.org’ is not yet activated.
The certificate has not yet been activated
HTTP request sent, awaiting response... 200 OK
Length: 164113671 (157M) [application/x-gzip]
Saving to: ‘linux-5.1.1.tar.gz’
...
11. Wget-versio ja ohje
Vaihtoehtojen --versio ja --help avulla voit tarkastella versiota ja ohjetta tarpeen mukaan.
wget --version
wget --help
Tässä artikkelissa olemme käsitelleet Linuxin wget-komennot päivittäisten hallintatehtävien vaihtoehdoilla. Haluatko man wget, jos haluat tietää siitä lisää? Jaa ystävällisesti kommenttikentässämme tai jos olemme jääneet paitsi jostain, ilmoita meille.