使用wget遞歸鏡像網(wǎng)站
有時間看到別人網(wǎng)站的頁面比較漂亮，就想給扒皮下來，學(xué)習(xí)學(xué)習(xí)。分享一個我常用網(wǎng)站扒皮命令wget
這個命令可以以遞歸的方式下載整站，并可以將下載的頁面中的鏈接轉(zhuǎn)換為本地鏈接。
wget加上參數(shù)之后，即可成為相當(dāng)強(qiáng)大的下載工具。
wget命令詳解
wget -r -p -np -k http://xxx.com/xxx
-r, --recursive（遞歸） specify recursive download.（指定遞歸下載）
-k, --convert-links（轉(zhuǎn)換鏈接） make links in downloaded HTML point to local files.（將下載的HTML頁面中的鏈接轉(zhuǎn)換為相對鏈接即本地鏈接）
-p, --page-requisites（頁面必需元素） get all images, etc. needed to display HTML page.（下載所有的圖片等頁面顯示所需的內(nèi)容）
-np, --no-parent（不追溯至父級） don't ascend to the parent directory.
另外斷點續(xù)傳用-nc參數(shù) 日志 用-o參數(shù)
拿我自己的網(wǎng)站扒皮試一下吧
執(zhí)行
wget -r -p -np -k https://xxx.com/
命令
This entry was posted in 服務(wù)器 and tagged wget, 鏡像網(wǎng)站. Bookmark the permalink.
相關(guān)文章
安裝ubuntu18.04報:failed to load ldlinux.c32的問題及解決步驟
這篇文章主要介紹了安裝ubuntu18.04報:failed to load ldlinux.c32的問題，本文通過圖文并茂的形式給大家分享解決方法，需要的朋友可以參考下2020-08-08
Linux IO多路復(fù)用之epoll網(wǎng)絡(luò)編程
今天小編就為大家分享一篇關(guān)于Linux IO多路復(fù)用之epoll網(wǎng)絡(luò)編程，小編覺得內(nèi)容挺不錯的，現(xiàn)在分享給大家，具有很好的參考價值，需要的朋友一起跟隨小編來看看吧2018-12-12
Linux進(jìn)程網(wǎng)絡(luò)流量統(tǒng)計的實現(xiàn)過程
這篇文章主要介紹了Linux進(jìn)程網(wǎng)絡(luò)流量統(tǒng)計的實現(xiàn)過程,本文給大家介紹的非常詳細(xì)，具有一定的參考借鑒價值，需要的朋友可以參考下2018-09-09
在Linux環(huán)境中安裝Kafka需要下載對應(yīng)版本的資源包,并安裝配置Zookeeper,此教程以kafka_2.12-2.5.1版本和apache-zookeeper-3.6.1為例,詳細(xì)介紹了單體及集群環(huán)境下的安裝步驟、配置修改、啟動驗證以及Kerberos認(rèn)證配置,同時提供了kafka常用命令和注意事項,適合初學(xué)者參考2024-10-10
這篇文章主要介紹了Linux paste命令的使用方法，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-02-02
Zabbix基于snmp實現(xiàn)監(jiān)控linux主機(jī)
這篇文章主要介紹了Zabbix基于snmp實現(xiàn)監(jiān)控linux主機(jī),文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-08-08
Ubuntu18.04安裝opencv 3.2.0的解決方法
這篇文章主要介紹了Ubuntu18.04安裝opencv 3.2.0的解決方法，非常不錯，具有一定的參考借鑒價值,需要的朋友可以參考下2018-10-10
這篇文章主要介紹了在 CentOS 7 中安裝 MySQL 8 的教程詳解,非常不錯，具有一定的參考借鑒價值，需要的朋友可以參考下2018-10-10
這篇文章主要介紹了linux下查看端口是否被占用以及查看所有端口的相關(guān)資料,需要的朋友可以參考下2018-06-06
本篇文章主要介紹了Linux中搭建常用服務(wù)器，主要包括telnet、DHCP、DNS、sendmail、FTP、web、samba有興趣的可以了解一下。2016-12-12