使用wget遞歸鏡像網站
更新時間：2017年07月02日 09:50:44 作者：lon.y@qq.com
wget這個命令可以以遞歸的方式下載整站，并可以將下載的頁面中的鏈接轉換為本地鏈接。
有時間看到別人網站的頁面比較漂亮，就想給扒皮下來，學習學習。分享一個我常用網站扒皮命令wget
這個命令可以以遞歸的方式下載整站，并可以將下載的頁面中的鏈接轉換為本地鏈接。
wget加上參數之后，即可成為相當強大的下載工具。
wget命令詳解
wget -r -p -np -k http://xxx.com/xxx
-r, --recursive（遞歸） specify recursive download.（指定遞歸下載）
-k, --convert-links（轉換鏈接） make links in downloaded HTML point to local files.（將下載的HTML頁面中的鏈接轉換為相對鏈接即本地鏈接）
-p, --page-requisites（頁面必需元素） get all images, etc. needed to display HTML page.（下載所有的圖片等頁面顯示所需的內容）
-np, --no-parent（不追溯至父級） don't ascend to the parent directory.
另外斷點續(xù)傳用-nc參數 日志 用-o參數
拿我自己的網站扒皮試一下吧
執(zhí)行
wget -r -p -np -k https://xxx.com/
命令
This entry was posted in 服務器 and tagged wget, 鏡像網站. Bookmark the permalink.
相關文章
安裝ubuntu18.04報:failed to load ldlinux.c32的問題及解決步驟
這篇文章主要介紹了安裝ubuntu18.04報:failed to load ldlinux.c32的問題，本文通過圖文并茂的形式給大家分享解決方法，需要的朋友可以參考下2020-08-08
今天小編就為大家分享一篇關于Linux IO多路復用之epoll網絡編程，小編覺得內容挺不錯的，現在分享給大家，具有很好的參考價值，需要的朋友一起跟隨小編來看看吧2018-12-12
這篇文章主要介紹了Linux進程網絡流量統計的實現過程,本文給大家介紹的非常詳細，具有一定的參考借鑒價值，需要的朋友可以參考下2018-09-09
在Linux環(huán)境中安裝Kafka需要下載對應版本的資源包,并安裝配置Zookeeper,此教程以kafka_2.12-2.5.1版本和apache-zookeeper-3.6.1為例,詳細介紹了單體及集群環(huán)境下的安裝步驟、配置修改、啟動驗證以及Kerberos認證配置,同時提供了kafka常用命令和注意事項,適合初學者參考2024-10-10
這篇文章主要介紹了Linux paste命令的使用方法，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2020-02-02
這篇文章主要介紹了Zabbix基于snmp實現監(jiān)控linux主機,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-08-08
Ubuntu18.04安裝opencv 3.2.0的解決方法
這篇文章主要介紹了Ubuntu18.04安裝opencv 3.2.0的解決方法，非常不錯，具有一定的參考借鑒價值,需要的朋友可以參考下2018-10-10
這篇文章主要介紹了在 CentOS 7 中安裝 MySQL 8 的教程詳解,非常不錯，具有一定的參考借鑒價值，需要的朋友可以參考下2018-10-10
這篇文章主要介紹了linux下查看端口是否被占用以及查看所有端口的相關資料,需要的朋友可以參考下2018-06-06
本篇文章主要介紹了Linux中搭建常用服務器，主要包括telnet、DHCP、DNS、sendmail、FTP、web、samba有興趣的可以了解一下。2016-12-12