小男孩‘自慰网亚洲一区二区,亚洲一级在线播放毛片,亚洲中文字幕av每天更新,黄aⅴ永久免费无码,91成人午夜在线精品,色网站免费在线观看,亚洲欧洲wwwww在线观看

分享

用wget下載整個網(wǎng)站或索引目錄 – I'm moper

 看見就非常 2012-10-26

一直不知道nginx或者apache建立的索引目錄是怎么下載的,偶然聽到一個朋友說wget可以,在網(wǎng)上一查果真行,哎哎,終于可以滿足自己的下載欲望了。記錄命令使用情況如下。

$ wget -c -r -nd -np -k -L -p -A c,h www./doc/path/

-c 斷點(diǎn)續(xù)傳
-r 遞歸下載,下載指定網(wǎng)頁某一目錄下(包括子目錄)的所有文件
-nd 遞歸下載時(shí)不創(chuàng)建一層一層的目錄,把所有的文件下載到當(dāng)前目錄
-np 遞歸下載時(shí)不搜索上層目錄。

如wget -c -r www./doc/path/ 沒有加參數(shù)-np,就會同時(shí)下載path的上一級目錄pub下的其它文件

-k 將絕對鏈接轉(zhuǎn)為相對鏈接,下載整個站點(diǎn)后脫機(jī)瀏覽網(wǎng)頁,最好加上這個參數(shù)

-L 遞歸時(shí)不進(jìn)入其它主機(jī),如wget -c -r www./ 如果網(wǎng)站內(nèi)有一個這樣的鏈接: www.yyy.com,不加參數(shù)-L,就會像大火燒山一樣,會遞歸下載www.yyy.com網(wǎng)站
-p 下載網(wǎng)頁所需的所有文件,如圖片等
-A 指定要下載的文件樣式列表,多個樣式用逗號分隔
-i 后面跟一個文件,文件內(nèi)指明要下載的URL。

下載有索引目錄
wget -m http: //www./dir/ 這個最強(qiáng)力了!前提是目錄必須是索引目錄!

下載一個目錄,例如網(wǎng)站的yourdir

wget -U “Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; GTB5)” -r -p -k -np -Pmydir -nc -o down.log http://www./yourdir/index.html

如果要想下載整個網(wǎng)站,最好去除-np參數(shù)。

wget -U “Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; GTB5)” -r -p -k -nc -o down.log http://www./index.html

-U 修改agent,偽裝成IE貨firefox等
-r 遞歸;對于HTTP主機(jī),wget首先下載URL指定的文件,然后(如果該文件是一個HTML文檔的話)遞歸下載該文件所引用(超級連接)的所有文件(遞歸深度由參數(shù)-l指定)。對FTP主機(jī),該參數(shù)意味著要下載URL指定的目錄中的所有文件,遞歸方法與HTTP主機(jī)類似。
-c 指定斷點(diǎn)續(xù)傳功能。實(shí)際上,wget默認(rèn)具有斷點(diǎn)續(xù)傳功能,只有當(dāng)你使用別的ftp工具下載了某一文件的一部分,并希望wget接著完成此工作的時(shí)候,才需要指定此參數(shù)。
-nc 不下載已經(jīng)存在的文件
-np 表示不跟隨鏈接,只下載指定目錄及子目錄里的東西;
-p 下載頁面顯示所需的所有文件。比如頁面中包含了圖片,但是圖片并不在/yourdir目錄中,而在/images目錄下,有此參數(shù),圖片依然會被正常下載。
-k 修復(fù)下載文件中的絕對連接為相對連接,這樣方便本地閱讀。

    本站是提供個人知識管理的網(wǎng)絡(luò)存儲空間,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點(diǎn)。請注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購買等信息,謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請點(diǎn)擊一鍵舉報(bào)。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評論

    發(fā)表

    請遵守用戶 評論公約

    類似文章 更多