資源下載--使用Proxy SwitchyOmega+postman下載資源

• 1 介紹
• 2 使用方法
• • 2.1 安裝配置 Proxy SwitchyOmega
  • 2.2 配置postman
  • 2.3 測試
• 3 說明

1 介紹

很多時候我們需要在網絡上下載資源，但是本機網絡由于各種限制，速度極慢，此時需要獲取下載信息，到特定服務器下載數據。

第一種情況：
大部分資源直接是資源的具體地址，該地址直接包含文件名，如https://www2.spsc.tugraz.at/databases/PTDB-TUG/SPEECH_DATA_ZIPPED.zip
，此時直接點擊該鏈接 就可以下載，也可以復制該路徑，到指定服務器上通過wget 來下載(通常用aws或者gcp來下載海外資源);

此處直接通過文件絕對路徑下載，使用 --limit-rate=10m 限制下載速度最高為10m/s： wget -c --limit-rate=10m https://www2.spsc.tugraz.at/databases/PTDB-TUG/SPEECH_DATA_ZIPPED.zip

第二種情況：
資源包含了下載鏈接，但該鏈接不是資源的絕對地址，直接通過wget在服務器是無發下載的；或者該文件需要登陸賬號認證，直接獲取下載地址后，在服務器上也無法通過wget等命令直接使用的；
此時我們需要通過某種方式獲取資源下載時候的url、完整headers、認證信息；具體方法可以結合代理插件和postman獲取相關下載命令，下文將對該方法進行詳細介紹。

2 使用方法

2.1 安裝配置 Proxy SwitchyOmega

在google web store 搜索Proxy SwitchyOmega，并下載安裝插件；

設置使用proxy功能，并配置http和https端口
此處配置http 和 http 代理端口都為5555，該端口后續要在postman中使用；
配置server 為127.0.0.1，即本機；
配置好打開proxy功能；

2.2 配置postman

下載并安裝postman

配置proxy
如圖，在Capture -》 Requests -》Source-》選擇Proxy，設置Capture Requests為on，設置端口為5555；
該配置設置成功后，在goole上訪問的http和https都會被5555端口捕獲到，進一步根據破獲的內容獲取其下載命令；

2.3 測試

下載數據集 [M2VoC MST and TSV data.zip](M2VoC MST and TSV data.zip)
https://fft.cloud.iqiyi.com/s/bYT2m6t?direct=1&access=3uTJiz
很明顯，該數據可以在瀏覽器下載，但是直接copy該地址是無法在服務器上下載的，此時postman就可以派上用場了；

在瀏覽器上點擊該網址 生成訪問記錄，在postman中找到具體訪問信息
如下圖捕獲到訪問記錄了，單機Save 右下角的Code就可以看到各種下載信息了；

此處直接獲取wget命令即可，將這些命令完整copy上，即可在對應的服務器上下載了；

wget --no-check-certificate --quiet \--method GET \--timeout=0 \--header 'accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9' \--header 'accept-encoding: gzip, deflate, br' \--header 'accept-language: en-US,en;q=0.9' \--header 'connection: keep-alive' \--header 'cookie: session=MTYwODAwMzI1OXxEdi1CQkFFQ180SUFBUkFCRUFBQVRmLUNBQUlHYzNSeWFXNW5EQW9BQ0hOb1lYSmxYMmxrQm5OMGNtbHVad3dKQUFkaVdWUXliVFowQm5OMGNtbHVad3dKQUFkaGRYUm9YMmxrQm5OMGNtbHVad3dKQUFkaVdWUXliVFowfLbcN1QnSNX6ke5LnPoVr5-lrB3Hs1aqQUpnB5T3rLLE' \--header 'host: fft.cloud.iqiyi.com' \--header 'sec-fetch-dest: document' \--header 'sec-fetch-mode: navigate' \--header 'sec-fetch-site: cross-site' \--header 'sec-fetch-user: ?1' \--header 'upgrade-insecure-requests: 1' \--header 'user-agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 11_0_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36' \ 'https://fft.cloud.iqiyi.com/s/bYT2m6t?direct=1&access=3uTJiz'

3 說明

postman 官網下載postman app
webstore 下載SwitchyOmega

總結

以上是生活随笔為你收集整理的资源下载--使用Proxy SwitchyOmega+postman下载资源的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。