爬取网页图片链接并下载保存
生活随笔
收集整理的這篇文章主要介紹了
爬取网页图片链接并下载保存
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
先把需要爬取的網(wǎng)頁鏈接寫到表格中
讀取表格信息
開始爬取鏈接并下載圖片
import urllib.request def deal_photo_item(self, url, id_str):self.driver.get(url)self.driver.execute_script("window.scrollBy(0,1000)")random_sleep()self.driver.execute_script("window.scrollBy(0,-1000)")random_sleep()html = self.driver.page_sourceselector = Selector(text=html)images = []banner_image_list = selector.css('#nc_small::attr(src)').extract()for i, detail_image in enumerate(banner_image_list):# 下載圖片urlStr = detail_image.replace('_60.jpg', '') + '.jpg'filename = f'./圖片/{id_str}+{i}.jpg'urllib.request.urlretrieve(urlStr, filename=filename)
具體的爬取代碼可以看我之前的淘寶商品信息爬取代碼,這邊只記錄通過鏈接保存圖片
總結(jié)
以上是生活随笔為你收集整理的爬取网页图片链接并下载保存的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: ANNOVAR region-based
- 下一篇: 光时域反射仪 OTDR 光纤测试仪TFN