網頁中 Python，學霸
大家好！今天給你們帶來了網頁中爬取 超清 桌布Python例項。例項中主要使用mechanicalsoup和wget， 僅供學習！
安裝：
pip install mechanicalsoup wget
完整例項：
#By Python_Fucker On 25/03/2024from mechanicalsoup import StatefulBrowserimport reimport wget import osdefvalidateTitle(title): rstr = r"[\/\\\:\*\?\"\<\>\|]"# '/ \ : * ? " < > |' new_title = re.sub(rstr, "_", title) # 替換為底線return new_titledeffuck_image(num):for i in range(1,num):#最多可以設定838頁 print(f"正在爬取第{i}頁....") pram=""if i>1: pram=f"index_{i}.htm" browser = StatefulBrowser()ifnot os.path.exists("圖片/"): os.mkdir("圖片/") browser.open("http://www.netbian.com/1920x1080/"+pram) page = browser.get_current_page() links_info = [(a.attrs.get('href'), a.attrs.get('title')) for a in page.select('li a') if'href'in a.attrs and'title'in a.attrs] relevant_links = [(link, title) for link, title in links_info if'/desk/'in link] image_ids = [int(re.findall(r'\d+', link)[0]) for link, _ in relevant_links]for id, title in zip(image_ids, [title for _, title in relevant_links]): print(f"圖片: {title}",f"\n下載連結：http://www.netbian.com/down.php?type=1&id={id}\n***\n") wget.download("http://www.netbian.com/down.php?type=1&id="+str(id),f"圖片/{validateTitle(title)}.jpg")#下載if __name__ == '__main__':#開始下載 fuck_image(10)#設定下載頁數,最高838
輸出：
帽子 獸耳 動漫桌布 更新時間：2024-03-10下載連結：http://www.netbian.com/down.php?type=1&id=33336***100% [..........................................................................] 1427129 / 1427129圖片: 森林裏的早晨 太陽 春天風景桌布 更新時間：2024-03-09下載連結：http://www.netbian.com/down.php?type=1&id=33335***100% [..........................................................................] 2088366 / 2088366圖片: 崩壞星穹鐵道 流螢 彩虹 桌面桌布 更新時間：2024-03-09下載連結：http://www.netbian.com/down.php?type=1&id=33334***100% [..........................................................................] 1267329 / 1267329圖片: 王者榮耀 朵莉亞破曉桌布 更新時間：2024-03-09下載連結：http://www.netbian.com/down.php?type=1&id=33333***100% [..........................................................................] 1502391 / 1502391圖片: ins金克絲桌布 更新時間：2024-03-08下載連結：http://www.netbian.com/down.php?type=1&id=33329***100% [............................................................................] 884812 / 884812圖片: 可愛粉色長發女 孩 藍色眼睛 動漫高畫質桌布 更新時間：2024-03-08下載連結：http://www.netbian.com/down.php?type=1&id=33328***100% [..........................................................................] 1022907 / 1022907圖片: 趙露思 健身美女桌面桌布 更新時間：2024-03-08下載連結：http://www.netbian.com/down.php?type=1&id=33332***100% [............................................................................] 905004 / 905004圖片: 健身美女趙露思 桌布 更新時間：2024-03-08下載連結：http://www.netbian.com/down.php?type=1&id=33330***100% [............................................................................] 612394 / 612394圖片: 健身美女趙露思 高畫質電腦桌布 更新時間：2024-03-08下載連結：http://www.netbian.com/down.php?type=1&id=33331***100% [............................................................................] 717735 / 717735圖片: 日落金山桌布高 清 更新時間：2024-03-06下載連結：http://www.netbian.com/down.php?type=1&id=33303***100% [..........................................................................] 1551531 / 1551531
