见证壁纸采集新时代：4K精品，批量到手

后端

2024-01-29 20:48:39

壁纸采集新时代：4K精品，批量到手

在现代生活中，壁纸已经成为我们美化电脑、手机屏幕的必备元素。然而，在茫茫壁纸海中，找到心仪的壁纸往往让人头疼不已。今天，我将分享一个实用的爬虫项目，助你批量采集4K壁纸，从此告别壁纸荒！

一、壁纸天堂：https://pic.netbian.com/

我们选择的壁纸来源是https://pic.netbian.com/，这里汇聚了海量的高清壁纸，种类繁多，品质上乘。

二、Python爬虫：自动化采集

为了实现壁纸的批量采集，我们需要借助Python爬虫技术。下面是详细的步骤：

安装依赖库：

pip install requests beautifulsoup4

编写爬虫代码：

import requests
from bs4 import BeautifulSoup

# 设置请求头信息
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36'
}

# 壁纸分类链接
category_url = 'https://pic.netbian.com/'

# 发起请求，获取分类页面
category_response = requests.get(category_url, headers=headers)

# 解析分类页面，获取壁纸列表链接
category_soup = BeautifulSoup(category_response.text, 'html.parser')
wallpaper_list_urls = [
    'https://pic.netbian.com/' + node.get('href')
    for node in category_soup.find_all('a', class_='classify-link')
]

# 遍历壁纸列表链接，获取壁纸详情
for wallpaper_list_url in wallpaper_list_urls:
    # 发起请求，获取壁纸列表页面
    wallpaper_list_response = requests.get(wallpaper_list_url, headers=headers)

    # 解析壁纸列表页面，获取壁纸详情链接
    wallpaper_list_soup = BeautifulSoup(wallpaper_list_response.text, 'html.parser')
    wallpaper_detail_urls = [
        'https://pic.netbian.com/' + node.get('href')
        for node in wallpaper_list_soup.find_all('a', class_='download')
    ]

    # 遍历壁纸详情链接，下载壁纸
    for wallpaper_detail_url in wallpaper_detail_urls:
        # 发起请求，获取壁纸详情页面
        wallpaper_detail_response = requests.get(wallpaper_detail_url, headers=headers)

        # 解析壁纸详情页面，获取壁纸下载链接
        wallpaper_detail_soup = BeautifulSoup(wallpaper_detail_response.text, 'html.parser')
        wallpaper_download_url = wallpaper_detail_soup.find('a', class_='down').get('href')

        # 下载壁纸
        print(f'下载壁纸：{wallpaper_download_url}')
        wallpaper_response = requests.get(wallpaper_download_url, headers=headers)
        with open(f'{wallpaper_download_url.split("/")[-1]}', 'wb') as f:
            f.write(wallpaper_response.content)