基于Python爬虫采集天气网实时信息

基于Python爬虫采集天气网实时信息是一个非常有用的应用场景，可以帮助我们在Python中快速获取天气信息。本攻略将介绍Python爬虫采集天气网实时信息的完整攻略，包括数据获取、数据处理、数据存储和示例。

步骤1：获取数据

在Python中，我们可以使用requests库获取网页数据。以下是获取天气网实时信息数据的示例：

import requests

url = 'http://www.weather.com.cn/weather1d/101010100.shtml'
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
data = response.text

在上面的代码中，我们使用requests库发送HTTP请求，获取天气网实时信息页面的HTML数据。

步骤2：解析数据

在Python中，我们可以使用BeautifulSoup库解析HTML数据。以下是解析天气网实时信息数据的示例代码：

from bs4 import BeautifulSoup

soup = BeautifulSoup(data, 'html.parser')
city = soup.select('.crumbs a')[-1].text
temperature = soup.select('.tem span')[-1].text
weather = soup.select('.wea')[0].text

在上面的代码中，我们使用BeautifulSoup库解析HTML数据，获取天气网实时信息页面的城市、温度和天气信息。

步骤3：数据存储

在Python中，我们可以使用文件操作将数据存储到本地文件中。以下是将天气网实时信息数据存储到本地文件的示例代码：

with open('weather.txt', 'w', encoding='utf-8') as f:
    f.write('城市：' + city + '\n')
    f.write('温度：' + temperature + '\n')
    f.write('天气：' + weather + '\n')

在上面的代码中，我们使用文件操作打开一个文件，将天气网实时信息数据写入文件中。

示例1：输出天气信息

以下是一个示例代码，用于输出天气信息：

import requests
from bs4 import BeautifulSoup

url = 'http://www.weather.com.cn/weather1d/101010100.shtml'
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
data = response.text

soup = BeautifulSoup(data, 'html.parser')
city = soup.select('.crumbs a')[-1].text
temperature = soup.select('.tem span')[-1].text
weather = soup.select('.wea')[0].text

print('城市：', city)
print('温度：', temperature)
print('天气：', weather)

在上面的代码中，我们使用requests库获取天气网实时信息页面的HTML数据，并使用BeautifulSoup库解析HTML数据，获取天气信息。然后，我们使用print函数输出天气信息。

示例2：获取多个城市天气信息

以下是一个示例代码，用于获取多个城市天气信息：

import requests
from bs4 import BeautifulSoup

cities = ['北京', '上海', '广州', '深圳']
for city in cities:
    url = 'http://www.weather.com.cn/weather1d/' + city + '.shtml'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
    response = requests.get(url, headers=headers)
    data = response.text

    soup = BeautifulSoup(data, 'html.parser')
    temperature = soup.select('.tem span')[-1].text
    weather = soup.select('.wea')[0].text

    print(city, '温度：', temperature, '天气：', weather)

在上面的代码中，我们使用for循环遍历多个城市，使用requests库获取天气网实时信息页面的HTML数据，并使用BeautifulSoup库解析HTML数据，获取天气信息。然后，我们使用print函数输出多个城市的天气信息。

结论

本攻略介绍了Python爬虫采集天气网实时信息的完整攻略，包括数据获取、数据处理、数据存储和示例。使用Python可以方便地获取天气信息，提高生活和工作的效率和便利性。