python爬取qq空间说说

Python爬取QQ空间说说是一个比较复杂的任务，需要对QQ空间的数据结构有一定的了解，并且需要使用到相关的库和技术。

首先，我们需要使用Python来实现对QQ空间说说的爬取，这里我们可以使用requests库来实现对QQ空间数据的获取。在这里，我们需要先获取到QQ空间的Cookie信息，然后再根据Cookie信息来获取到相应的数据。

其次，我们还需要使用BeautifulSoup库来实现对HTML文本的解析，这样才能够将HTML文本中包含的信息进行解析出来。在这里，我们可以通过BeautifulSoup库中find_all()方法来实现对HTML文本中特定标签内容的解析。

最后，我们还需要使用MySQL数据库来存储所解析出来的信息。在这里，我们可以使用Python中MySQLdb库中cursor()方法来实例化一个MySQL数据库对象；然后再通过execute()方法将所解析出来的信息存储到MySQL数据库中。

import requests  # 加载requests 库 
from bs4 import BeautifulSoup  # 加载BeautifulSoup 库 
import MySQLdb  # 加载MySQLdb 库 
# 进行相关代理IP 的配置 
proxies = {'http': 'http://127.0.0.1:1080', 'https': 'http://127.0.0.1:1080'}  # 进行代理IP 的配置 
# 进行相关Cookie 的配置 
cookies = {'cookie': 'xxx'}   # 进行Cookie 的配置 
# 进行相关URL 的配置 
url = 'https://user.qzone.qq.com/xxx/infocenter?g_f=xxx'   # 进行URL 的配置  

 # 首先通过requests 发送get 请求,并传递cookies、proxies、headers 等参数   r = requests.get(url, cookies=cookies, proxies=proxies)   # 首先通过requests 发送get 请 求,并传递cookies、proxies、headers 等参数   soup = BeautifulSoup(r.text, 'lxml')    # 通过BeautifulSoup 来对HTML 文本内容进行解 析   items = soup.find_all('div', class_='f-info')    # 通过find_all() 来找到特定标 签内容   for item in items:     print(item)    # 遍历items ,并将特定标 签内容打印出来    db = MySQLdb.connect('localhost', 'root', '123456', charset='utf8')    cursor = db.cursor()     sql = "INSERT INTO qqzone (name, content) VALUES (%s, %s)"     cursor.execute(sql, (name, content))     db.commit()     cursor.close()     db.close() 

Python3爬取QQ空间信息（下）