python数据保存到MySQL

最新推荐文章于 2025-07-06 20:48:16 发布

原创

最新推荐文章于 2025-07-06 20:48:16 发布 · 1.4k 阅读

15 ·

CC 4.0 BY-SA版权

文章标签：

#python #mysql

本文介绍如何将Python爬取的虎扑数据有效保存到MySQL数据库中，通过导入相关库，定义爬取数据的方法，最后成功运行并将数据存入数据库。检查MySQL，数据已成功入库。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

本文依然以虎扑为例，将爬取的数据保存到mysql数据库中：

首先，导入相应的库

import requests
from bs4 import BeautifulSoup
import time
import random
import MySQLdb

定义方法爬取数据

def get_information(page=0):

    url = 'https://bbs.hupu.com/bxj-postdate-' + str(page+1)
    headers={
   
   
        "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.100 Safari/537.36",
        "Referer": "https://bbs.hupu.com/bxj"
    }
    r = requests.get(url,headers=headers)
    soup = BeautifulSoup(r.content.decode("utf-8"),"html.parser")
    out = soup.find("ul",attrs={
   
   "class":"for-list"})<