爬虫数据插入数据库

六味柠檬

于 2019-03-25 08:56:28 发布

阅读量1.1k

点赞数

CC 4.0 BY-SA版权

分类专栏：爬虫文章标签：爬虫

本文链接：https://blog.csdn.net/weixin_44200535/article/details/88785688

爬虫专栏收录该内容

1 篇文章

订阅专栏

本文介绍了一种使用Python将爬取的数据保存到MySQL数据库的方法。通过连接本地数据库并创建表结构，可以批量插入爬虫抓取的信息，如标题、年份、公里数等字段。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

爬虫数据插入数据库

def save_mysql(self,title,year1,km,money,label,pic):
    mydb=pymysql.connect(host='localhost',user='root',passwd='3863599',database='pachong')
    cursor=pymysql.cursors.DictCursor
    print(mydb)

    mycon=mydb.cursor()

    mycon.execute('create table IF NOT EXISTS guazi(id INT AUTO_INCREMENT PRIMARY KEY ,title VARCHAR(255) ,year1 VARCHAR(255),km VARCHAR(255),money VARCHAR(255),label VARCHAR(255),pic VARCHAR(255))')
    # mycon.execute('show tables')
    mycon.execute('select * from guazi')
    for i in mycon:
        print(i)
    print((title,year1,km,money,label,pic))
    sql='insert into guazi (title,year1,km,money,label,pic)VALUES (%s,%s,%s,%s,%s,%s)'
    val=[(title,year1,km,money,label,pic)]
    mycon.executemany(sql,val)
    print(mycon.rowcount,'记录插入成功')
    # for i in mycon:
    #     print(i)
    mydb.commit()