python实现批量数据库数据插入

import pandas as pd
import pymysql

# 连接 MySQL 数据库
conn = pymysql.connect(
    host='localhost',
    user='your_username',
    password='your_password',
    database='your_database_name',
    charset='utf8mb4',
)

# 读取已有数据
existing_data = pd.read_csv("86w全名单查实时多头测试.csv")

# 重复数据至800W条
max_rows = 8000000  # 总行数
repeat_times = max_rows // len(existing_data)  # 重复次数
remaining_rows = max_rows % len(existing_data)  # 剩余行数
full_data = pd.concat([existing_data] * repeat_times + [existing_data.iloc[:remaining_rows]])

# 更改序号列
full_data['序号'] = range(1, max_rows + 1)

# 写入 MySQL 数据库
table_name = 'table_name'  # 对应的表名
full_data.to_sql(name=table_name, con=conn, if_exists='replace', index=False)

# 关闭连接
conn.close()

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值