Python爬虫编程思想（81）： CSV文件存储

蒙娜丽宁

于 2021-11-11 20:03:54 发布

阅读量850

点赞数

CC 4.0 BY-SA版权

分类专栏： Python爬虫编程思想文章标签： python 爬虫开发语言

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/nokiaguy/article/details/121274958

Python爬虫编程思想专栏收录该内容

161 篇文章 ¥39.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了Python中处理CSV文件的基本操作，包括如何写入和读取CSV数据。使用csv模块，可以方便地将数据写入CSV文件，通过writerow和writerows方法实现数据记录的写入。同时，也展示了如何从CSV文件读取数据，利用reader类迭代获取每一行内容。此外，提到了使用Pandas的read_csv函数作为另一种读取CSV数据的方式。

目录

1. 写入CSV文件

2. 读取CSV文件

CSV，全称是Comma-Separated Values，中文可以称为“逗号分隔值”或“字符分隔值”，CSV文件以纯文本形式存储表格数据。该问是一个字符序列，可以由任意数目的记录组成，记录间以某种换行符分隔，每条记录由若干个字段组成，字段间的分隔符是其他字符或字符串，最常见的是逗号或制表符。不过所有记录的字段数必须相同，类似于关系型数据库的二维表。CSV文件比Excel文件更加简洁，Excel文件是电子表格文件，是二进制格式的文件，里面包含了文本、数值、公式、甚至是VBA代码，而CSV文件中并不包含这些内容，只包含用特定字符分隔的文本，结构清晰简单。所有在很多场景下使用CSV文件保存数据是比较方便的。本节会介绍如何使用Python API向CSV文件写入数据，以及从CSV文件读取数据。

1. 写入CSV文件

Python提供的csv模块，利用该模块中的API可以将数据写入CSV文件。使用csv模块，首先要使用

了解本专栏

超级会员免费看

博客等级

码龄17年

企业官方账号

博客专家认证

2196
原创

1万+
点赞

1万+
收藏

4万+
粉丝

关注

私信

热门文章

分类专栏

展开全部收起

上一篇：: Python爬虫编程思想（80）：将类实例转换为JSON字符串

下一篇：: Python爬虫编程思想（82）：管理SQLite数据库

最新评论

【运维】构建基于Python的自动化运维平台：用Flask和Celery打造高效管理工具
北风之神c: 总结的很全面，写得赞，博主用心了。 celery对目录层级文件名称格式要求太高，只适合规划新的项目，对不规则文件夹套用难度高。所以新手使用celery很仔细的建立文件夹名字、文件夹层级、python文件名字。在不规范的文件夹路径下，使用celery难度很高，一般教程都没教。 [项目文件夹目录格式不规范下的celery使用演示](https://github.com/ydf0509/celery_demo) 。此国产分布式函数调度框架 funboost python万能通用函数加速器 https://funboost.readthedocs.io/zh-cn/latest/articles/c1.html ，从用法调用难度，用户所需代码量，超高并发性能，qps控频精确程度，支持的中间件类型，任务控制方式，稳定程度等20个方面全方位超过celery。发布性能提高1000%，消费性能提高2000%。 python万能分布式函数调度框架funboost支持python所有类型的并发模式和一切知名消息队列中间件，python函数加速器，只需要一行代码调度任意函数，框架包罗万象,万能编程功能宝典，一统编程思维，与业务不绑定，适用范围广。通过 funboost web manager 全方位可视化管理和查看你的函数运行情况，无需看文件日志。 https://funboost.readthedocs.io/zh-cn/latest/articles/c13.html pip install funboost
Python爬虫编程思想（120）：抓取移动App数据--在移动端安装mitmproxy证书
Kw!G: 安卓7以上安装了证书也不能拦截，有办法解决吗
Python爬虫编程思想（1）：HTTP基础
北风之神c: 总结的很全面的爬虫，写得赞，博主用心了。此国产分布式函数调度框架 funboost python万能通用函数加速器 https://funboost.readthedocs.io/zh-cn/latest/articles/c8.html ，只需要@boost一行代码，加到任意新/旧爬虫项目就又强又自由又简单。 funboost 分布式函数调度框架，定位于调度用户的任何函数，只要用户在函数里面写爬虫代码，就可以分布式调度爬虫，此框架如果用于爬虫，不管从任何方面比较可以领先scrapy 20年，也比任意写的爬虫框架领先10年。普通爬虫框架一般就设计为url请求调度框架，url怎么请求都是被框内置架束缚死了，所以有些奇葩独特的想法在那种框架里面难以实现，用户需要非常之精通框架本身然后改造框架才能达到随心所欲的驾驭的目的。普通的爬虫框架与用户手写requests 请求解析存储，在流程逻辑上是严重互斥的，要改造成使用那种框架改造需要大改特改。而此框架是函数调度框架，函数里面用户可以随意写一切任意自由想法，天生不会有任何束缚。与用户使用别的爬虫框架或者无框架用户手写多线程爬虫相比， funboost都代码更少更强更简单更自由。 pip install boost_spider (powerd by funboost ，boost_spider比funboost增加了更加专门的针对爬虫请求和解析和存储） https://github.com/ydf0509/boost_spider 依托于funboost的强大可视化管理，不登录机器可以轻松掌控分布式大规模爬虫运行状态，一目了然。可视化截图： https://funboost.readthedocs.io/zh-cn/latest/articles/c13.html
【人工智能】基于Python的自然语言处理：深入实现文本相似度计算
ha_lydms: 这篇文章写的太好了，很棒的内容，加油。
【Python运维】日志分析与监控：用Python进行日志聚合与异常检测的全面指南
北风之神c: 总结的很全面的日志使用，写得赞，博主用心了。此国产日志 https://nb-log-doc.readthedocs.io/zh-cn/latest/articles/c1.html 使用原生 loggng封装，兼容性和替换性100%,只需要一行代码大幅简化logging的使用。 1、日志能根据级别能够自动变彩色。 2、print自动变彩色。 3、日志和print在pycahrm控制台的输出都自动可以点击跳转到文件和行号。 4、多进程日志切割安全，文件日志写入性能高。 5、入参简单，能一键自动记录到多种地方。 6、 nb_log 兼容包含loguru色彩模式,loguru只是nb_log的子集之一. 相比 loguru 有10胜。 pip install nb_log 。

大家在看

最新文章

2025

目录

展开全部

收起

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。