AI网络爬虫012：批量爬取豆瓣图书搜索结果

翰墨之道

于 2024-07-06 22:48:37 发布

阅读量541

点赞数 6

CC 4.0 BY-SA版权

分类专栏： GPT开发、GPT应用专栏文章标签：人工智能爬虫 AI网络爬虫批量爬取豆瓣图书搜索结果搜索结果豆瓣图书

本文链接：https://blog.csdn.net/LuckyHanMo/article/details/140237189

GPT开发、GPT应用专栏专栏收录该内容

81 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

文章目录

一、任务
二、输入内容
三、输出内容

一、任务

爬取豆瓣图书搜索结果页面的全部图书信息

在这里插入图片描述

二、输入内容

在ChatGPT中输入提示词：

你是一个Python编程专家，要完成一个爬虫Python脚本编写的任务，具体步骤如下：

用 fake-useragent库设置随机的请求头；

设置chromedriver的路径为："D:\Program Files\chromedriver125\chromedriver.exe"

隐藏chromedriver特征；

设置selenium的窗口最大化；

请求标头：

Accept:

text/html,application/xhtml+xml,