AutoModelForCausalLM.from_pretrained报错——requests.exceptions.ConnectionError(104)

最新推荐文章于 2025-03-10 10:29:09 发布
最新推荐文章于 2025-03-10 10:29:09 发布
阅读量1.4k 收藏 3
点赞数
CC 4.0 BY-SA版权
文章标签： python AIGC
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44412496/article/details/131644359
文章描述了一个遇到的Python连接错误，具体是ConnectionError伴随着ProtocolError和ConnectionResetError。解决方案是检查并确认protobuf的版本，文中列出了一个成功运行的环境配置，包括各种库的特定版本，如deepspeed、huggingface-hub、numpy等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

requests.exceptions.ConnectionError: (ProtocolError(‘Connection aborted.’, ConnectionResetError(104, ‘Connection reset by peer’)), ‘(Request ID: 8ac8f7f5-c8b3-4e8f-b96d-148d80b5c920)’)

在这里插入图片描述

解决办法：
检查protobuf的版本

测试成功的版本如下：

python 3.9.17
cuda 11.6

deepspeed==0.9.5
huggingface-hub==0.16.3
numpy==1.25.1
pandas==1.2.5
peft==0.3.0
Pillow==10.0.0
protobuf==3.20.1
psutil==5.9.5
requests==2.31.0
safetensors==0.3.1
scipy==1.11.1
sentencepiece==0.1.99
six==1.16.0
tensorboard==2.13.0
tensorboard-data-server==0.7.1
tokenizers==0.13.3
torch==1.13.0+cu116
torchaudio==0.13.0+cu116
torchvision==0.14.0+cu116
tqdm==4.62.3
transformers==4.30.2
urllib3==1.26.16
Y_飞鱼
关注
【Transformer-Hugging Face 05/10】 使用 AutoClass 加载预训练实例
gongdiwudu的专栏
02-06 2961
作为 Transformers 核心理念的一部分，使库易于、简单且灵活地使用，它会AutoClass从给定的检查点自动推断并加载正确的架构。
使用conda出现requests.exceptions.HTTPError 解决方案
热门推荐
weixin_43178406的博客
01-12 9万+
本文主要介绍了使用conda出现requests.exceptions.HTTPError ，希望能对使用conda同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
AutoModelForCausalLM.from_pretrained 函数调用本地权重报错
G果的博客
05-10 4568
在终端直接运行finetune_lora.sh文件，–model_name_or_path该参数是指定加载的模型权重，可以是huggingface上的model_name，也可以使本地保存模型权重的路径。两种权重其实都可以使用，大小都一致，要想只使用.bin权重文件，需要删除.safetensor文件和对应的.safetensor.index.json文件才可以。若只想使用.bin权重文件，但是.bin.index.json文件有残留，运行就会报错找不到.safetensor权重文件。
“AutoModelForCausalLM.from_pretrained“参数说明
qq_42755230的博客
10-08 1万+
AutoModelForCausalLM.from_pretrained参数说明
（已解决）requests.exceptions.ConnectionError: (ProtocolError(‘Connection aborted.‘, ConnectionResetError
BetrayFree的博客
08-26 1万+
今天遇到这样一个问题：requests.exceptions.ConnectionError: (ProtocolError('Connection aborted.', ConnectionResetError(104, 'Connection reset by peer')), '(Request ID: 39b61a73-ee3d-45e2-95f6-e4d6c8bd1ed8)')，特别是看到“Connection reset by peer”时，DNA瞬间觉醒了，这个问题我遇见过！
解决 AutoModelForCausalLM.from_pretrained 加载模型时的内存报错问题Process finished with exit code - 1073741819
happycell188的博客
02-24 1050
在自然语言处理领域，我们经常会使用到 Hugging Face 的库中的方法来加载预训练的语言模型。然而，在实际操作过程中，不少用户可能会遇到这样的报错信息：“Process finished with exit code - 1073741819 (0xC0000005)”。本文将详细探讨该问题产生的原因，并提供相应的解决办法。
报错：cannot import name ‘AutoModelForCausalLM‘ from ‘modelscope‘
tq040626的博客
09-21 3841
由此可发现调用AutoModelForCausalLM的路径应为。
python读API数据到数据库报错requests.exceptions.ConnectionError
lin_tuer的博客
09-29 3508
写一个一个读取API接口数据的Python脚本，收集数据到Mysql数据库中 脚本同学要辛勤地日夜运行，可是，大约三天后，它，，挂了， 查看 Log 日志，发现报了如下错误requests.exceptions.ConnectionError: HTTPConnectionPool(host='xx.xx.xx.xx', port=8080): Max retries exceeded with
（Python爬虫requests报错）解决requests.exceptions.ProxyError: HTTPSConnectionPool错误
IT小猿
04-04 2468
（Python爬虫requests报错）解决requests.exceptions.ProxyError: HTTPSConnectionPool错误
爬虫笔记9——使用requests请求时报错requests.exceptions.SSLError: HTTPSConnectionPool(XXX……)
Yima_Dangxian的博客
04-01 897
使用requests请求时报错requests.exceptions.SSLError: HTTPSConnectionPool(XXX……)解决方法
AutoModelForCausalLM.from_pretrained 下载 DeepSeek-R1-Distill-Qwen-1.5B 模型时报错 KeyError: ‘qwen2‘ 的解决办法
happycell188的博客
02-19 603
这个错误的原因是 transformers 版本不对。合适的版本为：transformers >= 3.37。而 python3.7 无法支持到这样高的 transformers 版本。下载较新版本的 Python，这里推荐 3.8、3.9、3.10 版本。安装完 python 后，重新安装 transformers。运行到上述代码时报错：KeyError: ‘qwen2‘然后使用命令查看 transformers 版本。使用python本地部署DeepSeek。解决问题之后，心情美美哒~O(∩_∩)O~
python requests请求报错ConnectionError: (‘Connection aborted.‘, error(104, ‘Connection reset by peer‘))
weixin_43925447的博客
02-28 3万+
python requests请求报错 ConnectionError: (‘Connection aborted.’, error(104, ‘Connection reset by peer’)) 可能导致的有两个原因 1. 请求过于频繁, 导致请求被拒绝 解决方法: 每次请求设置一个休眠时间例如 time.sleep(1) 2. 接口有认证或者反爬机制, 识别到是python终端访问, 拒绝了访问 解决方法: 在请求头中设置 User-Agent 绕过验证 如 headers = {'User-A
已解决requests.exceptions.ConnectionError: (‘Connection aborted .’, ConnectionResetError(10054，“远程主机强迫关
努力让自己发光，对的人才能迎着光而来
12-28 6万+
已解决（Python爬虫报错，设置代理ip解决）requests.exceptions.ConnectionError: (‘Connection aborted .’, ConnectionResetError(10054，"远程主机强迫关闭了一个现有的连接。'，None，1656，None)
【错误记录】CrossEncoder 从 Hugging Face 模型库中下载模型报错 ( ConnectionError: (ProtocolError(‘Connection aborted )
最新发布
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
03-10 1492
一、报错信息 二、问题分析 1、查看本地模型缓存 2、使用 Python 代码测试网络 3、终极解决方案 - 手动下载模型 三、解决方案 1、网络问题 - 清除代理 2、问题解决后成功执行
requests.exceptions.ConnectionError: ('Connection aborted.', BadStatusLine("''",))
踌躇满志吃喝度日
07-11 1万+
使用python向sqllite数据库post数据时，出现的报错。多方查询，可能是以下原因：1.请求类型错误，http和https，检查url即可2.伪造headers，使用浏览器的headers来post数据尝试上述方法后仍然无果。随后考虑到我一次上传的数据量比较大。这是我上传的数据data = {'steam_daus': [{'timestamp': 1530673200, 'game': ...
python爬虫 关于requests.exceptions.ConnectionError 等问题
寻绾的博客
12-11 6万+
在爬虫中报如下的错误： requests.exceptions.ConnectionError: (‘Connection aborted.’, RemoteDisconnected(‘Remote end closed connection without response’,)) 发现该错误是因为如下： 1、http的连接数超过最大限制，默认的情况下连接是Keep-alive的，所以这就导致了服务器保持了太多连接而不能再新建连接。 2、ip被封 3、程序请求速度过快。 解决办法如下： 第一种方法： tr
requests.exceptions.ConnectionError: (‘Connection aborted.‘, ConnectionAbortedError(10053, ‘你的主机中的软件
qq_43825284的博客
08-09 759
记录，在写爬虫时使用了requests这个库，报错了，最后确定原因是开了代理，要爬取的目标网站不允许该地区的ip访问，关掉就好。
python requests 报错 Connection aborted ConnectionResetError RemoteDisconnected 解决方法
whatday的专栏
10-25 4万+
错误：requests.exceptions.ConnectionError: (‘Connection aborted.’, RemoteDisconnected(‘Remote end closed connection without response’,)) 解决方法 （1）随机切换User-Agent： user_agent_list = ["Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Geck
【已解决】requests.exceptions.ConnectionError: HTTPSConnectionPool(host=‘huggingface.co 2’, port=443): Ma
BetrayFree的博客
12-05 4691
而SOCKS代理则更加通用和灵活。能想到这种办法是因为在代码里能给的模型走代理是可以拉取到的，但是代码却没有拉取到，说明代码是没用走代理的，这个时候我们只需要强制让代码走指定代理就可以了，而这个就要用到linux下的全局代理工具proxychain。所以根据这样来说，我的第一种配置方法是完全可以的，在实际执行中也是可以下载的，也就是可以连接huggingface并执行下载任务。观察上面的图我们就能看出来，配置的代理路径是我们在局域网下的ip地址，所以对于代理软件来说，必须允许局域网，否则可能无法映射到。
AutoModelForCausalLM.from_pretrainedc超时
12-30
### 解决 AutoModelForCausalLM `from_pretrained` 方法中的超时问题 当遇到从预训练模型加载 `AutoModelForCausalLM` 出现超时时，可以采取多种策略来解决问题。以下是几种有效的方案： #### 使用镜像站点或代理服务器 如果网络连接不稳定或者速度较慢，考虑使用国内的 Hugging Face 镜像站或其他加速服务。这能显著减少下载时间和失败率。 ```bash git lfs install git clone https://mirrors.tuna.tsinghua.edu.cn/git/huggingface/transformers.git BAAI/AquilaChat2-34B-16K [^3] ``` #### 设置更大的超时参数 调整请求库（如 requests 或 urllib3）内部使用的默认超时设置，给定更充裕的时间完成操作。 ```python import transformers model = transformers.AutoModelForCausalLM.from_pretrained( "BAAI/AquilaChat2-34B-16K", timeout=300, # 单位秒，默认通常是几秒钟 ) [^1] ``` #### 下载并缓存模型文件到本地 提前手动获取所需的模型权重和其他资源，并将其存储在本地路径下。之后可以直接指向这些位置初始化模型实例而无需再次联网检索。 ```python # 假设已经克隆好仓库并将模型放置于指定目录 model_path = "./local_model_directory" tokenizer = transformers.AutoTokenizer.from_pretrained(model_path) model = transformers.AutoModelForCausalLM.from_pretrained(model_path) [^2] ``` #### 实施断点续传功能 对于特别大的模型包，在传输过程中容易因为各种原因中断。利用支持分片下载工具（比如 aria2c），实现部分已完成的数据保留机制，从而提高成功率。 ```bash aria2c -x 16 -s 16 https://huggingface.co/BAAI/AquilaChat2-34B-16K/resolve/main/pytorch_model.bin ```
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值