ValueError: BuilderConfig ‘xxdatasetname‘ not found. Available: [‘default‘]

最新推荐文章于 2025-04-10 22:11:49 发布
最新推荐文章于 2025-04-10 22:11:49 发布
阅读量676 收藏
点赞数 1
CC 4.0 BY-SA版权
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_54504469/article/details/142832423

直接修改BuilderConfig的配置

秃头IT女
关注
ValueError: BuilderConfig ‘xxxx‘ not found. Available:[xxx]
qq_37668436的博客
05-27 443
读取的Available的subset居然是从readme.md文件里面解析的…真是人才想出来的load_dataset读取数据集配置居然是从readme.md文件读取的…
Error:Configuration with name 'default' not found. 解决办法
热门推荐
张拭心的博客 shixinzhang
04-16 3万+
原文地址 在导入studio工程的时候，进行sync的时候，提示Error:Configuration with name ‘default’ not found.之前由于对gradle不熟悉，所以没有找到原因，其实也是偷懒，没有认真去排查问题，今天又遇到了，就折腾了会，把所有的配置文件都打开看，最终解决问题了，发现尽然是个低级的不能低级的问题，故记录下，警醒自己。打开settings.gradl
WikiText-2数据集
03-26
WikiText-2是一个常用的自然语言处理数据集，用于语言建模和文本生成任务。它由维基百科上的文章组成，是WikiText数据集系列中的一部分，包含了更加复杂和长篇的文章，相比于WikiText-103，规模较小。 WikiText-2数据集的主要特点包括： 文本内容：包含来自维基百科的文章文本，涵盖了多种主题和领域，内容丰富多样。 数据规模：包含超过2百万个词标记的文本数据，用于训练语言模型。 任务用途：主要用于语言建模和文本生成任务，如训练循环神经网络（RNN）或Transformer等模型。 数据结构：以句子为单位进行划分，每个句子都是一个文本序列。 数据清洗：数据集已经过清洗和标记处理，可以直接用于训练模型。 使用WikiText-2数据集进行训练可以帮助模型学习到更复杂和丰富的语言结构，提升其在语言理解和生成任务中的表现。
【预训练语言模型】使用Transformers库进行GPT2预训练
SHIDACSDN的博客
03-13 998
基于 HuggingFace的Transformer库，在Colab或Kaggle进行预训练。 本教程提供：英文数据集wikitext-2和代码数据集的预训练。 注：可以自行上传数据集进行训练 目的：跑通自回归语言模型的预训练流程 一、准备 1.1 安装依赖 !pip install -U datasets !pip install accelerate -U 注意：在Colab上训练时，最好...
datasets load_dataset_builder函数
weixin_49346755的博客
06-15 1954
函数说明 load_dataset_builder函数返回一个DatasetBuilder构造器对象，通过构造器可以生成Dataset数据集对象。参数path表示数据集的名字或者路径。可以是一个数据集的名字，比如"imdb"、“glue”；也可以是通用的产生数据集文件的脚本，比如"json"、“csv”、“parquet”、“text”；或者是在数据集目录中的脚本（.py)文件，比如“glue/glue.py”。参数name表示数据集中的子数据集，当一个数据集包含多个数据集时，就需要这个参数。比如"glue
文本生成任务
Gu_NN的博客
09-01 1637
这里写目录标题因果语言模型数据加载数据预处理微调预训练模型掩蔽语言模型数据加载数据预处理微调预训练模型机器翻译安装库数据加载数据预处理微调预训练模型生成摘要安装库数据加载数据预处理微调预训练模型 因果语言模型 因果语言模型（Causal language modeling，CLM） 是用来预测句子中的下一位置处的字符。 数据加载 数据集：维基百科 from datasets import load_dataset datasets = load_dataset('wikitext', 'wikitext
AssertionError: weight model.layers.0.self_attn.q_proj.weight does not exist
sqlora的专栏
11-08 1547
通义千问2.5-7B-Instruct-AWQ量化，但在npu上运行报上面错误，奇怪?： Exception:weight model.layers.0.self_attn.q_proj.weight does not exist AssertionError: weight model.layers.0.self_attn.q_proj.weight does not exist https://www.modelscope.cn/models/Qwen/Qwen2.5-7B-Instruc
Traceback (most recent call last): File "/data1/face.py", line 13, in <module> librispeech_samples_ds = load_dataset("/data1/wav2vec2-2-bart-base", "clean", split="validation") File "/usr/local/lib/python3.9/site-packages/datasets/load.py", line 2062, in load_dataset builder_instance = load_dataset_builder( File "/usr/local/lib/python3.9/site-packages/datasets/load.py", line 1819, in load_dataset_builder builder_instance: DatasetBuilder = builder_cls( File "/usr/local/lib/python3.9/site-packages/datasets/builder.py", line 343, in __init__ self.config, self.config_id = self._create_builder_config( File "/usr/local/lib/python3.9/site-packages/datasets/builder.py", line 570, in _create_builder_config raise ValueError( ValueError: BuilderConfig 'clean' not found. Available: ['default']
最新发布
05-13
好的，我现在需要解决用户在Hugging Face的datasets库中调用load_dataset时遇到的BuilderConfig错误，具体错误是ValueError: BuilderConfig 'clean' not found。首先，我得了解这个错误通常发生在什么情况下。 用户...
Hugging Face 解决 ValueError: Couldn‘t find cache for yelp_review_full for config ‘default‘
weixin_40378209的博客
04-11 825
记录解决问题过程
python requests库请求get类型接口报错ValueError: check_hostname requires server_hostname
执子手 吹散苍茫茫烟波
06-26 1509
一.问题描述 vscode利用requests库请求CSDNget类型接口报错ValueError: check_hostname requires server_hostname 代码如下： ''' requests的基础使用-post请求 ''' import requests # print('hello requests') ''' requests库发送get参数---fiddler抓包，CSDN查看我的粉丝 ''' get_url1 = 'https://blog.csdn.net/commu
wikitext-2-v1
06-24
亚马逊的网址下不了，因此共享一份wikitext-2-v1的标准数据包，压缩包内包含wiki.test.tokens、wiki.train.tokens、wiki.valid.tok
wikitext-2.zip
03-02
wikitext-2数据集，是torchtext中自然语言建模数据集之一，其是从Wikipedia的优质文章和标杆文章中提取得到，运行PyTorch的教程SEQUENCE-TO-SEQUENCE MODELING WITH NN.TRANSFORMER AND TORCHTEXT时，由于网络原因无法自动下载，将本压缩包解压并放置到torchtext的root目录下就可以运行。
WikiText 英语词库数据数据集
07-07
WikiText 英语词库数据（The WikiText Long Term Dependency Language Modeling Dataset）是一个包含1亿个词汇的英文词库数据，这些词汇是从Wikipedia的优质文章和标杆文章中提取得到，包括WikiText-2和WikiText-103两个版本，相比于著名的 Penn Treebank (PTB) 词库中的词汇数量，前者是其2倍，后者是其110倍。每个词汇还同时保留产生该词汇的原始文章，这尤其适合当需要长时依赖(long term dependency)自然语言建模的场景。
【免费下载】 Wikitext-2-v1 数据包下载
gitblog_09755的博客
10-12 921
Wikitext-2-v1 数据包下载 【下载地址】Wikitext-2-v1数据包下载 Wikitext-2-v1 数据包下载本仓库提供了一份Wikitext-2-v1的标准数据包，方便无法通过亚马逊网址下载的用户获取 项目地址...
AI学习手册--复现GPT1
xm415的专栏
04-10 1039
在chatGPT的帮助下，复现了GPT1。 本地要跑6个小时，放到colab上，20min跑完，还是很快的。好用。
【自己创建分词器tokenizer】（1）——WordPiece tokenizer
qq_46634315的博客
08-12 1708
【自己创建分词器】WordPiece tokenizer
找不到大语言模型开源数据集？这些请收好！
瓦罗兰特顶级C位的博客
09-24 1198
找不到大语言模型开源数据集？这些请收好！
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值