其他分享
首页 > 其他分享> > ConnectionError: Couldn‘t reach https://raw.githubuserc//huggingface/datasets/1.15.1/datasets/squad/

ConnectionError: Couldn‘t reach https://raw.githubuserc//huggingface/datasets/1.15.1/datasets/squad/

作者：互联网

出错的地方

data_args.dataset_name = 'squad'

raw_datasets = load_dataset(`data_args.dataset_name`)

报错：

ConnectionError: Couldn‘t reach https://raw.githubuserc//huggingface/datasets/1.15.1/datasets/squad/squad.py

解决方案

把文件直接下载到本地
下载地址 https://codeload.github.com/huggingface/datasets/zip/refs/tags/1.15.1
在这里插入图片描述
在这里插入图片描述
这个文件是处理原始数据的函数，进入函数需要修改一下你存放原始数据的地址。


_URL = "../../../data/squad/"
_URLS = {
    "train": _URL + "train-v1.1.json",
    "dev": _URL + "dev-v1.1.json",
}

在这里插入图片描述
当然你要修改load_dataset的地址，改成你的本地地址

raw_datasets = load_dataset('tasks/qa/'+data_args.dataset_name)

运行可以看到这些数据已经被加载到本地了
在这里插入图片描述

标签：load,datasets,githubuserc,ConnectionError,dataset,raw,squad,data
来源： https://blog.csdn.net/qq_38178543/article/details/122385135