数据集¶
Torchvision 在 torchvision.datasets
模块中提供了许多内置数据集,以及用于构建自定义数据集的实用类。
内置数据集¶
所有数据集都是 torch.utils.data.Dataset
的子类,即它们实现了 __getitem__
和 __len__
方法。因此,它们都可以被传递给 torch.utils.data.DataLoader
,后者可以使用 torch.multiprocessing
工作进程并行加载多个样本。例如
imagenet_data = torchvision.datasets.ImageNet('path/to/imagenet_root/')
data_loader = torch.utils.data.DataLoader(imagenet_data,
batch_size=4,
shuffle=True,
num_workers=args.nThreads)
所有数据集的 API 都几乎相同。它们都具有两个通用参数:transform
和 target_transform
,分别用于转换输入和目标。您也可以使用提供的 基类 来创建自己的数据集。
警告
当使用 download=True
创建数据集对象时,文件将首先在根目录中下载和提取。此下载逻辑不适用于多进程安全,因此如果在分布式环境中运行,可能会导致冲突/竞态条件。在分布式模式下,我们建议在设置分布式模式之前创建一个虚拟数据集对象来触发下载逻辑。
图像分类¶
|
Caltech 101 数据集。 |
|
Caltech 256 数据集。 |
|
大规模 CelebFaces 属性 (CelebA) 数据集。 |
|
CIFAR10 数据集。 |
|
CIFAR100 数据集。 |
|
来自 OpenAI 的 Country211 数据集。 |
|
|
|
EMNIST 数据集。 |
|
RGB 版本的 EuroSAT 数据集。 |
|
一个返回随机生成图像并将其作为 PIL 图像的虚假数据集 |
|
Fashion-MNIST 数据集。 |
|
FER2013 数据集。 |
|
FGVC Aircraft 数据集。 |
|
Flickr8k Entities 数据集。 |
|
Flickr30k Entities 数据集。 |
|
牛津 102 花卉数据集。 |
|
|
|
德国交通标志识别基准 (GTSRB) 数据集。 |
|
iNaturalist 数据集。 |
|
ImageNet 2012 分类数据集。 |
|
Imagenette 图像分类数据集。 |
|
Kuzushiji-MNIST 数据集。 |
|
LFW 数据集。 |
|
LSUN 数据集。 |
|
MNIST 数据集。 |
|
Omniglot 数据集。 |
|
|
|
Places365 分类数据集。 |
|
|
|
QMNIST 数据集。 |
|
|
|
SEMEION 数据集。 |
|
SBU 带字幕照片 数据集。 |
|
斯坦福汽车数据集 |
|
STL10 数据集。 |
|
|
|
SVHN 数据集。 |
|
USPS 数据集。 |
图像检测或分割¶
|
MS Coco Detection 数据集。 |
|
大规模 CelebFaces 属性 (CelebA) 数据集。 |
|
Cityscapes 数据集。 |
|
KITTI 数据集。 |
|
|
|
|
|
Pascal VOC 分割数据集。 |
|
Pascal VOC 检测数据集。 |
|
WIDERFace 数据集。 |
光流¶
|
用于光流的 FlyingChairs 数据集。 |
|
用于光流的 FlyingThings3D 数据集。 |
|
用于光流的 HD1K 数据集。 |
|
用于光流的 KITTI 数据集 (2015)。 |
|
用于光流的 Sintel 数据集。 |
立体匹配¶
|
Carla 模拟器数据,链接在 CREStereo github 仓库。 |
|
来自 2012 立体评估基准 的 KITTI 数据集。 |
|
来自 2015 立体评估基准 的 KITTI 数据集。 |
|
用于训练 CREStereo 架构的合成数据集。 |
|
FallingThings 数据集。 |
|
场景流数据集的接口。 |
|
|
|
InStereo2k 数据集。 |
|
ETH3D 低分辨率双视图数据集。 |
|
Middlebury 数据集 (2014 版本) 的公开可用场景。 |
图像对¶
|
LFW 数据集。 |
|
多视图立体匹配 数据集。 |
图像字幕¶
|
MS Coco Captions 数据集。 |
视频分类¶
|
HMDB51 数据集。 |
|
通用 Kinetics 数据集。 |
|
UCF101 数据集。 |
视频预测¶
|
MovingMNIST 数据集。 |
自定义数据集的基类¶
|
一个通用数据加载器。 |
|
一个通用数据加载器,默认情况下图像按以下方式排列:. |
|
用于创建与 torchvision 兼容的数据集的基类。 |
Transforms v2¶
|
包装一个 |