Advertisement

基于TensorFlow官方整理的Imagenet数据集已转为TFRecord格式

  • 5星
  •     浏览量: 0
  •     大小:None
  •      文件类型:None


简介:
本项目基于TensorFlow官方资源,提供了一个经过整理的ImageNet数据集,并将其转换为了TFRecord格式,便于深度学习模型训练使用。 根据TensorFlow官方整理的Imagenet数据集已经转换成TFRecord格式。如果自行整理,则需要大约500G以上的硬盘空间,并且耗时约两天。完成数据整理后,已进行训练测试,请放心使用。 下载链接可在GitHub上的TensorFlow模型库中找到(具体路径为:https://github.com/tensorflow/models/tree/master/research/slim#an-automated-script-for-processing-imagenet-data),下载文件大约需要132G的硬盘空间,并包含1152个文件。

全部评论 (0)

还没有任何评论哟~
客服
客服
  • TensorFlowImagenetTFRecord
    优质
    本项目基于TensorFlow官方资源,提供了一个经过整理的ImageNet数据集,并将其转换为了TFRecord格式,便于深度学习模型训练使用。 根据TensorFlow官方整理的Imagenet数据集已经转换成TFRecord格式。如果自行整理,则需要大约500G以上的硬盘空间,并且耗时约两天。完成数据整理后,已进行训练测试,请放心使用。 下载链接可在GitHub上的TensorFlow模型库中找到(具体路径为:https://github.com/tensorflow/models/tree/master/research/slim#an-automated-script-for-processing-imagenet-data),下载文件大约需要132G的硬盘空间,并包含1152个文件。
  • TIMIT TRAIN WAV
    优质
    本数据集包含了从TIMIT语料库转换而来的WAV音频文件,旨在提供高质量、标准化的声音样本用于语音识别和声学模型训练。 TIMIT TRAIN数据集DR2已转换为WAV格式,并包含了每条语音的标注。
  • TIMIT TRAIN WAV
    优质
    该数据集包含TIMIT语料库的音频文件,现已全部转换为WAV格式,便于语音识别和合成技术的研究与应用。 TIMIT TRAIN数据集DR2已转换为WAV格式,并包含了每条语音的标注。
  • CUHK03Market1501
    优质
    CUHK03数据集现已转化为与Market1501兼容的格式,提供行人再识别研究更为统一的数据支持和实验条件。 行人ReID数据集按照Market1501格式整理后,已经将.mat文件转换为图像。
  • Doccano-Transformer:工具,用将Doccano通用
    优质
    Doccano-Transformer是一款由官方提供的强大工具,专门设计用来便捷地将Doccano格式的数据转换成各种通用数据集格式,极大地方便了数据处理和机器学习模型训练的过程。 Doccano Transformer 是一个工具,帮助您将导出的数据集转换为适合机器学习库使用的格式。它支持以下格式: 安装方法: 要使用 Doccano Transformer,请通过 pip 安装该软件包: ``` pip install doccano-transformer ``` 示例:命名实体识别 支持的格式包括如下例子: ```python from doccano_transformer.datasets import NERDataset from doccano_transformer.utils import read_jsonl dataset = read_jsonl(filepath=example.jsonl, dataset=NERDataset, encoding=utf-8) ```
  • NILM和REDDH5
    优质
    本研究将NILM与REDD两个重要能耗数据分析的数据集成功转换为H5格式,便于高效管理和分析大量智能电表数据。 NILM和REDD数据集已经转换为h5格式,可以直接使用nilmtk读入。
  • PASCAL VOC 2007NWPU VHR-10
    优质
    该数据集是经过处理后符合PASCAL VOC 2007标准的NWPU VHR-10数据集,包含多种复杂背景下的目标图像,适用于目标检测任务。 5个积分就行了。
  • 将txtxml,并将yolov5COCO
    优质
    本项目提供了一种高效的方法,用于将txt格式的数据集转换成xml格式,同时支持将YOLOv5数据集转化为COCO数据集,便于多平台训练使用。 该脚本用于将YOLOv5专用的txt数据集格式转换为xml数据集格式。通过调整脚本中的相关设置,可以将其改为适用于COCO或其他类型的数据集格式。
  • 将LabelMeCOCO标准
    优质
    本文介绍了一种有效方法,用于将LabelMe格式的数据转换成COCO数据集的标准格式,以促进跨平台机器学习模型训练和评估的一致性和兼容性。 在计算机视觉领域里,数据集是训练及评估模型的关键要素之一。Labelme是一个流行的开源工具,用于交互式地标注图像;而COCO(Common Objects in Context)则是广泛使用的数据集格式,适合多种任务如物体检测、分割等应用。 本段落将介绍如何把由Labelme生成的标注数据转换成符合COCO标准的数据集格式。Labelme产生的JSON文件中包含以下信息: 1. `version`: JSON文件版本号。 2. `flags`: 用于未来扩展或保留字段,目前可能未定义或为空。 3. `shapes`: 包含对象类别的列表(`label`),以及每个物体边缘的多边形点(`points`)和形状类型(`shape_type`)。通常`shape_type`为“polygon”。 4. `imagePath` 和 `imageData`: 提供原始图像路径及数据,方便还原图像内容。 5. `imageHeight`, `imageWidth`: 图像的高度与宽度。 COCO的数据集格式包括以下三种标注类型: 1. Object instances:用于物体检测任务; 2. Object keypoints: 适用于人体姿态估计的任务; 3. Image captions: 应用于生成描述图片的文本说明。 COCO JSON结构主要包括如下基本部分: - `images`: 描述图像信息,如高度、宽度、ID及文件名。 - `categories`: 定义类别,包括父类`supercategory`, 类别ID和子类别名称。 - `annotations`: 包含对象的具体标注内容,例如多边形坐标(`segmentation`)、是否为拥挤区域的标识符(`iscrowd`)、图像ID (`image_id`)、边界框信息(`bbox`)、面积大小(`area`)以及类别ID (category_id)。 将Labelme格式转换成COCO格式通常包括以下步骤: 1. 读取Labelme生成的JSON文件; 2. 解析多边形点并创建符合COCO标准的 `segmentation` 数组; 3. 根据标签信息建立对应的类别(categories); 4. 对于每个形状,创建一个标注记录(annotation),包含如图像ID、边界框坐标、面积和分类ID等必要信息。 5. 整合上述内容形成完整的COCO JSON数据结构; 6. 将结果保存为新的JSON文件。 在Python环境中进行转换时,可以利用`argparse`处理命令行参数, `json`库来操作JSON格式的数据,并使用如`matplotlib`这样的工具辅助图像数据的处理。一个典型的转换脚本会同时处理多个Labelme JSON文件并将所有标注信息整合到统一的COCO数据集中。 在进行转换时,需要注意Labelme中的类别标签需映射为COCO标准下的类别ID;此外,在Labelme中通常不使用`iscrowd`字段来标识复杂群体区域,因此该值可以设定为0表示单个对象。通过这样的方式将自定义标注数据转化为广受支持的COCO格式后,就能更方便地利用已有的工具和API进行模型训练与评估工作。编写转换脚本有助于高效管理和使用这些标注资源,并确保输入高质量的数据以供深度学习模型训练之用。