准备分布式培训数据

粒子暴 (推荐)

暴风雨bob下载地址开源数据存取库,可直接加载以Apache Parquet格式存储的数据数据bricks和Apachespark用户方便使用,因为Parquet推荐数据格式下条说明使用案例

TFRecord

TFRecord格式可作为分布式深学习数据源TFRecord格式简单面向记录二元格式,多TensorFlow应用程序用于培训数据

tf.data.TFRecordDatasetTensorFlow数据集由TFRecords文件记录组成更多细节使用TFRecord数据见TensorFlow指南吞存TFRecord数据.

以下文章描述并展示推荐方式将数据保存到TFRecord文件并加载TFRecord文件