#webdataset のAIニュース

1ペタバイトのデータセットで機械学習する / WebDataset入門

大規模データセットでの機械学習では、ネットワーク帯域やディスクI/Oがボトルネックとなる。本記事では、学習側での効率的なデータ処理方法について解説する。