安橙的博客
  • 博文
  • 标签
  • 搜索

DataLoader

  • Day 25 · 数据 Pipeline

    2026-06-20AIPyTorchDataLoader

    进入训练数据通路:理解 WebDataset、Mosaic Streaming 与自定义 IterableDataset 的设计取舍;调优 DataLoader 的 num_workers、prefetch_factor、pin_memory、persistent_workers 与 shared memory,定位 GPU starvation。

© 2026 安橙的博客