快速上传数据集方法

大批量训练数据上传没有万能解药，最直接的提速办法是“本地压缩+并行分片+专线传输”三板斧；若预算有限，则优先改造传输工具和拓扑结构，上传慢的瓶颈通常不在你的带宽很多团队把训练数据上传慢归咎于宽带不够,但实际排查中，绝大多数瓶颈出现在小文件过多、协议效率低、以及单线程传输上，你想想,几十万个几百KB的标注图片，和……