高速传输不只看瞬时速度
大型科研文件需要来源清单、断点续传、目标写入和最终校验。
来源端
文件是否仍在写入、磁盘读取速度和本地网络都会影响任务。
传输路径
分片与并发需要根据文件数量和目标环境调整,不能只追求最高线程数。
目标端
对象存储、共享目录和计算节点具有不同写入与权限条件。
完整性
源端与目标端校验值一致,才表示传输结果可用于后续计算。
大型科研文件需要来源清单、断点续传、目标写入和最终校验。
文件是否仍在写入、磁盘读取速度和本地网络都会影响任务。
分片与并发需要根据文件数量和目标环境调整,不能只追求最高线程数。
对象存储、共享目录和计算节点具有不同写入与权限条件。
源端与目标端校验值一致,才表示传输结果可用于后续计算。