obsutil 文件夹 更多内容
  • OBS Browser+和obsutil等工具相关

    OBS Browser+和obsutil等工具相关 使用obsutil下载文件夹前期速度正常,下载到90%后速度变慢 使用obsutil下载文件到99%后失败 obsutil上传下载速度慢 obsutil cp命令如何开启增量上传、下载和复制? 并行文件系统是否支持挂载到Windows 服务器

    来自:帮助中心

    查看更多 →

  • 结果清单

    4。 当涉及多文件/文件夹任务时,如需确认失败任务的具体错误信息,可参考结果清单文件夹下的失败结果清单文件及日志路径下的日志文件; 为了避免结果清单文件过多影响批量操作的效率,建议定期对.obsutil_output文件夹下的结果清单文件归档备份至其他文件夹下; 父主题: 问题定位

    来自:帮助中心

    查看更多 →

  • 断点续传

    附加参数,多文件夹上传时可选 上传文件夹时候,文件夹本身不会作为一个对象上传,在有很多空文件夹场景时候可以避免无用文件夹上传到对象存储桶中;文件夹下有文件时候,文件夹下文件依然会上传并保持原有路径格式,不受影响。 timeRange 附加参数,多文件/文件夹上传或上传文件夹时可选 上

    来自:帮助中心

    查看更多 →

  • 上传对象

    附加参数,多文件夹上传时可选 上传文件夹时候,文件夹本身不会作为一个对象上传,在有很多空文件夹场景时候可以避免无用文件夹上传到对象存储桶中;文件夹下有文件时候,文件夹下文件依然会上传并保持原有路径格式,不受影响。 timeRange 附加参数,多文件/文件夹上传或上传文件夹时可选 上

    来自:帮助中心

    查看更多 →

  • 下载和安装obsutil

    在软件包所在目录,执行以下解压命令。 tar -xzvf obsutil_linux_amd64.tar.gz 进入obsutil所在目录,执行以下命令,为obsutil增加可执行权限。 chmod 755 obsutil 您必须为obsutil增加可执行权限,否则会在查询obsutil版本号时出现No such

    来自:帮助中心

    查看更多 →

  • 上传数据和算法至SFS(首次使用时需要)

    # ./obsutil cp ${数据集所在的obs文件夹路径} ${SFS文件夹路径} -f -r # 例如 ./obsutil cp obs://your_bucket/coco/ /mnt/sfs_turbo/ -f -r /mnt/sfs_turbo/coco文件夹内目录结构如下:

    来自:帮助中心

    查看更多 →

  • 利用crontab配置定时任务

    /var/log/cron,查看最近的定时任务执行记录。 执行命令:ps -ef | grep obsutil,查看obsutil进程是否正在执行。 如何强制终止正执行的定时任务? 执行命令:ps -ef | grep obsutil,查看obsutil的进程信息。 执行命令:kill -9 PID,强制终止该进程(PID为查询到的进程号)。

    来自:帮助中心

    查看更多 →

  • 删除OBS桶中的对象

    按指定的对象名前缀批量删除多版本对象和多版本删除标记。 o 附加参数,可选 生成结果清单文件的文件夹,命令执行完成后,会在该文件夹下生成结果清单文件(可能包含成功结果和失败结果两个文件),默认为运行obsutil命令的用户目录的子文件夹.obsutil_output。 说明: 结果清单文件命名规则:rm_{succeed

    来自:帮助中心

    查看更多 →

  • 复制示例

    obs://bucket-dest/test/test1.txt 复制bucket-src的src2文件夹下的所有文件和文件夹(包括src2文件夹本身)至bucket-dest桶中,且复制过程中不进行询问操作,复制命令如下: ./obsutil cp obs://bucket-src/src2 obs://bucket-dest

    来自:帮助中心

    查看更多 →

  • 流式上传(PUT上传)

    附加参数,多文件夹上传时可选 上传文件夹时候,文件夹本身不会作为一个对象上传,在有很多空文件夹场景时候可以避免无用文件夹上传到对象存储桶中;文件夹下有文件时候,文件夹下文件依然会上传并保持原有路径格式,不受影响。 timeRange 附加参数,多文件/文件夹上传或上传文件夹时可选 上

    来自:帮助中心

    查看更多 →

  • 使用obsutil下载文件夹前期速度正常,下载到90%后速度变慢

    使用obsutil下载文件夹前期速度正常,下载到90%后速度变慢 出现此种现象有两种场景。 场景一:文件夹中存在部分大对象和大量小对象。对于大对象,下载速度很快;对于大量小对象,下载速度主要受TPS影响。如果下载到90%后都是小对象,此时下载速度一定程度上可能会降低。 场景二:文

    来自:帮助中心

    查看更多 →

  • 上传算法至SFS

    $DIS_DATA_PATH && wget $OBSUTIL_PATH && tar -xzvf obsutil_linux_amd64.tar.gz && $DIS_DATA_PATH/obsutil_linux_amd64*/obsutil share-cp $SRC_DATA_PATH

    来自:帮助中心

    查看更多 →

  • Windows操作系统下,下载对象时发现本地和云上对象数量不一致

    是云上TEST/FOO.txt,而非test/foo.txt,这个因下载成功顺序而导致结果不同。 针对文件夹,以首次文件夹名下载成功为准,比如TEST/优先 test/下载成功,则最后本地文件夹只有TEST\。 针对文件,文件名以首次文件名下载成功为准,文件内容以最后一次下载成功为准,比如云上的对象test/foo

    来自:帮助中心

    查看更多 →

  • 快速使用

    本章节以Linux操作系统为例,介绍如何通过obsutil在OBS上完成基本的数据存取操作,具体操作流程如图1所示。 图1 obsutil快速使用流程 前提条件 已获取到obsutil工具,并完成了初始化配置。 已进入obsutil工具所在目录。 操作步骤 运行./obsutil mb obs://bucket-test

    来自:帮助中心

    查看更多 →

  • 表单上传(POST上传)

    附加参数,多文件夹上传时可选 上传文件夹时候,文件夹本身不会作为一个对象上传,在有很多空文件夹场景时候可以避免无用文件夹上传到对象存储桶中;文件夹下有文件时候,文件夹下文件依然会上传并保持原有路径格式,不受影响。 timeRange 附加参数,多文件/文件夹上传或上传文件夹时可选 上

    来自:帮助中心

    查看更多 →

  • 用户指南

    附加参数,多文件夹上传时可选 上传文件夹时候,文件夹本身不会作为一个对象上传,在有很多空文件夹场景时候可以避免无用文件夹上传到对象存储桶中;文件夹下有文件时候,文件夹下文件依然会上传并保持原有路径格式,不受影响。 timeRange 附加参数,多文件/文件夹上传或上传文件夹时可选 上

    来自:帮助中心

    查看更多 →

  • 下载对象

    12版本及以上支持该参数。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段下载任务会产生唯一对应的断点记录文件并保存至该文件夹的down子文件夹下,分段任务执行成功后,对应的断点记录文件会被自

    来自:帮助中心

    查看更多 →

  • 使用obsutil下载文件到99%后失败

    使用obsutil下载文件到99%后失败 出现该问题的主要原因: 网络波动导致下载失败。 磁盘IO卡顿导致缓存文件到目标文件夹失败。 解决方法: 重新执行下载命令。 obsutil在下载的时候默认开启断点续传,此时只要重新执行之前的下载命令就可以将之前下载失败的对象采用续传的方式重新下载到本地。

    来自:帮助中心

    查看更多 →

  • 命令行工具概述

    --recursive -r 否 递归上传文件夹中所有的文件和子文件夹,上传文件夹时必选。 --force -f 否 强制操作,不进行询问提示,上传文件夹时可选。 --flat -l 否 上传文件夹时,只上传该文件夹下的所有内容,上传文件夹时可选。 --update -u 否 增量

    来自:帮助中心

    查看更多 →

  • 授权码下载对象

    支持带容量单位配置,例如,配置1MB代表1048576字节; 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段下载任务会

    来自:帮助中心

    查看更多 →

  • 删除分段上传任务

    工具会保证该值至少为1。 o 附加参数,可选 生成结果清单文件的文件夹,命令执行完成后,会在该文件夹下生成结果清单文件(可能包含成功结果和失败结果两个文件),默认为运行obsutil命令的用户目录的子文件夹.obsutil_output。 说明: 结果清单文件命名规则:abort_{succeed

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了