obsutil 断点续传 更多内容
  • 增量同步

    支持带容量单位配置,例如,配置1MB代表1048576字节。支持配置为auto,此时obsutil会根据源文件大小自动设置每个分段任务的段大小。 --cpd -C 否 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 每个分段上传任务会产生唯一对

    来自:帮助中心

    查看更多 →

  • 在Linux ECS上使用obsutil通过内网访问OBS

    具体方法请参见如何判断是否内网访问OBS? 下载obsutil obsutil最新版本和下载链接请参见下载obsutil。 配置obsutil 使用obsutil之前,您需要配置obsutil与OBS的对接信息,包括OBS终端节点(Endpoint)和访问密钥(AK和SK)。 具体操作请参见obsutil指南的初始化配置章节。

    来自:帮助中心

    查看更多 →

  • 下载数据

    支持带容量单位配置,例如,配置1MB代表1048576字节。支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 --cpd -C 否 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 每个分段下载任务会产生唯一对

    来自:帮助中心

    查看更多 →

  • 复制对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段复制任务会

    来自:帮助中心

    查看更多 →

  • 在ModelArts Standard使用run.sh脚本实现OBS和训练容器间的数据传输

    com/obsutil/current/obsutil_linux_amd64.tar.gz #tar -xzvf obsutil_linux_amd64.tar.gz && mv obsutil_linux_amd64_*/ utils #alias obsutil='/opt/utils/obsutil' #obsutil

    来自:帮助中心

    查看更多 →

  • 快速使用

    本章节以Linux操作系统为例,介绍如何通过obsutil在OBS上完成基本的数据存取操作,具体操作流程如图1所示。 图1 obsutil快速使用流程 前提条件 已获取到obsutil工具,并完成了初始化配置。 已进入obsutil工具所在目录。 操作步骤 运行./obsutil mb obs://bucket-test

    来自:帮助中心

    查看更多 →

  • run.sh脚本测试ModelArts训练整体流程

    com/obsutil/current/obsutil_linux_amd64.tar.gz #tar -xzvf obsutil_linux_amd64.tar.gz && mv obsutil_linux_amd64_*/ utils #alias obsutil='/opt/utils/obsutil' #obsutil

    来自:帮助中心

    查看更多 →

  • 增量同步复制对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段复制任务会

    来自:帮助中心

    查看更多 →

  • 主机迁移服务是否支持断点续传?

    主机迁移服务是否支持断点续传? SMS支持断点续传。对于不同的迁移类型,断点续传的支持情况有所不同: 如果因网络问题或其他原因导致源端与SMS控制台断开连接,无需担心数据丢失或迁移失败。只需待问题解决后,在SMS控制台单击“开始”按钮,即可继续未完成的迁移任务。问题原因和处理方法

    来自:帮助中心

    查看更多 →

  • 获取卫星遥感数据

    下载和安装obsutil、初始化配置obsutil。 进入obsutil工具所在目录,运行./obsutil cp obs://xxx命令,将桶中的对象下载至本地。 obsutil使用详情参见通过obsutil下载对象。 复制数据到指定桶 登录MapDS控制台。 在左侧导航栏选中“卫星遥感数据”,进入订单列表页面。

    来自:帮助中心

    查看更多 →

  • 初始化配置

    初始化配置 使用obsutil之前,您需要配置obsutil与OBS的对接信息,包括OBS终端节点地址(Endpoint)和访问密钥(AK和SK)。获得OBS的认证后,才能使用obsutil执行OBS桶和对象的相关操作。 前提条件 已下载obsutil软件包,具体请参见下载和安装obsutil。

    来自:帮助中心

    查看更多 →

  • 指定obsutil上传下载时进行限速

    指定obsutil上传下载时进行限速 obsutil支持通过在配置文件.obsutilconfig中配置rateLimitThreshold参数实现对上传/下载操作进行限速,参数具体描述可参考配置参数说明;默认不指定即不进行限速,此时具体的上传/下载速度取决于用户侧的实际网络带宽

    来自:帮助中心

    查看更多 →

  • 在Linux ECS上使用obsutil通过内网访问OBS

    ARM 64位的obsutil安装包,如果没有前缀“k”则为x86架构,此时您应该下载Linux AMD 64位(Linux x86 64位)的obsutil安装包。更多关于 云服务器 的规格信息请参见实例类型。 obsutil最新版本和下载链接请参见下载obsutil。 配置obsutil

    来自:帮助中心

    查看更多 →

  • 归档日志文件

    files to [D:\obsutil\obsutil_log.zip] 参数说明 参数 约束 描述 file_or_folder_url 可选 日志归档路径,规则如下: 如果该值为空,则以obsutil_log.zip为归档文件名,将日志归档到obsutil命令同级目录下; 如果

    来自:帮助中心

    查看更多 →

  • 上传对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源文件大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段上传任务会

    来自:帮助中心

    查看更多 →

  • 检查并更新版本

    检查并更新版本 功能说明 检查并更新obsutil版本。 命令结构 Windows操作系统 obsutil update [-f] [-retrytimes=xxx] macOS/Linux操作系统 ./obsutil update [-f] [-retrytimes=xxx] 运行示例

    来自:帮助中心

    查看更多 →

  • 利用crontab配置定时任务

    /var/log/cron,查看最近的定时任务执行记录。 执行命令:ps -ef | grep obsutil,查看obsutil进程是否正在执行。 如何强制终止正执行的定时任务? 执行命令:ps -ef | grep obsutil,查看obsutil的进程信息。 执行命令:kill -9 PID,强制终止该进程(PID为查询到的进程号)。

    来自:帮助中心

    查看更多 →

  • 查看版本号

    查看工具当前的版本号。 命令结构 Windows操作系统 obsutil version macOS/Linux操作系统 ./obsutil version 运行示例 以Windows操作系统为例。运行示例如下: obsutil version obsutil version:5.1.9, obssdk

    来自:帮助中心

    查看更多 →

  • 脚本简介

    上传文件/文件夹、下载文件/文件夹、删除文件/文件夹等。对于熟悉命令行程序的用户,obsutil更加适合执行批量处理和自动化任务。 有关obsutil的更多介绍,请参见《工具指南》中的obsutil章节。 父主题: 简介

    来自:帮助中心

    查看更多 →

  • 如何查看桶内的文件夹大小?

    如何查看桶内的文件夹大小? 可以使用obsutil列举对象命令,指定前缀为需要查看的文件夹进行列举。 以Linux操作系统为例,运行./obsutil ls obs://bucket-test/test/ -du -limit=0命令,查询桶bucket-test下test文件夹的大小。

    来自:帮助中心

    查看更多 →

  • 删除断点记录文件

    Windows操作系统 obsutil clear [checkpoint_dir] [-u] [-d] [-c] [-config=xxx] [-e=xxx] [-i=xxx] [-k=xxx] [-t=xxx] macOS/Linux操作系统 ./obsutil clear [checkpoint_dir]

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了