obsutil checkpointdir 更多内容
  • 增量同步上传对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源文件大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段上传任务会

    来自:帮助中心

    查看更多 →

  • 将obsutil设为系统内置命令

    /obsutil/obsutil 运行rm -rf PATH删除obsutil命令: rm -rf /obsutil/obsutil PATH为obsutil命令的路径,上例中为:/obsutil/obsutil。 恢复系统环境变量:删除/etc/profile文件中设置的obsutil工具的PATH。

    来自:帮助中心

    查看更多 →

  • 恢复失败的下载任务

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段下载任务会

    来自:帮助中心

    查看更多 →

  • 复制对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段复制任务会

    来自:帮助中心

    查看更多 →

  • obsutil性能调优最佳实践

    obsutil性能调优最佳实践 obsutil对大于50MB的文件/对象默认采用分段方式进行上传、下载和复制,与分段任务相关的参数在.obsutilconfig配置文件中,如表1所示。 表1 多段参数 参数 描述 defaultBigfileThreshold 开启分段任务的阈值

    来自:帮助中心

    查看更多 →

  • obsutil cp命令如何开启增量上传/下载/复制?

    obsutil cp命令如何开启增量上传/下载/复制? 在执行obsutil cp命令进行上传/下载时,可以通过增加“-u”参数开启增量功能。 该参数的含义为:上传/下载/复制每个对象时都会对比源路径和目标路径,仅在目标对象不存在,或者对象大小不一致,或者目标对象的最后修改时间早

    来自:帮助中心

    查看更多 →

  • 增量同步下载对象

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段下载任务会

    来自:帮助中心

    查看更多 →

  • 利用obsutil帮助命令查找工具功能

    利用obsutil帮助命令查找工具功能 obsutil提供了帮助命令(help命令)用于查看各命令的帮助文档。以查询创建桶命令的帮助文档为例,详细的步骤如下: 使用obsutil help命令查看当前支持的所有命令列表。 根据命令列表中的文档说明,找到需要查看的命令缩写,例如创建桶命令缩写为mb。

    来自:帮助中心

    查看更多 →

  • 恢复失败的上传任务

    支持带容量单位配置,例如,配置1MB代表1048576字节。 支持配置为auto,此时obsutil会根据源文件大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段上传任务会

    来自:帮助中心

    查看更多 →

  • 恢复失败的复制任务

    支持带容量单位配置,例如,配置1MB代表1048576字节; 支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 cpd 附加参数,可选 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 说明: 每个分段复制任务会

    来自:帮助中心

    查看更多 →

  • 为obsutil配置自动获取访问密钥

    obsutil配置自动获取访问密钥 特性说明 除了从配置文件.obsutilconfig中获取访问密钥(AK/SK)外,obsutil还提供链式自动获取访问密钥功能,可以从系统环境变量获取访问密钥,或者通过E CS 接口获取临时访问密钥。 启用链式获取访问密钥功能后,obsutil会依次从

    来自:帮助中心

    查看更多 →

  • Spark Streaming对接Kafka0-10样例程序(Scala)

    println("Usage: DstreamKafkaWriterTest <checkPointDir> <brokers> <topic>") System.exit(1) } val Array(checkPointDir, brokers, topic) = args

    来自:帮助中心

    查看更多 →

  • Spark Streaming对接Kafka0-10样例程序(Scala)

    println("Usage: DstreamKafkaWriterTest <checkPointDir> <brokers> <topic>") System.exit(1) } val Array(checkPointDir, brokers, topic) = args

    来自:帮助中心

    查看更多 →

  • Spark Streaming对接Kafka0-10样例程序(Scala)

    println("Usage: DstreamKafkaWriterTest <checkPointDir> <brokers> <topic>") System.exit(1) } val Array(checkPointDir, brokers, topic) = args

    来自:帮助中心

    查看更多 →

  • Spark Streaming对接Kafka0-10样例程序(Scala)

    println("Usage: DstreamKafkaWriterTest <checkPointDir> <brokers> <topic>") System.exit(1) } val Array(checkPointDir, brokers, topic) = args

    来自:帮助中心

    查看更多 →

  • Scala样例代码

    println("Usage: DstreamKafkaWriterTest <checkPointDir> <brokers> <topic>") System.exit(1) } val Array(checkPointDir, brokers, topic) = args

    来自:帮助中心

    查看更多 →

  • 增量同步

    支持带容量单位配置,例如,配置1MB代表1048576字节。支持配置为auto,此时obsutil会根据源文件大小自动设置每个分段任务的段大小。 --cpd -C 否 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。 每个分段上传任务会产生唯一对

    来自:帮助中心

    查看更多 →

  • Scala样例代码

    设置Streaming的CheckPoint目录 if (!"nocp".equals(checkPointDir)) { ssc.checkpoint(checkPointDir) } val columnFamily = "cf" val

    来自:帮助中心

    查看更多 →

  • obsutil上传下载速度慢

    obsutil上传下载速度慢 OBS不限速,obsutil也不会对客户数据传输进行限流。 采用obsutil进行文件上传下载,如果通过公网,受公网带宽限制;如果通过内网,受网卡、磁盘IO及是否有其它进程抢占资源的限制。 如果出现上传下载速度慢的问题,可参考以下方法排查处理: 检查网络。

    来自:帮助中心

    查看更多 →

  • Java样例代码

    println("Usage: DstreamKafkaWriter <checkPointDir> <brokers> <topic>"); System.exit(1); } String checkPointDir = args[0]; String brokers

    来自:帮助中心

    查看更多 →

  • 使用obsutil实现客户端跨区域复制

    下: 使用obsutil config命令配置源桶对应账号的AK、SK及endpoint信息: Windows操作系统 obsutil config -i=src_ak -k=src_sk -e=src_endpoint -crr Linux操作系统 ./obsutil config

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了