文档首页 > > 开发指南> HDFS应用开发> 开发程序> 访问OBS

访问OBS

分享
更新时间: 2020/05/15 GMT+08:00

功能简介

访问OBS过程为:

  1. 设置“fs.obs.access.key”和“fs.obs.secret.key”。

    针对MRS 1.8.10及之前的版本MRS不支持obs方式访问OBS桶,请设置“fs.s3a.access.key”和“fs.s3a.secret.key”。

  2. 由此FileSystem实例可以读取、新增和删除各类资源。

不支持追加操作。

代码样例

如下是实例化FileSystem的代码片段,详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsMain类。

/**
   * 
   * Add configuration file if the application run on the linux ,then need make
   * the path of the core-site.xml and hdfs-site.xml to in the linux client file
   * 
   */
  private void confLoad() throws IOException {
    conf = new Configuration();
    // conf file
    conf.addResource(new Path(PATH_TO_HDFS_SITE_XML));
    conf.addResource(new Path(PATH_TO_CORE_SITE_XML));
    conf.set("fs.obs.access.key","*** Provide your Access Key ***");
    conf.set("fs.obs.secret.key","*** Provide your Secret Key ***");
    }

  /**
   * build HDFS instance
   */
  private void instanceBuild() throws IOException {
    // get filesystem
 // fSystem = FileSystem.get(conf);
    fSystem =  FileSystem.get(URI.create("obs://[BuketName]"),conf);
  }

针对MRS 1.8.10及之前的版本MRS不支持obs方式访问OBS桶,请修改最后一行代码为fSystem = FileSystem.get(URI.create("s3a://[BuketName]"),conf);

分享:

    相关文档

    相关产品

文档是否有解决您的问题?

提交成功!

非常感谢您的反馈,我们会继续努力做到更好!

反馈提交失败,请稍后再试!

*必选

请至少选择或填写一项反馈信息

字符长度不能超过200

提交反馈 取消

如您有其它疑问,您也可以通过华为云社区问答频道来与我们联系探讨

智能客服提问云社区提问