为云的内网DNS。 查询E CS 的DNS 服务器 地址 登录管理控制台。 选择“计算 > 弹性云服务器 ECS”。 进入“弹性 云服务器 ”页面。 在ECS列表中，单击目标ECS服务器名称。 在ECS服务器详情页面，单击“虚拟私有云”对应的VPC名称。 进入“虚拟私有云”页面。 在“虚拟私

查看更多 →

first”，设置值为“true”。 图1 spark.sql.warehouse.location.first配置 在左侧的导航列表中选择“JD BCS erver > 自定义”。在自定义配置项中，在参数“custom”添加配置项“spark.sql.warehouse.location.first”，设置值为“true”。

查看更多 →

默认存储在OBS上。 Ranger权限配置 集群已启用Kerberos认证（安全模式）的HetuEngine在存算分离场景和非存算分离场景下不区分Ranger赋权方式，详细操作请参见添加HetuEngine的Ranger访问权限策略。 父主题： MRS 集群服务对接OBS示例

查看更多 →

份本地数据至OBS的基本流程。 在ECS上通过内网访问OBS ECS支持通过公网和华为云内网两种方式访问OBS，为优化性能、节省开支，建议通过华为云内网访问OBS。本章节详细描述了在ECS上如何通过华为云内网访问OBS服务。 通过 CDN加速 访问OBS OBS支持通过CDN加速实现

查看更多 →

配置Hive通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后，即可在Hive客户端创建存储在OBS并行文件系统中的表。 Hive对接OBS MRS集群支持Hive服务基于Metastore方式对接OBS。 配置Hive基于MetaStore方式对接OBS：

查看更多 →

ger权限配置在Ranger中为组件操作用户赋予OBS路径的“Read”和“Write”权限。 Ranger权限配置 登录 FusionInsight Manager，选择“系统 > 权限 > 用户组 > 添加用户组”。 创建一个空角色的用户组，例如，名称为“obs_flink”，并将该用户组绑定给对应用户。

查看更多 →

Ranger权限配置 登录FusionInsight Manager，选择“系统 > 权限 > 用户组 > 添加用户组”。 创建一个空角色的用户组，例如，名称为“obs_hudi”，并将该用户组绑定给对应用户。 使用rangeradmin用户登录Ranger管理页面。 在首页中单击“EXTERNAL

查看更多 →

如果集群为安全模式，执行以下命令进行用户认证，该用户需具有OBS目录的读写权限。普通模式集群无需执行用户认证。 kinit HDFS组件操作用户 在HDFS命令行显式添加要访问的OBS文件系统。 例如： 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径

查看更多 →

如果集群为安全模式，执行以下命令进行用户认证，该用户需具有OBS目录的读写权限。普通模式集群无需执行用户认证。 kinit HDFS组件操作用户 在Yarn命令行显式添加要访问的OBS文件系统。 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径

查看更多 →

此时，可以通过在ECS上搭建Nginx反向代理服务器，来实现通过固定IP地址访问OBS。 方案架构 本实践将Nginx部署在ECS上，搭建Nginx反向代理服务器。用户对代理无感知，只需要将请求发送到反向代理服务器，然后由反向代理服务器向OBS获取数据，再返回给用户。反向代理服务器和OBS对外看做一个整体，

查看更多 →

查询ECS的DNS服务器地址 登录管理控制台。 选择“计算 > 弹性云服务器 ECS”。 进入“弹性云服务器”页面。 在ECS列表中，单击目标ECS服务器名称。 在ECS服务器详情页面，单击“虚拟私有云”对应的VPC名称。 进入“虚拟私有云”页面。 在“虚拟私有云”页面的VPC列表中，单击“子网”列的子网数量。

查看更多 →

短信接口支持内网调用吗（例如ECS服务器）？ 不支持。短信接口不支持内网调用。如果您使用的华为云弹性云服务器，请申请绑定弹性IP地址，通过公网访问短信服务。 父主题： 二次开发相关

查看更多 →

test(name string) location "obs://OBS并行文件系统名称/user/hive/warehouse/数据库名/表名"; 需要添加组件操作用户到Ranger策略中的URL策略，URL填写对象在OBS上的完整路径，权限选择Read, Write 权限，其他权限不涉及URL策略。详细操作MRS

查看更多 →

全部配置”。 在左侧的导航列表中选择“JDBCServer2x > 自定义”。在参数“spark.hdfs-site.customized.configs”中添加配置项“dfs.namenode.acls.enabled”，值为“false”。 图1 添加Spark自定义参数 在搜索框中搜索参数“spark

查看更多 →

组件业务用户 在hdfs命令行显式添加要访问的OBS文件系统。 例如： 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径 例如，执行以下命令访问“mrs-word001”并行文件系统，返回文件列表即表示访问OBS成功，如图1所示：

查看更多 →

-as-textfile 将数据导入到一个普通文本文件中，生成该文本文件后，可以在hive中通过sql语句查询出结果。 -boundary-query <statement> 边界查询，在导入前先通过SQL查询得到一个结果集，然后导入的数据就是该结果集内的数据，格式如：-boundary-query

查看更多 →

Turbo是华为云提供的按需扩展的高性能文件存储（NAS），可为云上多个弹性云服务器ECS，容器CCE&CCI，裸金属服务器BMS提供共享访问。 如何迁移？ SFS Turbo的文件系统需要挂载到弹性云服务器、容器或裸金属服务器上，对于SFS Turbo和OBS之间的数据迁移，可以理解为服务器与OBS或者容器与O

查看更多 →

配置Hudi通过IAM委托访问OBS 参考配置MRS集群通过IAM委托对接OBS完成存算分离集群配置后，即可在spark-shell中创建Hudi COW表存储到OBS中。 Hudi对接OBS 使用安装客户端用户登录客户端安装节点。 配置环境变量。 source 客户端安装目录/bigdata_env

查看更多 →

），可为云上多个弹性云服务器ECS，容器CCE&CCI，裸金属服务器BMS提供共享访问。 如何迁移？ SFS的文件系统需要挂载到弹性云服务器、容器或裸金属服务器上，对于SFS和OBS之间的数据迁移，可以理解为服务器与OBS或者容器与OBS之间的数据迁移，其中服务器或容器中的数据存放在所挂载的SFS文件系统中。

查看更多 →

<DB_HOST> 待连接节点的内网IP。 您可以在“实例管理”页面，单击实例名称，进入“基本信息”页面，在节点信息列表中获取“内网IP”。 如果您购买的实例有多个节点，选择其中任意一个节点的内网IP即可。 <DB_PORT> 待连接实例的端口，一般默认为8635，且不可修改。 您可以在“实例管

查看更多 →

<DB_HOST> 待连接实例的内网IP。 您可以在“实例管理”页面，单击实例名称，进入“基本信息”页面，在节点信息列表中获取“内网IP”。 如果您购买的实例有多个节点，选择其中任意一个节点的内网IP即可连接GeminiDB Redis实例。 <DB_PORT> 待连接实例的端口，具体请以实际端口为准。

查看更多 →