将客户端文件复制到服务器上_配置Windows通过EIP访问集群Spark-华为云

配置Windows通过EIP访问集群Spark

、9866端口。在Manager界面选择“集群 > 服务 > Spark2x > 更多 > 下载客户端”，将客户端中的core-site.xml和hdfs-site.xml复制到样例工程的conf目录下。对hdfs-site.xml添加如下内容： <property>

来自：帮助中心

查看更多 →
数据拷贝

当源集群与目标集群处于不同Region时，用Distcp工具将源集群数据拷贝到OBS，借助OBS跨区域复制功能（请参见跨区域复制）将数据复制到对应目的集群所在Region的OBS，然后通过Distcp工具将OBS数据拷贝到目的集群的HDFS上。由于执行Distcp无法为OBS上的文件设置权限、属主/组等信息，因

来自：帮助中心

查看更多 →
配置HivePython样例工程

客户端机器必须安装有setuptools，其版本不低于5.0，最高不能超过36.8.0。具体软件，请到对应的官方网站获取。 https://pypi.org/project/setuptools/#files 将下载的setuptools压缩文件复制到客户端机器上，解压后

来自：帮助中心

查看更多 →
配置HivePython样例工程

客户端机器必须安装有setuptools，其版本不低于5.0，最高不能超过36.8.0。具体软件，请到对应的官方网站获取。 https://pypi.org/project/setuptools/#files 将下载的setuptools压缩文件复制到客户端机器上，解压后

来自：帮助中心

查看更多 →
Spark Structured Streaming样例程序开发思路

conf文件路径需要修改为该文件所在客户端服务器的实际路径。例如：“/opt/female/user.keytab”，“/opt/female/krb5.conf”。将打包生成的jar包上传到Spark客户端所在服务器的任意目录（例如“ /opt” ）下。将commons-pool2-xxx.ja

来自：帮助中心

查看更多 →
Spark Structured Streaming样例程序开发思路

打包项目将user.keytab、krb5.conf 两个文件上传客户端所在服务器上。通过IDEA自带的Maven工具，打包项目，生成jar包。具体操作请参考在Linux环境中编包并运行Spark程序。编译打包前，样例代码中的user.keytab、krb5.conf文件路径需

来自：帮助中心

查看更多 →
配置Windows通过EIP访问安全模式集群HDFS

具体操作请参见“虚拟私有云 > 用户指南 > 弹性公网IP > 为弹性云服务器申请和绑定弹性公网IP”。记录公网IP和私网IP的对应关系将hosts文件中的私网IP改为对应的公网IP。将krb5.conf文件中的IP地址修改为对应IP的主机名称。配置集群安全组规则。在集群“概览”界面，选择“添加安全组规则

来自：帮助中心

查看更多 →
数据拷贝

当源集群与目标集群处于不同Region时，用Distcp工具将源集群数据拷贝到OBS，借助OBS跨区域复制功能（请参见跨区域复制）将数据复制到对应目的集群所在Region的OBS，然后通过Distcp工具将OBS数据拷贝到目的集群的HDFS上。由于执行Distcp无法为OBS上的文件设置权限、属主/组等信息，因

来自：帮助中心

查看更多 →
在Linux环境中调测Hive JDBC样例程序

运行JDBC样例程序：在Linux上创建一个目录作为运行目录，如“/opt/jdbc_example”，将1中生成的“target”目录下包名中含有“-with-dependencies”字段的Jar包放进该路径下，并在该目录下创建子目录“src/main/resources”，将已获取的“hiv

来自：帮助中心

查看更多 →
Linux中未安装客户端时提交Storm拓扑

准备依赖的Jar包和配置文件。在Linux环境新建目录，例如“/opt/test”，并创建子目录“lib”和“src/main/resources/”。将样例工程中“lib”文件夹下的Jar包上传Linux环境的“lib”目录。将样例工程中“src/main/resources”文件夹下的配置

来自：帮助中心

查看更多 →
将ISO文件注册为镜像（Linux）

将ISO文件注册为镜像（Linux）操作场景通过注册镜像操作，将外部镜像ISO文件注册为云平台的私有镜像，即ISO镜像。注册镜像前，需先将ISO文件上传到OBS桶中。使用ISO文件注册的ISO镜像不支持复制、导出和加密。前提条件待注册文件需为iso格式。已上传ISO镜

来自：帮助中心

查看更多 →
如何将开发环境Notebook A的数据复制到Notebook B中？

如何将开发环境Notebook A的数据复制到Notebook B中？目前不支持直接将Notebook A的数据复制到Notebook B，如果需要复制数据，可参考如下步骤操作：将Notebook A的数据上传至OBS；下载OBS中的数据至Notebook B。文件的上传

来自：帮助中心

查看更多 →
在Linux中调测JDBC样例程序

运行JDBC样例程序：在Linux上创建一个目录作为运行目录，如“/opt/jdbc_example”，将1中生成的“target”目录下包名中含有“-with-dependencies”字段的Jar包放进该路径下，并在该目录下创建子目录“src/main/resources”，将已获取的“hiv

来自：帮助中心

查看更多 →
Hiredis客户端连接Redis（C++）

Hiredis客户端连接Redis（C++）本章节介绍使用C++ hiredis连接Redis实例的方法。更多的客户端的使用方法请参考Redis客户端。以下操作以通过弹性云服务器上的客户端连接Redis实例为例进行说明。本章节操作，仅适用于连接单机、主备、Proxy集群实例，如果是使用C++

来自：帮助中心

查看更多 →
在Linux环境中调测Hive JDBC样例程序

运行JDBC样例程序：在Linux上创建一个目录作为运行目录，如“/opt/jdbc_example”，将1中生成的“target”目录下包名中含有“-with-dependencies”字段的Jar包放进该路径下，并在该目录下创建子目录“src/main/resources”，将已获取的“hiv

来自：帮助中心

查看更多 →
在Linux环境中调测Hive JDBC样例程序

运行JDBC样例程序：在Linux上创建一个目录作为运行目录，如“/opt/jdbc_example”，将1中生成的“target”目录下包名中含有“-with-dependencies”字段的Jar包放进该路径下，并在该目录下创建子目录“src/main/resources”，将已获取的“hiv

来自：帮助中心

查看更多 →
配置Hive Python3样例工程

information. 客户端机器必须安装有setuptools，版本为47.3.1。可在https://pypi.org/project/setuptools/#files下载相应的安装包。将下载的setuptools压缩文件复制到客户端机器上，解压后进入解压目录，在客户端机器的命令行终端执行以下命令：

来自：帮助中心

查看更多 →
配置Hive Python3样例工程

information. 客户端机器必须安装有setuptools，版本可取47.3.1。可在https://pypi.org/project/setuptools/#files下载相应的安装包。将下载的setuptools压缩文件复制到客户端机器上，解压后进入解压目录，在客户端机器的命令行终端执行以下命令：

来自：帮助中心

查看更多 →
配置Windows通过EIP访问集群Spark

具体操作请参见“虚拟私有云 > 用户指南 > 弹性公网IP > 为弹性云服务器申请和绑定弹性公网IP”。记录公网IP和私网IP的对应关系将hosts文件中的私网IP改为对应的公网IP。将krb5.conf文件中的IP地址修改为对应IP的主机名称。配置集群安全组规则。在集群“概览”界面，选择“添加安全组规则

来自：帮助中心

查看更多 →
第三方jar包跨平台（x86、TaiShan）支持

能会安装在多个节点上，随便进入一个安装节点，cd到sparkResource的安装目录）。准备好自己的jar包例如xx.jar的x86版本和TaiShan版本。将x86版本和TaiShan版本的xx.jar分别复制到当前目录的x86文件夹和TaiShan文件夹里面。在当前目录下执行以下命令将jar包打包：

来自：帮助中心

查看更多 →
第三方jar包跨平台（x86、TaiShan）支持

个节点上，登录任意一个SparkResource节点，进入到SparkResource的安装目录）。准备好自己的jar包，例如xx.jar的x86版本和TaiShan版本。将x86版本和TaiShan版本的xx.jar分别复制到当前目录的x86文件夹和TaiShan文件夹里面。

来自：帮助中心

查看更多 →