多云存储数据同步方案 应用双写 如果数据是在应用服务侧产生，或者数据在客户端产生但通过服务端将数据写入对象存储，则建议使用双写方案，架构如下： 此时业务应用可对接两家对象存储的SDK，将文件以同步模式或者异步模式写入两家对象存储。对象存储的上行流量免费，所以该架构不会增加任何成本。

查看更多 →

数据库存储 TaurusDB标准版支持哪些存储引擎 TaurusDB标准版使用的什么存储 TaurusDB标准版是否支持存储过程和函数 数据超过了TaurusDB标准版实例的最大存储容量怎么办 如何查看TaurusDB标准版的存储空间使用情况

查看更多 →

Hive ORC数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见Hive客户端使用实践。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

打开FTP 服务器 上的文件夹时发生错误，请检查是否有权限访问该文件夹 问题描述 打开FTP服务器上的文件夹时发生错误，请检查是否有权限访问该文件夹。 图1 FTP文件夹错误 可能原因 浏览器设置了FTP防火墙。 处理方法 以设置IE浏览器为例。 打开IE浏览器菜单"工具 > Internet

查看更多 →

怎样在本地主机和Windows云服务器之间互传数据？ 使用FTP上传文件时客户端连接服务端超时怎么办？ 使用FTP上传文件时写入失败，文件传输失败怎么办？ 搭建了FTP，通过公网无法访问怎么办？ 打开FTP服务器上的文件夹时发生错误，请检查是否有权限访问该文件夹 WinSCP无法连接到Linux云服务器怎么办？

查看更多 →

日志 Syslog服务器配置成功后，历史日志记录全量远程备份。当有新日志记录时，实时启动备份。 远程备份至FTP/SFTP服务器 系统配置、会话回放日志 FTP/SFTP服务器配置成功后，每天零点备份前一天日志数据。 此外可选择需备份日期，立即将数据备份至服务器。 远程备份至OBS服务器

查看更多 →

可根据实际需求选择将FTP配置为主动模式或者被动模式。如果华为云上的服务器需要通过公网IP地址访问华为云上的实例搭建的FTP服务器时，需要将FTP服务器配置为被动模式。 主动模式需要配置的参数如下： #设置以下参数，不允许匿名登录FTP服务器，允许本地用户登录FTP服务器，并指定FTP本地用户使用的文件目录。

查看更多 →

节点服务器挂载Nas存储 主节点挂载Nas（从节点同） 背景 主从节点同步和通信需要使用到共享存储 解决思路 在需要共享节点挂载共享文件到对于目录（xxx.xxx.xxx.xxx为SFS服务器地址） yum install nfs-utils mount -t nfs -o vers=3

查看更多 →

用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 操作场景 很多企业会把关键数据源建设在内网，例如数据库、文件服务器等。由于EDS运行在云上，所以需要创建EDS与第三方内网数据源的连接，以便更加安全、可靠的交换和管理数据资源。 准备工作 创建一台Centos操作系统的云服务器，并且为云服务

查看更多 →

配置FTP/SFTP源端参数 表1 FTP/SFTP作为源端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 源目录或文件 要传输的目录或单个文件路径。 FROM_DIRECTORY/ or FROM_DIRECTORY/example.csv 文件格式 传输数据时使用的格式。

查看更多 →

支持从SFTP/FTP服务器导入数据到Phoenix表 支持从SFTP/FTP服务器导入数据到Hive表 支持从HDFS/OBS导出数据到SFTP服务器 支持从HBase表导出数据到SFTP服务器 支持从Phoenix表导出数据到SFTP服务器 支持从关系型数据库导入数据到HBase表

查看更多 →

最终数据的每个字段分割标识字符。 编码类型 最终数据的文本编码类型。只对文本类型文件有效。 generic-jdbc-connector 表2 generic-jdbc-connector目的连接属性 参数 说明 模式名称 保存最终数据的数据库名称。 表名 保存最终数据的数据表名称。 ftp-connector或sftp-connector

查看更多 →

的规则，保证云服务器等实例的网络安全。 删除安全组规则：当安全组规则入方向、出方向源地址/目的地址有变化时，或者不需要开放某个端口时，您可以参考删除安全组规则进行安全组规则删除。 修改初始密码。打开华为云服务器控制台，勾选以FTP站点服务器名称为前缀的弹性云服务器，单击“关机”，

查看更多 →

从SFTP服务器导入数据到Hive表。 从FTP服务器导入数据到HDFS/OBS。 从FTP服务器导入数据到HBase。 从FTP服务器导入数据到Phoenix表。 从FTP服务器导入数据到Hive表。 从同一集群内HDFS/OBS导入数据到HBase。 MRS 与外部数据源交换数据

查看更多 →

假设存在一个FTP服务器，将下载的云服务组件包存放到FTP服务器的目录下。 进入云服务组件包目录_install_mod。 <sysname> cd $_install_mod/ 连接FTP服务器。 <sysname> ftp FTP服务器IP地址 Warning: FTP is not

查看更多 →

用户名 连接数据库使用的用户名。 密码 连接数据库使用的密码。 JDBC连接属性 JDBC连接属性，单击“添加”手动添加。 名称：连接属性名。 值：连接属性值。 ftp-connector FTP服务器的IP FTP服务器的IP地址。 FTP服务器端口 FTP服务器的端口号。 FTP用户名

查看更多 →

可根据实际需求选择将FTP配置为主动模式或者被动模式。如果华为云上的服务器需要通过公网IP地址访问华为云上的实例搭建的FTP服务器时，需要将FTP服务器配置为被动模式。 主动模式需要配置的参数如下： #设置以下参数，不允许匿名登录FTP服务器，允许本地用户登录FTP服务器，并指定FTP本地用户使用的文件目录。

查看更多 →

> 监控数据上传”，查看“FTP用户名”、“保存路径”和“转储模式”配置项。 是FTP模式，执行6。 是SFTP模式，执行7。 以FTP方式登录服务器，在默认目录下查看相对路径“保存路径”是否有“FTP用户名”的读写权限。 是，执行9。 否，执行8。 以SFTP方式登录服务器，查看

查看更多 →

统一的数据分析平台，随时随地多终端查看企业运营数据，辅助决策。 强大的大数据量支撑能力，数据清晰规范，降低分析门槛，更好的支撑业务 图2 部署架构 架构说明： 部署时使用DWS作为数据仓库，用于存储企业的业务数据； 以上架构为应用双节点集群，需要两个E CS 服务器用于应用部署，其余组件服务（Redis、Nginx等）将部署在第三个ECS服务器上；

查看更多 →

从SFTP服务器导入数据到Hive表 从FTP服务器导入数据到HDFS/OBS 从FTP服务器导入数据到HBase 从FTP服务器导入数据到Phoenix表 从FTP服务器导入数据到Hive表 从同一集群内HDFS/OBS导入数据到HBase MRS与外部数据源交换数据和文件时需要连接数据源。系统提供以下连接器，用于配置不同类型数据源的连接参数：

查看更多 →

用户名 连接数据库使用的用户名。 密码 连接数据库使用的密码。 JDBC连接属性 JDBC连接属性，单击“添加”手动添加。 名称：连接属性名。 值：连接属性值。 ftp-connector FTP服务器的IP FTP服务器的IP地址。 FTP服务器端口 FTP服务器的端口号。 FTP用户名

查看更多 →