使用GDS工具将数据从数据库导出到普通文件系统中，适用于高并发、大量数据导出的场景。 当前版本的GDS支持从数据库导出到管道文件，该功能使GDS的导出更加灵活多变。 当GDS用户的本地磁盘空间不足时： 通过管道文件将从GDS导出的数据进行压缩减少磁盘空间。 通过管道直接将导出来的数据放到hdfs 服务器 上。

查看更多 →

Linux下的编译 搭建Linux编译环境 Linux下编译流程

查看更多 →

在启动GDS服务前， 请确定使用的GDS版本和数据库的版本保持一致，否则数据库会提示错误并终止导入导出操作，因此请注意GDS工具和数据库的版本务必严格匹配。具体版本可通过-V参数进行查看。 参数说明 -d dir 设置待导入数据文件的目录。在gds进程权限允许的条件下，-d指定的目录会自动被创建。

查看更多 →

管道作业常见问题 数据管道作业已保存成功为什么无法启动？ 为什么有些作业启动时需要选择计算资源但有些作业不需要？ 为什么无法添加产品过滤算子？ 父主题： 数据分析常见问题

查看更多 →

在Linux中调测HBase应用 安装客户端时编译并运行HBase应用 未安装客户端时编译并运行HBase应用 查看HBase应用调测结果 父主题： 调测HBase应用

查看更多 →

个索引时，您可以根据实际情况指定Shard的数量。每个Shard托管在集群中的任意一个节点中，且每个Shard本身是一个独立的、全功能的“索引”。 生命周期 该管道内数据的生命周期。取值范围为：7-180。 描述 可选参数，设置该管道的备注信息。 单击“确定”。 创建成功后，可单击数据空间名称，展开查看已创建的管道。

查看更多 →

获取管道作业列表 功能介绍 获取用户下的所有管道作业，支持分页。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/pipelines

查看更多 →

业务并发数的两倍。 由于管道“读取即删除”的特点，需确保导入或导出过程中除GDS程序外无其他程序读取管道文件，避免导入过程中数据丢失或者任务报错及导出的文件内容混乱。 不支持对具有相同Location的外表并发导入导出，即GDS的多个线程同时读取管道文件或者同时写入管道文件。 G

查看更多 →

// 5. 连接数据库，这里的userName与password分别表示连接数据库的用户名和用户密码。 // 如果odbc.ini文件中已经配置了用户名密码，那么这里可以留空（""）；但是不建议这么做，因为一旦odbc.ini权限管理不善，将导致数据库用户密码泄露。

查看更多 →

0; fi 返回“old agent”，表示使用的是老版本Agent（telescope架构）。 返回版本号，表示使用新版本Agent（Uniagent架构）。 返回“0”，表示未安装Agent。 卸载当前版本的Agent。 如果2中返回old agent，代表当前Agent为老版

查看更多 →

在Linux环境中调测Spark应用 在Linux环境中编包并运行Spark程序 在Linux环境中查看Spark程序调测结果 父主题： 调测Spark应用

查看更多 →

get目录中。 准备依赖的Jar包和配置文件。 在Linux环境新建目录，例如“/opt/test”，并创建子目录“lib”和“conf”。将样例工程依赖的Jar包导出，导出步骤请参考在Linux环境中调测HBase应用章节的2，以及1导出的Jar包，上传到Linux的“lib”

查看更多 →

上述打包命令中的{maven_setting_path}为本地Maven的“settings.xml”文件路径。 打包成功之后，在工程根目录的target子目录下获取打好的jar包。 将导出的Jar包上传至Linux运行环境的任意目录下，例如“/opt/client”。 将工程中的“l

查看更多 →

在Linux系统中卸载PV driver 操作场景 对于XEN虚拟化类型的 弹性云服务器 ，在优化Linux私有镜像过程中，需要安装原生的XEN和KVM驱动。 为了成功安装原生的XEN和KVM驱动，需要先卸载PV driver。 操作步骤 使用VNC方式，以“root”用户登录 云服务器 。

查看更多 →

fs-site.xml”中的kerberos相关信息和“HDFS/hadoop/etc/hadoop/hdfs-site.xml”中的kerberos相关信息一致。“hdfs-site.xml”中kerberos的配置mapred改为hdfs，需要修改的地方如图1所示。 图1 hdfs-site

查看更多 →

在Linux环境中调测Spark应用 在程序代码完成开发后，您可以上传至Linux客户端环境中运行应用。使用Scala或Java语言开发的应用程序在Spark客户端的运行步骤是一样的。 使用Python开发的Spark应用程序无需打包成jar，只需将样例工程复制到编译机器上即可。

查看更多 →

在Linux环境中调测HetuEngine应用 操作场景 在程序代码完成开发后，可以把代码编译成jar包，上传到Linux环境进行程序功能调试。 在Linux环境上调测程序前，需在Linux节点预安装客户端。 操作步骤 在Windows环境的开发环境IntelliJ IDEA中，在“Maven

查看更多 →

在Linux环境中调测Kafka应用 操作场景 在程序代码完成开发后，可以在Linux环境中运行IoTDB-Kafka样例程序。 前提条件 已安装IoTDB和Kafka客户端。 当客户端所在主机不是集群中的节点时，需要在客户端所在节点的hosts文件中设置主机名和IP地址映射。主机名和IP地址请保持一一对应。

查看更多 →

视图是一个可查询对象，其内容由其他集合或视图上的聚合管道定义。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 单击页面左上角的，选择“数据库 > 数据管理服务 DAS”，进入数据管理服务页面。 在左侧导航栏中，单击“开发工具”，进入开发工具页面。 您也可以

查看更多 →

运行数据管道 运行数据管道 运行过程监控与数据跟踪（敬请期待） 父主题： 数据管道

查看更多 →

启动作业时，系统会自行判断用户的作业是否需要实时计算资源，若需要实时计算资源，则会弹出如下对话框供用户自行选择： 计算资源：一个计算资源对应的物理资源为：1核CPU、4G内存，可实时清洗的数据量为1000条/S（仅供参考，请结合各自的业务场景与数据大小进行评估）。 并行数：管道作业运行时的实际并发能力，不得超过“计算资源

查看更多 →