仅当配置“按表分区抽取”时，按表分区分片。 PostgreSQL 支持按表字段分片。 仅当配置“按表分区抽取”时，按表分区分片。 Microsoft SQL Server 支持按表字段分片。 不支持按表分区分片。 Oracle 支持按表字段分片。 仅当配置“按表分区抽取”时，按表分区分片。

查看更多 →

并行文件系统 并行文件系统概述 并行文件系统支持的特性 并行文件系统约束限制 创建并行文件系统

查看更多 →

关联。如需使用只读节点，请重新在该实例上进行创建。 新实例恢复成功后，系统会自动执行一次全量备份。 恢复到当前实例。 在“实例管理”页面，可查看当前实例状态为“恢复中”，恢复完成后，实例状态由“恢复中”变为“正常”。 恢复成功后，会执行一次全量备份。 恢复到已有实例。 在“实例管

查看更多 →

读取输出口显示内容 接口名称 WEB_GetVideoOutSourceAPI 功能描述 读取输出口显示内容时调用该接口。 应用场景 读取输出口显示内容。 URL https://ip/action.cgi?ActionID=WEB_GetVideoOutSourceAPI 参数

查看更多 →

训练过程读取数据 在ModelArts上训练模型，输入输出数据如何配置？ 如何提升训练效率，同时减少与OBS的交互？ 大量数据文件，训练过程中读取数据效率低？ 使用Moxing时如何定义路径变量？ 父主题： Standard训练作业

查看更多 →

使用Scan读取HBase数据 功能简介 要从表中读取数据，首先需要实例化该表对应的Table实例，然后创建一个Scan对象，并针对查询条件设置Scan对象的参数值，为了提高查询效率，最好指定StartRow和StopRow。查询结果的多行数据保存在ResultScanner对象

查看更多 →

查询Hudi表对应的Hive外部表 使用Hive对Hudi表进行增量查询前，需要设置表1的3个参数，这3个参数是表级别的参数，每个Hudi源表都对应3个参数，其中hudisourcetablename表示Hudi源表的表名（注意不是Hive外部表的表名），需根据实际情况进行修改。 表1 参数说明 参数名 默认值

查看更多 →

将此压缩后的文件上传至OBS。 训练时，可直接从OBS下载此压缩文件至/cache目录。此操作仅需执行一次，无需训练过程反复与OBS交互导致训练效率低。 如下示例，可使用mox.file.copy_parallel将zip文件下载至本地/cache目录并解压，然后再读取做训练。 1 2 3 4 5

查看更多 →

运行 MRS 作业时如何读取OBS加密数据 MRS 1.9.x支持使用OBS文件系统中加密后的数据来运行作业，同时支持将加密后的作业运行结果存储在OBS文件系统中。目前仅支持通过OBS协议访问数据。 OBS支持使用KMS密钥的加解密方式对数据进行加解密，所有的加解密操作都在OBS完成，同时密钥管理在DEW服务。

查看更多 →

根据实际需求，勾选目标服务主题，支持同时选多个主题，最后单击“确定”。 图2 增加订阅 按“订阅人”查看订阅详情。 在订阅页面左上方搜索框，输入订阅人名，单击或按回车键搜索。 可以快速查看订阅人基本信息，以及该帐号下所有订阅主题数、短信或邮件的订阅数。 图3 按订阅人筛选卡片 单击订阅人卡片，支持进一步查看订阅记录，包括订阅主题、主题描述、订阅方式等。

查看更多 →

采用Hcatalog的方式，参数指定对应的Hive库和表，需要修改SQL语句指定到具体字段（需要修改脚本）。命令中如果携带认证密码信息可能存在安全风险，在执行命令前建议关闭系统的history命令记录功能，避免信息泄露。 原来的脚本： sqoop import --connect 'jdbc:mysql://10

查看更多 →

在弹出的提示框中，单击“确定”。 读取数据需要等待一段时间，您可以单击刷新数据源的状态，当“状态”为“读取成功”即表示成功将本地数据库的物理表读取至应用设计态。 读取成功后，xDM-F会根据读取的物理表数据自动生成相应的建模信息和物理表信息，这些信息后续会被反向生成相应的数据模型和属性。

查看更多 →

使用Get读取HBase数据 功能简介 要从表中读取一条数据，首先需要实例化该表对应的Table实例，然后创建一个Get对象。也可以为Get对象设定参数值，如列族的名称和列的名称。查询到的行数据存储在Result对象中，Result中可以存储多个Cell。 代码样例 以下代码片段在com

查看更多 →

生成可执行文件 需要Linux开发环境，可利用CLion远程调试或者将工程打包到 Linux服务器 上编译生成可执行文件 编译生成可执行文件(MyCApp)，可以通过CLion之间编译生成，也可以通过在Linux 服务器 上通过命令行生成。 下面提供在Linux服务器使用命令行生成的方法。

查看更多 →

您可以在控制台创建并行文件系统，并进行查看、管理等基本操作。 创建并行文件系统 OBS API 通过OBS API来使用并行文件系统。 支持的API列表 OBSA 大数据场景，建议使用obsa的方式对接OBS并行文件系统。 OBS工具 其他OBS工具 并行文件系统实现了对象和文件的互通，因

查看更多 →

bigdata_env 如果集群为安全模式，执行的用户所属的用户组必须为supergroup组，且执行以下命令进行用户认证。普通模式集群无需执行用户认证。 kinit 组件业务用户 增大客户端的JVM大小，防止OOM，方法如下。（1亿文件建议32G） 若执行HDFS客户端命令时，客户端程序异常退出，并且报“java

查看更多 →

bigdata_env 如果集群为安全模式，执行的用户所属的用户组必须为supergroup组，且执行以下命令进行用户认证。普通模式集群无需执行用户认证。 kinit 组件业务用户 增大客户端的JVM大小，防止OOM，方法如下。（1亿文件建议32G） 若执行HDFS客户端命令时，客户端程序异常退出，并且报“java

查看更多 →

重启后验证。 在重启Linux后，执行以下命令，查看OBS并行文件系统是否挂载成功。 df -h 后续如果想取消开机自动挂载并行文件系统，删除rc.local文件中执行obsfs挂载命令的脚本文件即可。 后续操作 后续如果需要对已挂载的并行文件系统进行参数设置（新增、修改或删除），请

查看更多 →

如下以服务器操作系统为“Windows”，网站根目录为“/www/htdocs”,为例进行说明： 在Windows系统中，单击“开始”，输入“cmd”，进入命令提示符对话框。 执行以下命令，进入网站根目录所在磁盘，此处以网站根目录所在磁盘为D盘为例。 d: 执行以下命令，在网站根目录下，创建“.well-known

查看更多 →

单击选择“配置并行文件系统”。 图2 配置并行文件系统 从下拉框中选择已授权的并行文件系统名称。 如需新增授权，可以单击下拉框右侧“去授权并行文件系统”进行添加，具体操作请参考授权并行文件系统。 参考表1配置容器挂载的路径和权限。 表1 参数说明 参数 说明 文件掩码 挂载文件的文件掩码（umask）。

查看更多 →

创建并行文件系统 用户可以通过控制台创建并行文件系统。 操作步骤 在管理控制台首页，选择“服务列表 > 存储 > 对象存储服务 ”。 选择左侧导航栏的“并行文件系统”，进入并行文件系统控制台。 单击界面右上角的“创建并行文件系统”，进入创建页面。 图1 创建并行文件系统 (可选）复制并行文件系统配置。

查看更多 →