归档应用代码 使用约束 应用开发完成后需要打包编译，如果编译包类型为源码包，源码包的内容即是应用代码。归档内容主要包括编译后的对象、页面、服务编排、脚本等组件，您可以参考以下方式编译打包并下载归档应用代码。 操作步骤 参考如何导出源码包中操作，将应用编译为源码包。 将源码包发布到“我的仓库”。

查看更多 →

归档实例配置 设置数据归档实例后，该账号下的所有归档任务都会将数据归档存放到此实例中。AstroZero只提供归档实例数据的功能，不提供归档实例数据的存储功能。 设置归档实例 在AstroZero服务控制台，单击“进入首页”，进入应用开发页面。 在页面左上方单击，选择“环境管理 >

查看更多 →

利用多DN并行的方式，将数据从远端 服务器 导入到 GaussDB (DWS)。这种方式导入效率高，适用于大批量数据入库。 从 MRS 导入数据到集群 MRS（HDFS） 配置一个GaussDB(DWS)集群连接到一个MRS集群，然后将数据从MRS的HDFS中读取到GaussDB(DWS)。

查看更多 →

path。 说明： 当前schame只支持obs和hdfs。 当schema为obs时，表示输出到 对象存储服务 OBS。注意，OBS必须是并行文件系统，不能是OBS桶。 示例：obs://bucketName/fileName，表示数据输出到obs的bucketName桶下的fileName目录中。

查看更多 →

path。 说明： 当前schame只支持obs和hdfs。 当schema为obs时，表示输出到对象存储服务OBS。注意，OBS必须是并行文件系统，不能是OBS桶。 示例：obs://bucketName/fileName，表示数据输出到obs的bucketName桶下的fileName目录中。

查看更多 →

HBase支持对同一张表的数据进行冷热分离存储。用户在表上配置数据冷热时间分界点后，HBase会依赖用户写入数据的时间戳（毫秒）和时间分界点来判断数据的冷热。数据开始存储在热存储上，随着时间的推移慢慢往冷存储上迁移。同时用户可以任意变更数据的冷热分界点，数据可以从热存储到冷存储，也可以从冷存储到热存储。 图1 HBase冷热分离原理图

查看更多 →

下载数据集到OBS 功能介绍 下载数据集到OBS桶中。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

下载数据集到OBS 功能介绍 下载数据集到OBS桶中。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

下载数据集到OBS 当用户订阅或申请订阅了数据集且该订阅申请已审批通过，用户可以手动将数据集下载到OBS。 已成功订阅的数据集在有效期内可以多次下载，无需再发起订阅流程。 数据集订阅成功后，数据集中数据有变化时详细介绍请参见数据服务首页介绍。 同租户下载到OBS不需要审批，跨租户

查看更多 →

导出 CS V、TXT数据到OBS 规划导出数据 创建OBS外表 执行导出 示例 父主题： 导出数据到OBS

查看更多 →

下载数据集到OBS 当用户订阅或申请订阅了数据集且该订阅申请已审批通过，用户可以手动将数据集下载到OBS。 已成功订阅的数据集在有效期内可以多次下载，无需再发起订阅流程。 数据集订阅成功后，数据集中数据有变化时详细介绍请参见消息提醒介绍。 订阅的数据集审批完成后，系统提供自动下载

查看更多 →

使用 CDM 上传数据到OBS 上传存量数据 上传增量数据 父主题： 贸易数据极简上云与统计分析

查看更多 →

使用CDM上传数据到OBS 上传存量数据 上传增量数据 父主题： 贸易数据极简上云与统计分析

查看更多 →

上传OBS文件到JupyterLab 在Notebook的JupyterLab中，支持将OBS中的文件下载到Notebook。注意：文件大小不能超过10GB，否则会上传失败。 通过JupyterLab打开一个运行中的Notebook。 单击JupyterLab窗口上方导航栏的ModelArts

查看更多 →

开启 云审计 服务配置OBS桶，将审计事件归档OBS永久存储 由于 CTS 只支持查询7天的审计事件，为了您事后审计、查询、分析等要求，启用CTS追踪器请配置OBS服务桶（建议您配置独立OBS桶并配置KMS加密存储专门用于归档审计事件）。当云上资源发生变化时，CTS服务将审计事件归档至OBS

查看更多 →

任务日志进行合并，写入到HDFS中。 由于MapReduce的作业日志和任务日志（聚合功能开启的情况下）都保存在HDFS上。对于计算任务量大的集群，如果不进行合理的配置对日志文件进行定期归档和删除，日志文件将占用HDFS大量内存空间，增加集群负载。 日志归档是通过Hadoop Archives功能实现的，Hadoop

查看更多 →

任务日志进行合并，写入到HDFS中。 由于MapReduce的作业日志和任务日志（聚合功能开启的情况下）都保存在HDFS上。对于计算任务量大的集群，如果不进行合理的配置对日志文件进行定期归档和删除，日志文件将占用HDFS大量内存空间，增加集群负载。 日志归档是通过Hadoop Archives功能实现的，Hadoop

查看更多 →

险，并接受对集群可能造成的异常或影响。”，单击“确定”。 HDFS路径：选择“/tmp/test”，单击“确定”。 图5 从OBS导入数据到HDFS 单击“确定”，等待数据导入成功，此时数据文件已上传至MRS集群的HDFS文件系统内。 图6 数据导入成功 步骤3：创建Hive表

查看更多 →

图3 创建OBS连接 单击“保存”回到连接管理界面。 步骤4：创建迁移作业 在CDM集群管理界面，单击集群后的“作业管理”，选择“表/文件迁移 > 新建作业”，开始创建从MRS HDFS导出数据到OBS的任务。 图4 创建MRS HDFS到OBS的迁移任务 作业名称：用户自定义便于记忆、区分的任务名称。

查看更多 →

hdfs_path 格式 无。 说明 HDFS的路径，如“hdfs:///tmp”。 父主题： 标示符

查看更多 →

HDFS HDFS基本原理 HDFS HA方案介绍 HDFS与其他组件的关系 HDFS开源增强特性 父主题： 组件介绍

查看更多 →