大数据从入门到精通 更多内容
  • 使用Loader从关系型数据库导入数据到Hive

    使用Loader关系型数据库导入数据Hive 操作场景 该任务指导用户使用Loader将数据关系型数据库导入Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。

    来自:帮助中心

    查看更多 →

  • 从MRS导入数据概述

    ”或“ 虚拟专用网络 (VPN)”打通网络,请参见对应服务的用户指南。 MRS 导入数据集群的流程 MRS集群上的数据准备 (可选)手动创建外部 服务器 创建外表 执行数据导入 清除资源 父主题: MRS导入数据集群

    来自:帮助中心

    查看更多 →

  • 从OBS读取CSV数据

    OBS读取 CS V数据 概述 OBS( 对象存储服务 )中读取csv格式的数据。 输入 无 输出 数据集 参数说明 参数 参数说明 obs_data_path OBS中csv数据文件或数据所在文件夹的绝对路径,例如:obs://桶名称/文件夹/数据文件,obs://桶名称/文件夹 has_header

    来自:帮助中心

    查看更多 →

  • 从MySQL CDC源表读取数据写入到DWS

    MySQL CDC源表读取数据写入DWS 本指导仅适用于Flink 1.12版本。 场景描述 CDC是变更数据捕获(Change Data Capture)技术的缩写,它可以将源数据库的增量变动记录,同步一个或多个数据目的中。CDC在数据同步过程中,还可以对数据进行一定的处理,例如分组(GROUP

    来自:帮助中心

    查看更多 →

  • 大容量数据库

    容量数据容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题: 分区表

    来自:帮助中心

    查看更多 →

  • 导出数据到OBS

    导出数据OBS 登录ModelArts管理控制台,在左侧菜单栏中选择“数据管理 > 数据集”,进入“数据集”管理页面。 在数据集列表中,选择“图片”类型的数据集,单击数据集名称进入“数据集概览页”。 在“数据集概览页”,单击右上角“导出 ”。在弹出的“导出”对话框中,填写相关信

    来自:帮助中心

    查看更多 →

  • 使用Loader从SFTP服务器导入数据到Hive

    使用LoaderS FTP服务器 导入数据Hive 操作场景 该任务指导用户使用Loader将数据SFTP服务器导入Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业中指定的Hive表的权限。 获取SFTP服务器使用的用户和

    来自:帮助中心

    查看更多 →

  • 使用Loader从Hive导出数据到SFTP服务器

    使用LoaderHive导出数据SFTP服务器 操作场景 该任务指导用户使用Loader将数据Hive导出到SFTP服务器。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业中指定的Hive表的权限。 获取SFTP服务器使用的用户和

    来自:帮助中心

    查看更多 →

  • 上传数据到OBS

    上传数据OBS 操作场景 OBS导入数据集群之前,需要提前准备数据源文件,并将数据源文件上传到OBS。如果您的数据文件已经在OBS上了,则只需完成上传数据OBS中的2~3。 准备数据文件 准备需要上传到OBS的数据源文件。 GaussDB (DWS)只支持CSV、TEXT、O

    来自:帮助中心

    查看更多 →

  • 导出数据到OBS

    导出数据OBS 关于OBS并行导出 导出CSV、TXT数据OBS 导出ORC数据OBS 父主题: 导出数据

    来自:帮助中心

    查看更多 →

  • 使用Loader从关系型数据库导入数据到ClickHouse

    使用Loader关系型数据库导入数据ClickHouse 操作场景 该任务指导用户使用Loader将数据关系型数据库导入ClickHouse,本章节已MySQL为例进行操作。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 ClickHouse表已创建

    来自:帮助中心

    查看更多 →

  • 从PostgreSQL CDC源表读取数据写入到DWS

    PostgreSQL CDC源表读取数据写入DWS 本指导仅适用于Flink 1.12版本。 场景描述 CDC是变更数据捕获(Change Data Capture)技术的缩写,它可以将源数据库的增量变动记录,同步一个或多个数据目的中。CDC在数据同步过程中,还可以对数据进行一定的处理,例如分组(GROUP

    来自:帮助中心

    查看更多 →

  • 通过sqoop import命令从PgSQL导出数据到Hive时报错

    通过sqoop import命令PgSQL导出数据Hive时报错 背景 使用sqoop import命令抽取开源PgSQL数据库内容MRS HDFS或Hive中。 用户问题 使用sqoop命令可以查询PgSQL表,但是执行sqoop import命令导入导出时报错: The

    来自:帮助中心

    查看更多 →

  • 快速入门

    本节通过调用 云服务器备份 的API为某台 云服务器 创建一次备份。通过IAM服务获取到的Token有效期为24小时,需要使用同一个Token鉴权时,可以先将Token缓存,避免频繁调用。涉及API当您使用Token认证方式完成认证鉴权时,需要获取用户Token并在调用接口时增加“X-Auth-Token”到业务接口请求消息头中。IAM获取tok

    来自:帮助中心

    查看更多 →

  • 快速入门

    en”业务接口请求消息头中。 IAM获取token的API SDRS创建保护组的API 具体步骤 Token认证,具体操作请参考认证鉴权。 发送“POST https://SDRS的Endpoint/v1/{project_id}/server-groups”。 在Request

    来自:帮助中心

    查看更多 →

  • 快速入门

    本节通过调用一系列VBS的API创建云硬盘备份。通过IAM服务获取到的Token有效期为24小时,需要使用同一个Token鉴权时,可以先将Token缓存,避免频繁调用。当您使用Token认证方式完成认证鉴权时,需要获取用户Token并在调用接口时增加“X-Auth-Token”到业务接口请求消息头中。IAM获取token的APIVBS创建

    来自:帮助中心

    查看更多 →

  • 快速入门

    快速入门 使用模型训练服务快速训练算法模型 操作参考 修订记录

    来自:帮助中心

    查看更多 →

  • 入门引导

    入门引导 图1-1入门引导 步骤 操作 描述 1 开通服务 您可以快速开通ISDP+视频服务。 2 创建应用 通过在应用管理创建应用,可以获取您的应用ID。 3 集成客户端SDK ISDP+视频服务为您提供了Android、Web端的SDK,帮助您快速集成SDK。 4 实现基本功能

    来自:帮助中心

    查看更多 →

  • 入门实践

    入门实践 当您熟悉了构建实景三维建模等基本操作后,可以根据自身的业务需求使用实景三维建模服务提供的一系列常用实践。 表1 常用最佳实践 实践 描述 城市园区室外三维模型生产 城市园区室外三维模型生产,主要适用于1万张照片以内的小规模数据及人工刺点处理等。数据处理方式采用常规流程。

    来自:帮助中心

    查看更多 →

  • 入门实践

    数据库控制策略:高危命令二次审批 云 堡垒机 支持通过执行命令运维数据库,包括数据删除、修改、查看等运维操作。为确保数据库敏感信息的安全,避免关键信息的丢失和泄露,本文针对运维用户访问和运维数据库关键信息,详细介绍了如何设置数据库高危操作的复核审批,以及如何实现关键信息的重点监控。 等保合规 云堡垒机等保合规相关项

    来自:帮助中心

    查看更多 →

  • 入门流程

    桶是OBS中存储对象的容器,在上传对象前需要先创建桶,请参见步骤五:创建桶。并行文件系统与OBS桶操作类似。 将数据上传至OBS,请参见步骤六:上传对象。并行文件系统与OBS桶操作类似。 OBS中下载数据,请参见步骤七:下载对象。并行文件系统与OBS桶操作类似。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了