查询可以组合不同数据源，执行跨数据源的数据分析。 图1 Presto架构 Presto分布式地运行在一个集群中，包含一个Coordinator和多个Worker进程，查询从客户端（例如CLI）提交到Coordinator，Coordinator进行SQL的解析和生成执行计划，然后分发到多个Worker进程上执行。

查看更多 →

作业是指将SQL脚本或者数据集成、数据质量作业等进行编排并进行周期性的调度。 脚本作业配置 为了精细化管理和便于运维，ETL作业配置规则如下: 按逻辑数据实体创建调度作业画布。 业务指标用到的逻辑数据实体，将每个逻辑数据实体放在一个画布中，包括ODS层、DWI层、DWR层基础数据，然后按照ODS层作业

查看更多 →

> 服务配置”，将“基础配置”切换为“全部配置”，然后查找“hive.metastore.warehouse.size.percent”，调大该配置项。设配置项的值为A，HDFS总存储空间为B，阈值为C，Hive已经使用HDFS的空间大小为D。调整策略为A x B x C > D

查看更多 →

习数据集。 其中鸢尾花原始测试集、KPI 15分钟数据集和KPI 60分钟数据集中包括空值，用户可以通过特征工程进行数据修复，剔除空值。 本地上传-文件大小限制为60M，文本支持csv和txt 数据来源选择“本地上传”时可见，表示数据文件所在的用户本地路径。 为避免后续处理数据时

查看更多 →

按照a==b条件进行计算，返回true或false。a和b类型必须一致，例如都是字符串、数字或者列表。 op_ge 按照a>=b条件进行计算，返回true或false。a和b类型必须一致，例如都是字符串、数字或者列表。 op_gt 按照a>b条件进行计算，返回true或false。a和b类型必须一致，例如都是字符串、数字或者列表。

查看更多 →

数据治理实施专业服务 数据使能设计与实施流程如下图所示： 图1 流程图 上图中的各个流程，可以归类为数据使能专业服务的各个报价项，如下图所示： 图2 报价项 数据管理成熟度诊断：完成初步的业务、数据、系统调研，并基于DCMM数据管理成熟度标准的八大维度给出数据管理成熟度诊断与评估，提供技术路线设计与规划。

查看更多 →

通过调研获取数据源以及数据字典信息，从调研结果中确认数据来源系统。 目标库手动建表 根据需要的表和字段，在 MRS -Hive数据库中建立相应的库和表； 表及字段的命名规范为：ods_源系统简写_源系统表名_{TYPE简码},增量表的type简码为i,全量表的type简码为f,所有的表名称及字段名称小写

查看更多 →

Insight无缝集成华为云 数据仓库 服务、支持本地 CS V、在线API及企业内部私有云数据；满足您各类大数据实时计算、监控的需求，充分发挥大数据计算的能力。 拖拽即可完成组件自由配置与布局、所见即所得，无需编程就能轻松搭建可视化大屏。 DataArts Insight特别针对拼接大屏端的展示做了

查看更多 →

DRS仅支持从低版本迁移到高版本。 升级时的规格变更过程，会有2次主备切换和2次闪断，规格变更之后请检查DRS任务。 大版本升级后，如果需要保证迁移前后实例的IP地址不变，可以修改高版本的IP地址为原来的连接地址（原实例的IP地址需要先释放出来）。具体操作请参见修改实例内网地址。 父主题：

查看更多 →

保存：保存大屏之后，在大屏页面大屏不具有查看大屏功能。 在保存的页面输入大屏的名称。 图9 保存并发布 收藏：收藏大屏后，可在产品首页“我的收藏”快速找到大屏。 保存并发布：保存并发布大屏之后，在大屏页面大屏具有查看功能。 在保存并发布的页面输入大屏的名称。 图10 保存并发布 父主题： 新建大屏

查看更多 →

监控的需求，充分发挥大数据计算的能力。 拖拽即可完成组件自由配置与布局、所见即所得，无需编程就能轻松搭建可视化大屏。 DLV 特别针对拼接大屏端的展示做了分辨率优化，能够适配非常规的拼接分辨率。创建的大屏能够发布分享，作为您对外数据业务展示的窗口。

查看更多 →

具体操作请参见如何控制接口访问权限。 大屏数据处理应用模板服务集成示例： 如何使用资产 以在大屏Demo页面上进行配置为例。 订购并安装部署大屏数据处理应用模板资产到对应的开发环境。 相关操作请参见如何订购&部署资产。 在开发环境首页，如图1所示，单击“项目”页签，单击“业务大屏”。 图1 进入业务大屏 如图

查看更多 →

GaussDB (DWS) 使用DWS实现用户数据脱敏和行级访问控制 05:20 实现用户数据脱敏和行级访问控制 数据仓库服务 GaussDB(DWS) 新物理集群划分为两个逻辑集群并进行跨集群查询 03:28 划分两个逻辑集群进行跨集群查询 数据库进阶使用 数据仓库服务 GaussDB(DWS)

查看更多 →

安全稳定、降低成本 一站式的服务能力和稳定的数仓服务，让云上数据万无一失；免自建大数据集群、免运维，极大降低企业建设数仓成本。 图2 云上数据平台 基于行业领域知识库快速构建数据中台 通过应用华为在企业业务领域积累的丰富的行业领域模型和算法，帮助企业构建数据中台，快速提升数据运营能力。 优势 多行业支持

查看更多 →

大对象类型 概述 BLOB是一个二进制大对象，可以容纳可变数量的数据。这四个BLOB 类型是TINYBLOB，BLOB， MEDIUMBLOB和LONGBLOB。这些不同之处仅在于各自可以容纳的值的最大长度不同。DSC工具支持以下列出类型转换。 BLOB类型可以存储图片，列存储不支持BLOB。

查看更多 →

大屏Demo 描述 大屏Demo，开箱即用的大屏样例，需要配合应用资产中“大屏数据处理应用模板”一起使用。 开放能力 大屏Demo为模板资产，订购后下载到本地，通过导入的方式上传到“业务大屏”下使用。 大屏Demo提供了指挥看板页面，如图1所示。 图1 指挥看板页面 如何使用资产

查看更多 →

可视大屏 单击主菜单的“可视化”，默认进入“运营大屏”页面。 选择大屏单击进入，根据大屏所展示的状态与数据进行决策。 大屏详细内容请参见可视化运营大屏。 父主题： 大屏可视

查看更多 →

元数据可以帮助数据仓库管理员和开发人员非常方便地找到他们所关心的数据，用于指导其进行数据管理和开发工作，提高工作效率。 将元数据按用途的不同分为两类：技术元数据（Technical Metadata)和业务元数据（Business Metadata）。 技术元数据是存储关于数据仓

查看更多 →

事件网格 EG 创建自定义事件源到https链路 03:35 自定义事件源到https链路演示 事件网格 EG 大数据ETL自动化运维场景解决方案 06:23 大数据ETL自动化运维场景解决方案 事件网格 EG 介绍怎样实现跨账号事件发送 05:07 跨账号事件发送演示

查看更多 →

标准字段：ext_etl_dt （ETL时间），ext_src_sys_id（源系统标识），dt、ph（分区字段） 表的其他要求：采用ORC存储格式和SNAPPY压缩； 在数管平台的“数据开发”模块，选择MRS_Spark_Agent数据连接和ods_mes_bc数据库，执行对应的DDL,创建以_f结尾的全量表。

查看更多 →

单击“登录”，进入沙箱环境，如图8所示。 图8 沙箱环境 部署大屏到沙箱环境 示例中以导入方式为例，部署大屏应用到沙箱环境，以便于测试该大屏。 登录沙箱环境，如图9所示，单击“DMAX”，进入业务大屏。 图9 进入业务大屏 如图10所示，单击“导入项目包”。 图10 导入项目包 选择导出的本地项目包。

查看更多 →