，所以客户需要进行业务容错性改造，实现任何一个或一些实例出现故障（被回收）时，可自行替换并继续运行，无需任何人工干预。 实时数据分析 场景概述 实时数据分析是指用适当的统计分析方法实时对收集来的大量数据进行分析，主要包含数据采集，加工，清洗，分析等环节。实时数据分析应用十分广泛，

查看更多 →

最佳实践内容概览 本指导从数据迁移、数据分析提供了完整的端到端最佳实践内容，帮助您更好的使用 DLI 进行大数据分析和处理。 数据迁移 您可以通过 云数据迁移 服务 CDM 轻松的将其他云服务或者业务平台的数据迁移至DLI。包括以下最佳实践内容： 迁移Hive数据至DLI，具体请参考迁移Hive数据至DLI。

查看更多 →

数据转换与分析 ROMA FDI服务将工业SaaS产生的数据导入至ROMA Connect，收集并传输到 MapReduce服务 ，帮助企业进行大数据分析，优化生产策略。 图1 工业互联网 集成 父主题： 应用场景

查看更多 →

的资源发放。 轻开发 本方案全流程的高度可视化，没有复杂的代码编写过程，对技术人员的技术要求不高，可以大大降低大数据分析的门槛，只要懂数据库会SQL就能够进行大数据分析。 易运维 本方案为客户完全屏蔽了具体软件引擎的复杂度，让客户技术团队从传统的软件问题定位、处理、调优等运维工作

查看更多 →

快速使用Hive进行数据分析 Hive是基于Hadoop的一个 数据仓库 工具，可将结构化的数据文件映射成一张数据库表，并提供类SQL的功能对数据进行分析处理，通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 背景信息

查看更多 →

快速使用HBase进行离线数据分析 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。本章节提供从零开始使用HBase的操作指导，通过客户端实现创建表，往表中插入数据，修改表，读取表数据，删除表中数据以及删除表的功能。 背景信息 假定用户开发一个应用程序，用于管理

查看更多 →

快速使用Hive进行数据分析 Hive是基于Hadoop的一个数据仓库工具，可将结构化的数据文件映射成一张数据库表，并提供类SQL的功能对数据进行分析处理，通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，适合用于数据仓库的统计分析。 背景信息

查看更多 →

IoTDA结合DLI+DWS+Astro实现大数据分析 概述 在物联网解决方案中，设备产生庞大的数据，使用传统的Mysql数据库已经无法达到要求，为了降低存储成本，提高数据查询效率，华为云物联网平台可以通过规则引擎，将数据转发到华为云其他云服务，例如可以将海量数据经过 数据湖探索 服务（DLI）进行数据清洗，再由

查看更多 →

快速使用HBase进行离线数据分析 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。本章节提供从零开始使用HBase的操作指导，通过客户端实现创建表，往表中插入数据，修改表，读取表数据，删除表中数据以及删除表的功能。 背景信息 假定用户开发一个应用程序，用于管理

查看更多 →

使用智能分析助手进行智能数据分析 应用场景 DataArts Insight提供的基于盘古大模型的对话式数据智能分析，通过自然语言与数据交互，进行数据分析、进而获取智能见解、构建仪表板等，智能分析助手简化了数据分析的处理难度，提升了自助图表分析的效率。 本文档以某类商品的销售数据

查看更多 →

大数据 数据湖 探索 DLI 数据治理中心 DataArts Studio 数据仓库服务 GaussDB (DWS) MapReduce服务 MRS 云搜索服务 CSS 父主题： SCP授权参考

查看更多 →

数据分析 根据条件查询采集信息中的图片（API名称：queryCollectPhotoDetail） 查询作业对象筛选的执行人数量（API名称：queryJobTaskExecutor） 根据条件查询所有场景ID（API名称：queryTaskPictureByCondition）

查看更多 →

入门实践 我们整理了从队列网络连通、不同类型的作业分析、数据迁移场景的常用开发指南和最佳实践内容，帮助您更好的使用DLI进行大数据分析和处理。 表1 DLI常用开发指南与最佳实践 场景 操作指导 描述 Spark SQL作业开发 使用Spark SQL作业分析OBS数据 介绍使用Spark

查看更多 →

数据分析 查询审计告警信息 查询审计SQL语句 查询审计汇总信息 父主题： API

查看更多 →

数据分析 运营报表 订阅报表 父主题： 统计分析（新）

查看更多 →

大数据校验 Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” Hive校验的sum统计结果显示未达标 DLI校验任务出现大量失败表 Delta 数据量较大时，如何优化校验任务？

查看更多 →

大数据血缘 部署迁移工具Edge 采集元数据 血缘采集

查看更多 →

不使用EIP场景下进行大数据数据迁移 本节介绍不具备公网场景下Edge通过SNAT/VPN等方式完成大数据迁移和对数的操作方法。本文以阿里云作为源端，Edge安装在阿里云E CS 进行举例。 步骤一：配置华为云VPN 参考站点入云VPN企业版的华为云控制台操作步骤，分别配置VPN网关、对端网关以及VPN连接。

查看更多 →

数据分析 使用DLI进行车联网场景驾驶行为数据分析 使用DLI将CSV数据转换为Parquet数据 使用DLI进行电商BI报表分析 使用DLI进行账单分析与优化 使用DLI Flink SQL进行电商实时业务数据分析 永洪BI对接DLI提交Spark作业

查看更多 →

可以IP地址为依据，对网站访问量进行统计。可对整个网站的文章进行访问量排名。可以统计访问的来源地。可以统计网站浏览者所使用的测览器类别、操作系统类别、系统分辨率等。 提供内容统计功能，可对管理员信息量、栏目新闻数等进行统计，对栏目信息量、分组信息量等进行统计并排名，能够统计当前在线管

查看更多 →

数据分析 使用Spark2x实现车联网车主驾驶行为分析 使用Hive加载HDFS数据并分析图书评分情况 使用Hive加载OBS数据并分析企业雇员信息 通过Flink作业处理OBS数据 通过Spark Streaming作业消费Kafka数据 通过Flume采集指定目录日志系统文件至HDFS

查看更多 →