如何在 DLI 中运行复杂PySpark程序？ 数据湖探索 （DLI）服务对于PySpark是原生支持的。 对于数据分析来说Python是很自然的选择，而在大数据分析中PySpark无疑是不二选择。对于JVM语言系的程序，通常会把程序打成Jar包并依赖其他一些第三方的Jar，同样的Py

查看更多 →

的资源发放。 轻开发 本方案全流程的高度可视化，没有复杂的代码编写过程，对技术人员的技术要求不高，可以大大降低大数据分析的门槛，只要懂数据库会SQL就能够进行大数据分析。 易运维 本方案为客户完全屏蔽了具体软件引擎的复杂度，让客户技术团队从传统的软件问题定位、处理、调优等运维工作

查看更多 →

授权大数据资产 对大数据资产进行敏感数据识别或数据脱敏则需要对实例下的数据库进行授权，该章节介绍如何对数据库进行授权操作。 前提条件 已开通DLI、 CSS 服务，且DLI、 CS S中已有资产，且对应子网下含有可用的IP配额。 授权大数据 这里以Elasticsearch大数据类型为例

查看更多 →

查询数据分析状态 功能介绍 根据数据集ID查询数据集的分析任务状态。 URI URI格式 GET /softcomai/datalake/v1.0/datasStatistics/status/{datasetId} 参数说明 参数名 是否必选 参数类型 备注 datasetId

查看更多 →

查询数据分析状态 功能介绍 根据数据集ID查询数据集的分析任务状态。 URI URI格式 GET /softcomai/datalake/v1.0/datasStatistics/status/{datasetId} 参数说明 参数名 是否必选 参数类型 备注 datasetId

查看更多 →

提交数据分析请求 功能介绍 管理员在数据集详情页面数据分析分页，提交数据分析请求。 URI URI格式 PUT /softcomai/datalake/v1.0/datasStatistics 参数说明 无。 请求 请求样例 PUT https://console.ulanqab

查看更多 →

网站数据分析场景 使用Superset从MySQL中获取数据进行分析

查看更多 →

落地。 部署架构 图2 部署架构 通过集成DWS服务，实现观远智能数据分析软件的数据处理功能（智能ETL），可通过拖拉拽形式完成数据的清洗、处理。从数据贴源、关联整合，到基于ETL的清洗、聚合、去重，再到数据逻辑的设计，生成ADS表，为数据分析的整体链路提供了便捷的0代码操作路径

查看更多 →

Hive连接适用于 MapReduce服务 ，本最佳实践为您介绍如何创建 MRS Hive连接器。 MySQL数据迁移到OBS CDM 支持表到OBS的迁移，本最佳实践介绍如何通过CDM将MySQL表数据迁移到OBS中。 参数传递 通过数据开发使用参数传递灵活调度CDM作业 如果CDM作业接

查看更多 →

大数据性能优化 HIVE优化 Spark性能优化 Flink性能优化 父主题： 云服务性能优化介绍

查看更多 →

如何通过主账号创建IAM账号 OCR服务支持IAM细粒度划分策略，主账号可以为子用户设置OCR服务的使用权限。 如果您需要将资源分配给企业中不同的员工或者应用程序使用，您可以使用IAM的用户管理功能，给员工或应用程序创建IAM用户。 父主题： 权限类

查看更多 →

如何通过Postman获取用户Token Postman是网页调试与辅助接口调用的工具，具有界面简洁清晰、操作方便快捷的特性，可以处理用户发送的HTTP请求，例如：GET，PUT、POST，DELETE等，支持用户修改HTTP请求中的参数并返回响应数据。 Token是用户的访问令

查看更多 →

如何通过父函数调用子函数？ 请参考示例通过父函数调用子函数。 父主题： 函数配置

查看更多 →

AstroZero如何解决高并发、大数据的性能问题？ AstroZero引擎层是基于GO语言实现的，GO语言的协程机制支持高并发。同时网络层采用了ELB、Nginx进行负载均衡，合理动态的分担服务压力来满足业务高并发需求。 父主题： 产品咨询类

查看更多 →

如何通过Postman获取用户Token Postman是网页调试与辅助接口调用的工具，具有界面简洁清晰、操作方便快捷的特性，可以处理用户发送的HTTP请求，例如：GET，PUT、POST，DELETE等，支持用户修改HTTP请求中的参数并返回响应数据。 Token是用户的访问令

查看更多 →

通过MCI访问服务失败，如何排查？ 若您在创建MCI后访问服务失败，请检查MCI对象是否配置成功。 请登录ELB控制台，根据MCI绑定的ELB实例ID，找到并单击对应的ELB实例名称进入elb监听器页面，找到对应的监听器单击“添加/编辑转发策略”，进入ELB监听器的转发策略页面，

查看更多 →

如何通过扩展完成SkyWalking的对接 通过以下对接SkyWalking的示例帮助您理解如何通过扩展API将函数与监控、可观察性、安全性和监管等工具集成。 当用已编译的语言实现扩展时，在本地编译生成二进制文件；使用非编译的语言实现扩展时，需要把对接第三方平台需要的依赖一起打包上传，且需要函数的运行时兼容。

查看更多 →

可以使用IAM为开发人员创建用户，通过授予仅能使用IoT数据分析服务的查看操作，控制他们对IoT数据分析服务资源的使用范围。 如果华为云账号已经能满足您的要求，不需要创建独立的IAM用户进行权限管理，您可以跳过本章节，不影响您使用IoT数据分析服务的其它功能。 IAM是华为云提供

查看更多 →

应用场景 大数据在人们的生活中无处不在，在IoT、电子商务、金融、制造、医疗、能源和政府部门等行业均可以使用华为云MRS服务进行大数据处理。 海量数据分析场景 海量数据分析是现代大数据系统中的主要场景。通常企业会包含多种数据源，接入后需要对数据进行ETL（Extract-Tran

查看更多 →

PI接口时，需要使用Token进行鉴权。 本章节指导用户如何通过Postman获取用户Token。更多参数说明请参见获取IAM用户Token。 前提条件 已安装并注册Postman。 如果您没有安装Postman，建议通过 API Explorer 获取用户Token。 如需安装，建

查看更多 →

如何通过Grafana连接GeminiDB Influx Grafana是一个跨平台、开源的 数据可视化 平台。用户配置连接的数据源之后，Grafana可以在网络浏览器里显示数据图表和警告。 本小节主要介绍通过Grafana连接GeminiDB Influx的方法。 操作步骤 服务端

查看更多 →