基于Slurm构建泛HPC场景云上云下资源协同解决方案

xDM-F数据同步功能使用指引 建议您在使用xDM-F数据同步功能前，先阅读本章节内容。 本章节详解了两种实现xDM-F数据同步的业务流程，可助您更顺畅地完成xDM-F模型和实例数据同步。 推荐业务流程一 图1 xDM-F数据同步推荐业务流程一 授权应用责任人为企业级管理员。 在

查看更多 →

实体配置流程指引 实体指现实世界中客观存在的并可以相互区分的对象或事物，可以是具体的人、事或物，也可以是抽象的概念或联系。这些独立事物个体的特性称为实体属性，每个实体都具有多个属性。在LinkX-F中，这些独立的事物个体都可以看做是数据实体。 本章节介绍了数据实体的配置流程图，如

查看更多 →

在线调试：设备接入控制台提供了产品在线调试的功能，您可以根据自己的业务场景，在开发真实应用和真实设备之前，使用应用模拟器和设备模拟器对数据上报和命令下发等场景进行调测，也可以在真实设备开发完成后使用应用模拟器验证业务流。 目前仅标准版支持MQTT协议的在线调试。 父主题： 产品开发

查看更多 →

jar命令来提交拓扑的一种方式，极大地方便了拓扑的部署和提交，缩短了业务开发周期。 基本语法说明 使用Flux定义拓扑分为两种场景，定义新拓扑和定义已有拓扑。 使用Flux定义新拓扑 使用Flux定义拓扑，即使用yaml文件来描述拓扑，一个完整的拓扑定义需要包含以下几个部分： 拓扑名称 定义拓扑时需要的组件列表

查看更多 →

应用开发入门指引 1、熟悉AstroZero环境 使用Astro轻应用进行应用开发，一般分为开发->测试->上线三个阶段。每个阶段都会有独立的环境，让各阶段数据隔离，保证正式上线版本稳定。各环境具体介绍，请参见开发环境介绍。 2、了解命名空间 由于不同租户间的数据可打包共享，为了

查看更多 →

Demo提供了调用SDK接口的样例代码。使用指导请参考 IoT Device SDK使用指南（Java）。 IoT Device SDK(Java) IoT Device SDK(C) 设备可以通过集成IoT Device SDK(C)接入物联网平台, Demo提供了调用SDK接口的样例代码。使用指导请参考 IoT

查看更多 →

使用Kubectl命令操作集群 kubectl kubectl是Kubernetes集群的命令行工具，您可以将kubectl安装在任意一台机器上，通过kubectl命令操作Kubernetes集群。 CCE集群的kubectl安装请参见通过kubectl连接集群。连接后您可以执行kubectl

查看更多 →

查看集群的监控信息 在集群列表查看集群和集群节点的监控信息。 登录 云搜索服务 管理控制台。 在左侧导航栏选择“集群管理”，进入对应类型的集群列表。 在集群列表，选择目标集群，单击操作列“监控信息”查看集群和节点监控信息。 图1 查看监控信息 选择“资源实例”页签，查看集群的监控指标。

查看更多 →

大数据数据迁移 数据迁移失败，提示超过 DLI 网管流控上限 部分表迁移失败，报错：CRC Check failed 部分表迁移失败，报错：no more field nodes for for field %s and vector %s

查看更多 →

大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：

查看更多 →

大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 查看并导出执行结果 自定义参数说明

查看更多 →

对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Presto对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS Logstash对接OBS 父主题： 大数据场景下使用OBS实现存算分离

查看更多 →

大数据场景下使用OBS实现存算分离 大数据场景下使用OBS实现存算分离方案概述 操作流程 对接大数据平台 对接大数据组件 迁移HDFS数据至OBS

查看更多 →

对接大数据平台 支持的大数据平台简介 华为云 MRS 对接OBS Cloudera CDH对接OBS Hortonworks HDP对接OBS 父主题： 大数据场景下使用OBS实现存算分离

查看更多 →

在Workflow中使用大数据能力（DLI/MRS） 功能介绍 该节点通过调用MRS服务，提供大数据集群计算能力。主要用于数据批量处理、模型训练等场景。 应用场景 需要使用MRS Spark组件进行大量数据的计算时，可以根据已有数据使用该节点进行训练计算。 使用案例 在华为云MRS

查看更多 →

使用OpenSearch集群搜索数据 使用DSL语言在OpenSearch中搜索数据 使用SQL语言在OpenSearch中搜索数据 父主题： 使用OpenSearch搜索数据

查看更多 →

使用HBase Shell访问集群 用户在 弹性云服务器 里可以通过手动安装客户端或一键部署客户端的方法，使用HBase Shell访问集群。如果集群开启了安全通道，连接集群的方法请参考HBase安全集群连接步骤。 一键部署客户端 准备Linux弹性 云服务器 。 使用一键部署客户端工具

查看更多 →

Storm-Kafka开发指引 操作场景 本文档主要说明如何使用Storm-Kafka工具包，完成Storm和Kafka之间的交互。包含KafkaSpout和KafkaBolt两部分。KafkaSpout主要完成Storm从Kafka中读取数据的功能；KafkaBolt主要完成Storm向Kafka中写入数据的功能。

查看更多 →

tab方式下，登录用户和所上传keytab所属用户必须是同一个用户。 拓扑提交成功后，请登录HDFS集群查看/user/foo目录下是否有文件生成。 如果使用票据登录，则需要使用命令行定期上传票据，具体周期由票据刷新截止时间而定，步骤如下。 在安装好的storm客户端目录的Storm/storm-0

查看更多 →

IDEA开发环境，参见准备Storm应用开发环境。 在Linux环境下安装Storm客户端。 集群的Master节点或者Core节点使用客户端可参考集群内节点使用MRS客户端，MRS集群外客户端的安装操作可参考集群外节点使用MRS客户端。 如果集群启用了安全服务，需要从管理员处获取一个“人机”用户，用于登录 FusionInsight

查看更多 →

屏广告等。使用前请通过您的合作经理向华为云提交审核申请。 社交媒体 不允许使用。不得使用华为云能力认证徽章或者HCPN合作伙伴徽章作为伙伴社交媒体的头像或标识。如需在用在社交媒体上推广的营销资料，合作伙伴需遵从本指引有关规定使用。 促销物品 不允许使用。 如超出以上使用场景，请联系接口的华为云合作伙伴经理寻求指导。

查看更多 →