map(w => (w,1)).reduceByKey(_+_).collect() 您可以直接在命令行中指定Keytab和Principal以获取认证，定期更新登录票据和授权tokens，避免认证过期。示例如下： spark-shell --principal spark2x/hadoop

查看更多 →

HyG图管理API HyG算法API HyG Job管理API 原生算法API 图统计API 图操作API Job管理API Cypher操作API 交互式事务API 父主题： 业务面API

查看更多 →

常用命令 查看帮助信息 自动补全 交互式提示 元数据管理 查询当前版本 版本更新 日志管理 模板管理 管理OBS中的数据

查看更多 →

执行鉴权 描述 该接口使用华为云会议账号和密码鉴权，鉴权通过后生成一个Access Token。 当clientType取值为72时，同一个account，同时最多能创建64个Token。比如已经创建了64个Token，并且Token都在有效期内，再用同一个account创建一个

查看更多 →

大屏概述 数据大屏是 数据可视化 的重要展示形式和载体，能够展示企业的关键业务指标，如销售额、库存情况等。数据大屏通过动态图表、实时数字和交互式界面，使得复杂的数据信息变得易于理解和分析，广泛应用于展览中心、控制中心等重要场所，有效满足企业对于高可视化数据展示场景的需求。 界面功能 DataArts

查看更多 →

map(w => (w,1)).reduceByKey(_+_).collect() 您可以直接在命令行中指定Keytab和Principal以获取认证，定期更新登录票据和授权tokens，避免认证过期。示例如下： spark-shell --principal spark2x/hadoop

查看更多 →

Notebook提供了远程开发功能，通过开启SSH连接，用户本地IDE可以远程连接到ModelArts的Notebook开发环境中，调试和运行代码。 对于使用本地IDE的开发者，由于本地资源限制，运行和调试环境大多使用团队公共搭建的资源 服务器 ，并且是多人共用，这带来一定的环境搭建和维护成本。 而ModelAr

查看更多 →

使用gsql连接 gsql是 GaussDB 自带的客户端工具。使用gsql连接数据库，可以交互式地输入、编辑、执行SQL语句。具体连接方式请参考通过gsql连接实例。 集中式场景下：客户端工具通过连接主DN访问数据库。因此连接前，需获取主DN所在服务器的IP地址及端口号信息。正常业务使用禁止直接连接其他DN访问数据库。

查看更多 →

息的起始位置声明其具体类型：[NETWORK_ERROR]，[CLI_ERROR]，[USE_ERROR]，[OPENAPI_ERROR]和[APIE_ERROR]。各类错误的定位方法如下： [NETWORK_ERROR]：一般是HTTP请求异常，请检查网络连接； [CLI_ER

查看更多 →

Presto应用开发简介 Presto简介 Presto是一种开源、分布式SQL查询引擎，用于对千兆字节至PB级大小的数据源进行交互式分析查询。 Presto主要特点如下： 多数据源：Presto可以支持Mysql，Hive，JMX等多种Connector。 支持SQL：Presto完全支持ANSI

查看更多 →

在ModelArts使用 自定义镜像 创建训练作业时如何激活conda环境？ 由于训练作业运行时不是交互式的shell环境，因此无法直接使用“conda activate”命令激活指定的conda环境。但是，在自定义镜像中可参考以下命令激活conda环境： source /home/

查看更多 →

及线下数据库的异构数据进行探索。 您可以使用本文档提供API对 数据湖探索 进行相关操作，包括队列、SQL作业、Flink作业、Spark作业和跨源连接等等。支持的全部操作请参见API概览。 在调用 数据湖 探索API之前，请确保已经充分了解数据湖探索相关概念。详细信息请参见产品介绍。 父主题：

查看更多 →

”，生成组合应用。 继续在编辑组合应用画布页面，进行流任务的配置和编排。 可以进行交互式输入，进行组件配置。 完成后单击右上角的“保存”。 单击左上角组合应用名称旁的编辑按钮，在编辑组合应用弹窗中填写组合应用的名称和描述，然后单击“确定”，完成组合应用的创建。 父主题： 创建组合应用

查看更多 →

e。基于MapReduce构建的Hive和其他框架最适合长时间运行的批处理作业。 Impala主要特点如下： 支持Hive查询语言（HiveQL）中大多数的SQL-92功能，包括 SELECT，JOIN和聚合函数。 HDFS，HBase 和 对象存储服务 （OBS）存储，包括： HDFS文件格式：基于分隔符的text

查看更多 →

使用gsql连接 gsql是GaussDB自带的客户端工具。使用gsql连接数据库，可以交互式地输入、编辑、执行SQL语句。具体连接方式请参考通过gsql连接实例。 分布式场景下：客户端工具通过连接CN访问数据库。因此连接前，需获取CN所在服务器的IP地址及CN的端口号信息。客户

查看更多 →

模型训练输出的预测值，对应数据集的一个特征列。例如鸢尾花分类建模数据集提供了五列数据：花瓣的长度和宽度、花萼的长度和宽度、鸢尾花种类。其中，鸢尾花种类就是标签列。 C 超参 模型外部的参数，必须用户手动配置和调整，可用于帮助估算模型参数值。 M 模型包 将模型训练生成的模型进行打包。可以基于

查看更多 →

登录到计算节点对应的宿主机。 执行“docker ps -a”命令，查看NAMES为“k8s_db”开头容器的CONTAINER ID，该ID由数字和小写字母组成。 执行“docker exec -it {CONTAINER ID} bash”命令，登录到容器中，命令中的{CONTAINER

查看更多 →

集成50+电信领域AI算子&项目模板提升训练效率，降低AI开发门槛，让开发者快速完成模型开发和训练 AutoML自动完成特征选择、超参选择及算法选择，提升模型开发效率 高效开发工具JupyterLab和WebIDE：交互式编码体验、0编码数据探索及云端编码及调试 联邦学习&重训练，保障模型应用效果

查看更多 →

数据质量：数据质量组件中的质量作业和对账作业功能，不支持对接 MRS 集群存算分离的场景。 数据源简介 表2 数据源简介 数据源类型 简介 数据仓库 服务（DWS） 华为云DWS是基于Shared-nothing分布式架构，具备MPP大规模并行处理引擎，兼容标准ANSI SQL 99和SQL 2003，

查看更多 →

option参数加入相关值: -Dfile.encoding=gbk； 但是这种方法不能解决所有的乱码问题，考虑到实际项目中可能用到Scanner的交互式输入的场景比较少，另外一种方式就是将输出重定向到调试控制台里面：运行配置中Console设置项中的integrated改成internal值。

查看更多 →

e。基于MapReduce构建的Hive和其他框架最适合长时间运行的批处理作业。 Impala主要特点如下： 支持Hive查询语言（HiveQL）中大多数的SQL-92功能，包括SELECT，JOIN和聚合函数。 HDFS，HBase 和对象存储服务（OBS）存储，包括： HDFS文件格式：基于分隔符的text

查看更多 →