配置Flink通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后，即可在Flink客户端访问OBS并行文件系统并运行作业。 Flink对接OBS 使用安装客户端的用户登录Flink客户端安装节点。 执行如下命令初始化环境变量。 source

查看更多 →

配置CORS实现跨域访问OBS OBS提供HTML5协议中的CORS设置，帮助用户实现跨域访问。 您可以新建CORS规则，也可以从其他桶复制已有CORS规则。 背景知识 跨域是指不同 域名 之间相互访问。 跨域访问是浏览器出于安全考虑而设置的一个限制，即同源策略。由于JavaScri

查看更多 →

配置Hudi通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后，即可在spark-shell中创建Hudi COW表存储到OBS中。 Hudi对接OBS 使用客户端安装用户登录客户端安装节点。 配置环境变量。 source 客户端安装目录/bigdata_env

查看更多 →

如果集群为安全模式，执行以下命令进行用户认证，该用户需具有OBS目录的读写权限。普通模式集群无需执行用户认证。 kinit HDFS组件操作用户 在HDFS命令行显式添加要访问的OBS文件系统。 例如： 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径

查看更多 →

如果集群为安全模式，执行以下命令进行用户认证，该用户需具有OBS目录的读写权限。普通模式集群无需执行用户认证。 kinit HDFS组件操作用户 在Yarn命令行显式添加要访问的OBS文件系统。 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径

查看更多 →

Turbo中。 用户需要创建开发环境Notebook，并绑定SFS Turbo，以便能够通过Notebook访问SFS Turbo服务。随后，通过Notebook将OBS中的数据上传至SFS Turbo，并对存储在SFS Turbo中的数据执行编辑操作。 创建Notebook 创建开发

查看更多 →

Array of strings 允许远程接入的公网IP地址列表，最多5个。 service 否 String 支持的服务，枚举值如下： NOTEBOOK：可以通过https协议访问Notebook。 SSH：可以通过SSH协议远程连接Notebook。 key_pair_names 否

查看更多 →

允许通过SSH协议访问Notebook的公网IP地址白名单列表，默认都可以访问。当配置指定IP后，则仅允许IP所在的客户端实现对Notebook的访问。 dev_service String 访问Notebook的途径，枚举值如下： NOTEBOOK：可以通过https协议访问Notebook。

查看更多 →

ModelArts允许用户在Notebook实例中更改SSH配置信息，Notebook实例状态需在“停止”时才可以修改。 在创建Notebook实例时，未配置SSH远程连接，创建完成后，需要开启远程连接时，则可以在Notebook的实例详情页打开SSH的配置信息开关；如果用户设置了允许远程连接No

查看更多 →

保存Notebook实例 通过预置的镜像创建Notebook实例，在基础镜像上安装对应的自定义软件和依赖，在管理页面上进行操作，进而完成将运行的实例环境以容器镜像的方式保存下来。镜像保存后，默认工作目录是根目录“/”路径。 保存的镜像中，安装的依赖包不丢失，持久化存储的部分（ho

查看更多 →

如何在Notebook中上传下载OBS文件？ 在Notebook中可以通过调用ModelArts的Moxing接口或者SDK接口与OBS交互，将Notebook中的文件上传至OBS，或者下载OBS中的文件至Notebook中。 图1 Notebook中上传下载OBS文件 使用OBS客户端上传文件的操作指导：上传文件

查看更多 →

如果您需要对除ModelArts和OBS之外的其它服务授权，IAM支持服务的所有策略请参见权限策略。 在IAM控制台创建用户组并授权。 在IAM控制台创建用户组之后，将步骤1中创建的自定义策略授权给该用户组。 创建用户并加入用户组。 在IAM控制台创建用户，并将其加入3中创建的用户组。 用户登录并验证权限。

查看更多 →

如果您需要对除ModelArts和OBS之外的其他服务授权，IAM支持服务的所有策略请参见权限策略。 在IAM控制台创建用户组并授权。 在IAM控制台创建用户组之后，将步骤1中创建的自定义策略授权给该用户组。 创建用户并加入用户组。 在IAM控制台创建用户，并将其加入3中创建的用户组。 用户登录并验证权限。

查看更多 →

效、快速的构建一个可用模型。 准备工作 配置ModelArts访问授权 创建OBS桶 开发环境 创建Notebook 使用JupyterLab打开Notebook调试代码 通过VS Code远程使用Notebook实例 算法管理 创建算法 训练模型 创建生产训练作业 创建调试训练作业

查看更多 →

tebook环境具有一定的存储空间，可与OBS中的数据相互传递。 创建Notebook 创建开发环境Notebook实例，具体操作步骤请参考创建Notebook实例。 镜像选择已注册的 自定义镜像 ，资源类型选择创建好的专属资源池，规格推荐选择“Ascend: 8*ascend-snt9b”。

查看更多 →

obsutil需通过公网下载，或者从其他可以访问公网的云 服务器 下载后传到当前云服务器安装。 前提条件 在登录E CS 云服务器之前，请确保您已购买云服务器。 操作流程 图1 在Linux ECS上使用obsutil通过内网访问OBS的流程 操作步骤 登录Linux ECS 登录华为云，在页面右上角单击“控制台”，进入“控制台”页面。

查看更多 →

使用账号登录OBS，并将对应OBS桶的访问权限授予该IAM用户。详细操作指导请参见：被授权用户。 IAM用户获得权限后，登录ModelArts管理控制台，删除该实例，然后重新使用此OBS路径创建Notebook实例。 报错503 如果出现503错误，可能是由于该实例运行代码时比较耗费资源。建议先停止当前Notebook实例，然后重新启动。

查看更多 →

训练作业已完成 使用开发环境 创建Notebook。 图26 创建Notebook 配置Notebook时，如果需要在Notebook内直接查看SFS Turbo内文件，请不要填写”存储配置-子目录挂载”一栏。 图27 配置Notebook 打开notebook即可管理开发环境。 图28

查看更多 →

请提交工单联系华为工程师开启节点绑定。 Standard Notebook Notebook实例删除后不可恢复，实例删除后，挂载目录下的数据也将一并删除，请谨慎操作。 Notebook实例状态必须在“停止”中，才能变更Notebook实例镜像。 Notebook实例状态只有处于“

查看更多 →

支持通过JupyterLab工具在线打开Notebook，具体请参见通过JupyterLab在线使用Notebook实例进行AI开发。 支持本地IDE的方式开发模型，通过开启SSH连接，用户本地IDE可以远程连接到ModelArts的Notebook开发环境中，调试和运行代码。本地IDE方式不影响用户的编码习惯

查看更多 →

确认是否已经是内网访问OBS 具体方法请参见如何判断是否内网访问OBS？ 下载obsutil obsutil最新版本和下载链接请参见下载obsutil。 配置obsutil 使用obsutil之前，您需要配置obsutil与OBS的对接信息，包括OBS终端节点（Endpoint）和访问密钥（AK和SK）。

查看更多 →