在ModelArts中，用户的数据都是存放在OBS桶中，而训练作业运行在容器中，无法通过访问本地路径的方式访问OBS桶中的文件。 处理方法 读取文件报错，您可以使用Moxing将数据拷贝至容器中，再直接访问容器中的数据。请参见步骤1。 您也可以根据不同的文件类型，进行读取。请参见读取“json”

查看更多 →

content String 文件内容（返回的文件内容为encoding指定的编码格式编码后的内容）。 encoding String 内容编码格式(固定base64)。 file_name String 文件名。 file_path String 文件相对路径。 file_type

查看更多 →

<==== 注意这里，数组结果是根据指定任务的stdout动态“计算出来的” - [0, 1] 真正get到的result是指定步骤的标准输出，即“stdout”。 例如 job-1 的stdout为“1 2 3 4”，那么上一步的结果就是 vars_iter:

查看更多 →

<==== 注意这里，数组结果是根据指定任务的stdout动态“计算出来的” - [0, 1] 真正get到的result是指定步骤的标准输出，即“stdout”。 例如 job-1 的stdout为“1 2 3 4”，那么上一步的结果就是 vars_iter:

查看更多 →

错误id，用于转换。 code int 32位整数 错误码，跟错误id对应，具体含义参考错误码。 param Object param 对象 失败响应的附带参数。 父主题： 硬终端开放性

查看更多 →

填写连接器的描述信息，用于识别不同的连接器。 协议 选择FTP连接所使用的协议，当前支持选择“FTP”和“SFTP”。 主机IP FTP 服务器 的IP地址。 端口 FTP协议中，默认使用TCP端口中的20和21两个端口，其中20端口用于传输数据，21端口用于传输控制信息（命令）。 用户名 FTP用户名。 密码

查看更多 →

SSH文件传输协议，它提供了一个安全的连接来传输文件，并在本地和远程系统上遍历文件系统。 默认情况下，FTP协议使用TCP端口中的20和21这两个端口，其中20端口用于传输数据，21端口用于传输控制信息（命令）。是否使用20端口作为传输数据的端口与FTP使用的传输模式有关。如果采

查看更多 →

填写连接器的描述信息，用于识别不同的连接器。 支持的动作 写入文件 配置参数 参数 说明 目录路径 填写FTP服务器下文件的相对路径。 文件名 填写需要写入的文件名。 写入内容 填写需要写入的内容。 写入策略 选择需要写入的策略 覆写：覆盖同名文件内容; 追加：在同名文件末尾追加内容;

查看更多 →

读取HDFS指定文件内容 功能简介 获取HDFS上某个指定文件的内容。过程为： 使用FileSystem实例的open方法获取读取文件的输入流。 使用该输入流读取HDFS的指定文件的内容。 在完成后，需关闭所申请资源。 代码样例 如下是读文件的代码片段，详细代码请参考com.huawei

查看更多 →

读取HDFS指定文件内容 功能简介 获取HDFS上某个指定文件的内容。过程为： 使用FileSystem实例的open方法获取读取文件的输入流。 使用该输入流读取HDFS的指定文件的内容。 在完成后，需关闭所申请资源。 代码样例 如下是读文件的代码片段，详细代码请参考com.huawei

查看更多 →

读取HDFS指定文件内容 功能简介 获取HDFS上某个指定文件的内容。过程为： 使用FileSystem实例的open方法获取读取文件的输入流。 使用该输入流读取HDFS的指定文件的内容。 在完成后，需关闭所申请资源。 代码样例 如下是读文件的代码片段，详细代码请参考com.huawei

查看更多 →

读取HDFS指定文件内容 功能简介 获取HDFS上某个指定文件的内容。过程为： 使用FileSystem实例的open方法获取读取文件的输入流。 使用该输入流读取HDFS的指定文件的内容。 在完成后，需关闭所申请资源。 代码样例 如下是读文件的代码片段，详细代码请参考com.huawei

查看更多 →

jar 如何读取上传文件 Spark可以使用SparkFiles读取 –-file中提交上来的文件的本地路径，即：SparkFiles.get("上传的文件名")。 Driver中的文件路径与Executor中获取的路径位置是不一致的，所以不能将Driver中获取到的路径作为参数传给Executor去执行。

查看更多 →

exist，该日志说明文件在操作的过程中被删除了。 搜索HDFS的NameNode的审计日志（Active NameNode的/var/log/Bigdata/audit/hdfs/nn/hdfs-audit-namenode.log）搜索文件名，确认文件的创建时间。 搜索文件创建到出现异

查看更多 →

之后使用，则文件以及文件的父目录（NFS上的文件所在的父目录，非集群节点上的软连接），必须允许yarn_user可以访问，否则程序中无法获取文件内容。当集群为启用Kerberos认证的集群时，则文件的权限必须允许提交程序的用户访问。 处理步骤 以root用户登录集群的Master节点。

查看更多 →

指定角色或用户组：仅指定的角色或用户组的成员才能访问相应内容。如果选择此项，需要在下面输入框中输入指定的角色或用户组。 指定用户：仅指定的用户才能访问相应内容。如果选择此项，需要在下面输入框中输入指定的用户。 权限：选择经过授权的用户的“读取”和“写入”权限。 绑定弹性云服务器的私网IP。

查看更多 →

指定角色或用户组：仅指定的角色或用户组的成员才能访问相应内容。如果选择此项，需要在下面输入框中输入指定的角色或用户组。 指定用户：仅指定的用户才能访问相应内容。如果选择此项，需要在下面输入框中输入指定的用户。 权限：选择经过授权的用户的“读取”和“写入”权限。 绑定弹性云服务器的私网IP。

查看更多 →

连接参数 参数名 说明 示例 FTP服务器的IP FTP服务器的IP地址。 ftpName FTP服务器端口 FTP服务器的端口号。 22 FTP用户名 访问FTP服务器的用户名。 root FTP密码 访问FTP服务器的密码。 xxxx FTP模式 设置FTP访问模式，“ACTIVE

查看更多 →

已在待上传文件的云服务器中搭建 FTP 服务。 如果您的云服务器为 Windows 操作系统，具体操作请参考 搭建FTP 站点（Windows）。 如果您的云服务器为 Linux 操作系统，具体操作请参考 搭建FTP 站点（Linux）。 操作步骤 Linux操作系统的本地主机安装ftp。

查看更多 →

放开相应的端口范围，数据传输将会失败。 pasv_max_port=0，设置在PASV工作方式下，数据连接可以使用的端口范围的上界。默认值为0，表示任意端口。 pasv_mim_port=0，设置在PASV工作方式下，数据连接可以使用的端口范围的下界。默认值为0，表示任意端口。

查看更多 →

如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录 FusionInsight Manager系统，具体请参见访问集群Manager。

查看更多 →