推荐系统OBS文件夹规范 使用推荐系统时，需要在OBS创建桶并导入离线数据，同时作业所产生的数据也会保存在OBS中。为了方便您快速定位文件路径，建议您按照如下结构准备数据创建文件夹，并上传至OBS桶。 OBS文件夹示例 自定义OBS桶名 │ obs-offline-data

查看更多 →

查询和管理OpenSearch集群日志 为了方便用户使用日志定位问题， 云搜索 服务提供了日志备份、日志采集和日志查询功能。 日志备份可以定期将集群的日志存储在OBS桶中，通过OBS可以直接下载需要的日志文件，进行问题分析定位。 日志采集可以实时将集群的日志存放到 CSS 集群中，方便通过Kibana进行日志搜索分析。

查看更多 →

WebUI查看Hive作业对应的SQL语句？ 如何查看指定Yarn任务的日志？ 添加Hive服务后，提交hivesql/hivescript作业失败如何处理？ Spark Job对应的运行日志保存在哪里？ 执行Spark任务报内存不足告警如何处理？ 修改hdfs-site.xml文件后未及时重启NameNode导致产生告警如何处理？

查看更多 →

修改媒资文件在OBS的存储模式 功能介绍 修改媒资文件在OBS的存储模式。 媒资上传默认为标准存储模式，支持转为低频或者归档存储模式。 低频存储可恢复为标准存储或者降级为归档存储。 归档存储仅支持恢复为标准存储，不支持直接转为低频存储。 低频模式最低存储时间为30天，归档模式最低

查看更多 →

MapReduce对接OBS文件系统 使用本章节前已参考配置存算分离集群（委托方式）或配置存算分离集群（AKSK方式）完成存算分离集群配置。 登录 MRS 管理控制台，单击集群名称进入集群详情页面。 选择“组件管理 > Mapreduce”，进入Mapreduce服务“全部配置”页面，在

查看更多 →

JupyterLab目录的文件、Terminal的文件和OBS的文件之间的关系 JupyterLab目录的文件与Terminal中work目录下的文件相同。即用户在Notebook中新建的，或者是从OBS目录中同步的文件。 挂载OBS存储的Notebook，JupyterLab目录的文件可以与OB

查看更多 →

系统审计日志支持备份到OBS桶吗？ 支持。 目前不仅支持通过FTP/SFTP备份到同一个VPC网络内的 服务器 中，还支持将数据备份到同一个VPC网络内的OBS桶中。 系统数据备份详情，请参见云 堡垒机 日志备份方式。 父主题： 审计运维日志

查看更多 →

批量修改LTS日志文件转储时区 您在LTS上经常会执行日志接入、日志告警、日志转储等配置操作。有些操作是需要重复多次配置，但目前LTS还没有提供控制台批量操作功能，这时您可以通过Python脚本结合LTS API接口实现自定义的批量操作。 使用场景 当用户创建了1000条日志转储的OB

查看更多 →

ModelArts通过OBS的API访问OBS中的文件，算内网还是公网？ 在同一区域，ModelArts通过OBS的API访问OBS中的文件属于内网通信，不消耗公网流量费。 若是通过互联网从OBS下载数据到本地，这时候会产生OBS公网流量费。OBS的详细计费说明可以参见计费项。 父主题：

查看更多 →

OBS 对象存储服务 （Object Storage Service，OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。详情参考帮助文档。本次实践，使用OBS来存储xxxx服务平台上传的图片、文件或者通过接口调用生成的json文件。 登录华为云OBS管理控制台

查看更多 →

配置日志级别与文件大小 操作场景 如果需要在日志中调整记录的日志级别，则管理员可以修改 FusionInsight Manager的日志级别。对于某个具体的服务，除了可以修改日志级别，还可以修改日志文件大小，防止磁盘空间不足日志无法保存。 对系统的影响 保存新的配置需要重启服务，此时对应的服务不可用。

查看更多 →

中的数据集。 动态挂载OBS并行文件系统有什么限制 OBS提供两种桶，对象存储（对象桶）和并行文件系统PFS。 ModelArts的Notebook仅支持挂载OBS的并行文件系统，挂载至Notebook容器“/data/”的子目录下。 动态挂载OBS并行文件系统操作 方式1：通过ModelArts控制台操作

查看更多 →

com（已备案） OBS桶 版本号为3.0以上的OBS存储桶，桶策略为公共读，未开通静态网站托管。 obs-doc-test 实施步骤 将网站所需图片、软件包等静态资源存储至已准备的OBS桶中，可通过OBS控制台、OBS Browser、SDK等多种方式创建桶、上传文件，具体操作请参考OBS帮助文档。

查看更多 →

删除指定桶的对象、上传对象 对象名 请输入对象名称，例如123.png。当前仅支持下载txt，csv，png，jpg和jpeg格式的文件。obs中没有文件系统中的文件和文件夹概念，对象名称中的“/”是用来模拟文件系统中的文件夹概念的，“test/123.jpg”的对象名称（Key）仍然是“test/123

查看更多 →

的均是OBS路径。 “数据集输入位置”即原始数据存储的OBS路径。 “数据集输出位置”，指在ModelArts完成数据标注后，执行数据集发布操作后，在此指定路径下，按数据集版本，生成相关目录。包含ModelArts中使用的Manifest文件（包含数据及标注信息）。详细文件说明可

查看更多 →

图3 绑定委托 创建OBS文件系统 登录OBS控制台。 选择“并行文件系统 > 创建并行文件系统”。 填写文件系统名称，例如“mrs-demo01”。 其他参数请根据需要填写。 图4 创建并行文件系统 单击“立即创建”。 在OBS控制台并行文件系统列表中，单击文件系统名称进入详情页面。

查看更多 →

properties 在文件中添加OBS日志级别配置： log4j.logger.org.apache.hadoop.fs.obs=WARN log4j.logger.com.obs=WARN 图4 添加OBS日志级别 使用Spark Shell读取OBS文件 使用安装客户端用户登录客户端安装节点。

查看更多 →

组件业务用户 在hdfs命令行显式添加要访问的OBS文件系统。 例如： 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径 使用以下命令上传客户端节点“/opt/test.txt”文件到OBS文件系统路径下。 hdfs dfs -put

查看更多 →

常见问题 在哪里可以获取AK和SK？ 如何获取子用户IAM的用户ID？ 是否可以同时装两个不同站点的OBS Browser+工具？ OBS Browser+与OBS Browser的不同之处？ OBS Browser+支持迁移OBS Browser保存的账号信息和任务信息吗？ 为

查看更多 →

对象存储（OBS） 对象存储概述 通过静态存储卷使用已有对象存储 通过动态存储卷使用对象存储 设置对象存储挂载参数 对象存储卷挂载设置自定义访问密钥（AK/SK） 父主题： 存储

查看更多 →

对象存储（OBS） 对象存储概述 通过静态存储卷使用已有对象存储 通过动态存储卷使用对象存储 设置对象存储挂载参数 对象存储卷挂载设置自定义访问密钥（AK/SK） 父主题： 存储

查看更多 →