数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库类流程化脚本 更多内容
  • 开发SQL脚本

    下载中心查看下载记录。 脚本执行完成后在“执行结果”中,单击“转储”可以将脚本执行结果转储为 CS V和JSON格式的结果文件到OBS中,详情请参见表3。 转储功能依赖于OBS服务,如无OBS服务,则不支持该功能。 当前仅支持转储SQL脚本查询(query)语句的结果。 DataArts

    来自:帮助中心

    查看更多 →

  • 开发Shell脚本

    在数据开发主界面的左侧导航栏,选择“数据开发 > 脚本开发”。 在脚本目录中,双击脚本名称,进入脚本开发页面。 在编辑器上方,配置如表1所示的属性。 表1 Shell脚本属性 参数 说明 主机连接 选择执行Shell脚本的主机。 单击右侧的“输入参数”,可以输入执行Shell脚本的参数和交互式参数。 表2

    来自:帮助中心

    查看更多 →

  • 导出导入脚本

    开发 > 脚本开发”。 单击脚本目录中的,选择“显示复选框”。 勾选需要导出的脚本,单击 > 导出脚本。导出完成后,即可通过浏览器下载地址,获取到导出的zip文件。 图1 选择并导出脚本 在弹出的“导出脚本”界面,选择需要导出的脚本的状态,单击“确定”。 图2 导出脚本 导入脚本

    来自:帮助中心

    查看更多 →

  • 没有SQL脚本

    没有SQL脚本 问题现象 任务创建成功,但是没有sql脚本执行。 处理方法 请自行确认组合包中是否存在除了版本名一样其他字段都一模一样的SQL包,打包禁止出现这种场景,否则获取将包文件信息失败。 或是运维中心存在重复推包的情况,导致存在重复,系统会随机选择一个包执行,可能是执行一个异常的包,没有脚本就是空包。

    来自:帮助中心

    查看更多 →

  • 脚本文件

    脚本文件 本脚本压缩包为 DirSyncScript.zip,包含如下四个文件: sync.sh : 主程序。 sync.conf : 配置文件,用于配置具体需要同步的目录、目的 服务器 地址等信息。 start_inotifywait.sh : inotify监控脚本脚本启动后将运行在后台监控文件夹变化并同步。

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练中的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于DevServer适配PyTorch NPU训练指导(6.3.906)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 yaml配置文件参数配置说明 各个模型深度学习训练加速框架的选择 模型NPU卡数取值表 各个模型训练前文件替换 父主题: 主流开源大模型基于DevServer适配LlamaFactory PyTorch NPU训练指导(6.3.907)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导(6.3.908)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 Yaml配置文件参数配置说明 模型NPU卡数、梯度累积值取值表 各个模型训练前文件替换 NPU_Flash_Attn融合算子约束 录制Profiling 父主题: 主流开源大模型基于DevServer适配LlamaFactory PyTorch NPU训练指导(6.3

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导(6.3.909)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练中的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Lite Cluster适配PyTorch NPU训练指导(6.3.909)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Standard+OBS适配PyTorch NPU训练指导(6.3.909)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 Yaml配置文件参数配置说明 模型NPU卡数、梯度累积值取值表 各个模型训练前文件替换 NPU_Flash_Attn融合算子约束 BF16和FP16说明 录制Profiling 父主题: 主流开源大模型基于DevServer适配LlamaFactory PyTorch

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练的数据集预处理说明 训练的权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Standard+OBS适配PyTorch NPU训练指导(6.3.910)

    来自:帮助中心

    查看更多 →

  • 训练脚本说明

    训练脚本说明 训练启动脚本说明和参数配置 训练数据集预处理说明 训练权重转换说明 训练tokenizer文件说明 父主题: 主流开源大模型基于Standard+OBS适配PyTorch NPU训练指导(6.3.907)

    来自:帮助中心

    查看更多 →

  • 脚本开发流程

    脚本开发的使用流程如下: 图1 脚本开发流程 新建脚本:新建相应类型的脚本。具体请参见新建脚本。 开发脚本:基于新建的脚本,进行脚本的在线开发、调试和执行。具体请参见开发脚本。 提交版本并解锁:脚本开发完成后,您需要提交版本并解锁,提交版本并解锁后才能正式地被作业调度运行,便于其他开发者修改。具体请参见提交版本。

    来自:帮助中心

    查看更多 →

  • 什么是脚本

    ,单击即可启用脚本,该图标高亮时,表示当前脚本已被启用。 ,单击即可禁用脚本,该图标非高亮时,表示当前脚本未启用。 说明: 脚本开发完成后,需要启用脚本。只有启用状态的脚本,才能在被其他资源(如服务编排、标准页面)调用时,搜索到。 保存脚本。 另存为脚本。 设置脚本属性,如可见性、是否开启允许覆盖等。 执行脚本。 /

    来自:帮助中心

    查看更多 →

  • 如何管理脚本

    最近一次修改脚本的时间。 操作 可对脚本进行如下操作。 单击,可进入脚本编辑器。如果脚本有多个版本,则进入处于启用状态的脚本编辑器页面;如果多个版本都未启用,则进入最近版本的脚本编辑器页面。 单击,可启用该脚本。 单击,可禁用该脚本。启用脚本后,服务编排、前端页面等才可调用该脚本。 单击,可删除脚本。

    来自:帮助中心

    查看更多 →

  • 查看脚本引用

    在数据开发主界面的左侧导航栏,选择“数据开发 > 脚本开发”。 如要查看某个脚本引用情况,右键单击待查看的脚本,选择“查看引用”,弹出“引用列表”窗口。 如要查看文件夹下的所有脚本引用情况,右键单击待查看的文件夹,选择“查看引用”,弹出“查看引用”窗口。 在弹出的窗口,可以查看该脚本或该文件夹下所有脚本被引用的情况。

    来自:帮助中心

    查看更多 →

  • 开发Python脚本

    hon脚本时,参数会向脚本传递。参数之间使用空格分隔,例如:a b c。此处的“参数”需要在Python脚本中引用,否则配置无效。 支持设置脚本责任人 单击编辑器右侧的“脚本基本信息”,可设置脚本的责任人和描述信息。 脚本内容大小不能超过16MB。 企业模式下,支持从脚本开发界面

    来自:帮助中心

    查看更多 →

  • 数据湖治理平台设计

    数据开发 数据开发支持数据管理、脚本开发、作业开发、资源管理、作业调度、运维监控等操作,帮助用户轻松完成整个数据的处理分析流程。 数据管理 支持管理DWS、 DLI MRS Hive等多种 数据仓库 。 支持可视化和DDL方式管理数据库表。 脚本开发 提供在线脚本编辑器,支持多人协作进行SQ

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了