中软国际数据治理专业服务解决方案实践

应用数据接入周期性任务运行失败 问题描述 应用数据接入时，执行周期性任务，提示运行失败。 处理方法 检查数据文件是否按照要求放在pt_d=****/pt_h的文件夹下面。 父主题： 运营中心

查看更多 →

查询CDN上行推流质量数据接口 功能介绍 查询CDN上行推流质量数据。 最大查询跨度1天，最大查询周期7天。 返回的CDN上行推流质量数据列表粒度为1分钟。 接口约束 该接口暂只支持查询部署在新版视频直播服务上的 域名 的相关数据（不包含“华北-北京一”）。此约束条件仅适用于中国站。

查看更多 →

eros认证，则无需执行此命令。 kinit MRS 集群用户 例如，kinit hbaseuser。 直接执行HBase组件的客户端命令。 hbase shell 运行HBase客户端命令，实现A业务。 根据表1创建用户信息表user_info并添加相关数据。 create 'user_info'

查看更多 →

ros认证，则无需执行此命令。 kinit MRS集群用户 例如，kinit hiveuser。 运行Hive客户端命令，实现A业务。 内部表操作 执行以下命令登录Hive客户端命令行： beeline 根据表1创建用户信息表user_info并添加相关数据，例如： create

查看更多 →

如何避免对历史数据进行minor compaction？ 问题 如何避免对历史数据进行minor compaction？ 回答 如果要先加载历史数据，后加载增量数据，则以下步骤可避免对历史数据进行minor compaction： 加载所有历史数据。 将major compact

查看更多 →

/opt/client 配置环境变量。 source bigdata_env 如果集群为安全模式，执行以下命令进行用户认证。普通模式集群无需执行用户认证。 kinit 组件业务用户 执行以下命令访问Hindex。 hbase org.apache.hadoop.hbase.hindex

查看更多 →

如何对Hive表大小数据进行监控 问题 如何对Hive中的表大小数据进行监控？ 回答 当用户要对Hive表大小数据进行监控时，可以通过HDFS的精细化监控对指定表目录进行监控，从而到达监控指定表大小数据的目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

查看更多 →

get_running_execution_resource_usage(execution_id, show_datapoints=False)获取正在执行状态execution的监控数据，包括CPU和内存使用情况。

查看更多 →

单次 设置数据识别任务的执行策略： 单次：根据设置的执行计划，在设定的时间执行一次该识别任务。 每天：选择该选项，即在每天的固定时间执行该识别任务。 每周：选择该选项，即在设定的每周这一时间点执行该识别任务。 每月：选择该选项，即在设定的每月这一时间点执行该识别任务。 执行计划 立即执行

查看更多 →

集成ModuleSDK进行数据处理 操作场景 代码解析 注册节点 创建产品 修改代码 项目打包 制作镜像包 创建应用 部署应用 添加边缘设备 设备接入 父主题： 集成ModuleSDK(Java)

查看更多 →

运行时引擎数据库治理 WiseDBA展示的Schema与数据库实例Schema不一致 同一个SQL包重复显示 没有SQL脚本

查看更多 →

ExecutionRecord object 执行记录与日志 表4 ExecutionRecord 参数 参数类型 描述 id String 任务执行记录id result String 任务执行结果 progress Float 任务执行进度 run_time Long 任务执行时长 start_time

查看更多 →

/opt/client 配置环境变量。 source bigdata_env 如果集群为安全模式，执行以下命令进行用户认证。普通模式集群无需执行用户认证。 kinit 组件业务用户 执行以下命令访问Hindex。 hbase org.apache.hadoop.hbase.hindex

查看更多 →

如何对Hive表大小数据进行监控 问题 如何对Hive中的表大小数据进行监控？ 回答 当用户要对Hive表大小数据进行监控时，可以通过HDFS的精细化监控对指定表目录进行监控，从而到达监控指定表大小数据的目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

查看更多 →

ros认证，则无需执行此命令。 kinit MRS集群用户 例如，kinit hiveuser。 直接执行Hive组件的客户端命令。 beeline 运行Hive客户端命令，实现A业务。 内部表的操作： 根据表1创建用户信息表user_info并添加相关数据，例如： create

查看更多 →

运行过程监控与数据跟踪（敬请期待） 父主题： 运行数据管道

查看更多 →

string 急减速 IsNeutralSlide string 空挡滑行 IsNeutralSlideFinished string 空挡滑行结束 NeutralSlideTime string 空挡滑行时长(s) IsOverspeed string 超速 IsOverspeedFinished

查看更多 →

使用WiseDBA进行数据库纳管 前提条件 WiseDBA需要依赖Cloud Map，接入WiseDBA前需要先接入Cloud Map。 在AppStage运维中心的WiseDBA中申请数据库并创建Schema，具体请参见创建数据库实例及创建Schema。 操作步骤 使用Wise

查看更多 →

使用 TICS 联邦预测进行新数据离线预测 场景描述 准备数据 发布数据集 创建联邦预测作业 发起联邦预测 父主题： 纵向联邦建模场景

查看更多 →

别的单行数据过大超过1GB。 处理方法 确保源文件中的引号是成对的。 检查创建外表时命令中参数的取值、格式设置是否合理。 检查源文件单行数据是否超过1GB，参考报错行号进行检查，可根据实际情况手动调整或删除该行数据。 父主题： 数据导入/导出

查看更多 →

如何避免对历史数据进行minor compaction？ 问题 如何避免对历史数据进行minor compaction？ 回答 如果要先加载历史数据，后加载增量数据，则以下步骤可避免对历史数据进行minor compaction： 加载所有历史数据。 将major compact

查看更多 →