中软国际数据治理专业服务解决方案实践

数据处理 在数据服务首页左侧导航，选择“首页>我的数据集”。 在“我的数据集”页签单击新增的数据集。 单击“应用数据集 > 数据处理”。 进入“新增作业”界面，如图1所示。 参数说明如下所示： 作业名称：自定义输入。 开发环境：选择通用编辑器。 作业位置：存储作业脚本的数据湖OB

查看更多 →

数据处理 数据处理支持什么类型脚本？ 运行环境如何安装Python包？ 数据处理可以处理哪些数据源中的数据？ 用户注销后，是否会清理数据服务对应的个人数据以及资源，是否还会计费？ 父主题： 常见问题

查看更多 →

数据处理 Python API接口 管理新增作业 创建开发环境 父主题： 管理基础工具

查看更多 →

处理呼叫数据 如果您需要获取呼叫数据，需要在服务端处理集成地址表单提交，并增加处理逻辑返回到页面。由于服务端处理存在多样性，此处提供传递的主要呼叫参数说明，请参见表1。代码样例为JAVA+springboot+模板（thymeleaf）方式，请参见后续步骤。 表1 参数说明 参数名称

查看更多 →

数据处理 数据处理介绍 创建工作流 启动工作流

查看更多 →

数据处理 数据处理简介 数据批导 数据处理 回放仿真

查看更多 →

C#代码样例 AXB模式 AX模式 AXE模式 AXYB模式 父主题： 代码样例

查看更多 →

秒。 原因分析 开启线程池时，SQL请求需通过任务队列进入worker线程处理，在低并发长连接时并无性能优化作用，可能导致由于线程池调度机制偶现短暂延迟。 在高并发或大量短连接的情况下，可能会因为大量创建和销毁线程以及上下文切换导致性能劣化。 解决方案 线程池参数“threadp

查看更多 →

objectPendingFinalizationCount 正在回收数量 采集时间点正在回收的对象个数 - INT SUM 内存池（memoryPool ，JVM内存池数据，以内存池名称为维度统计。） committed 可使用内存 当前可使用的内存大小 Byte INT SUM init 初始化内存

查看更多 →

Redis实例。 创建项目 在命令行窗口中运行以下命令创建一个新的C#控制台应用程序；或者在Visual Studio中创建一个新的C#控制台应用程序。 dotnet new console -o redisdemo 安装Redis的C#客户端 StackExchange.Redis包。Visual

查看更多 →

C# Demo使用说明 本文以C#语言为例，介绍应用通过MQ TTS 协议接入平台，接收服务端订阅消息的示例。 前提条件 熟悉.NETFramework开发环境配置，熟悉C#语言基本语法。 开发环境 本示例所使用的开发环境为.NETFramework 4.6.2版本，.Net SDK

查看更多 →

。 客户端使用GeminiDB Mongo驱动连接数据库的时候，一定要配置连接池，连接池大小最大不要超过200。 客户端使用GeminiDB Mongo驱动连接数据库的时候，要计算业务一共有多少个客户端， 每个客户端配置的连接池大小是多少，总的连接数不要超过当前实例能承受的最大连接数的80%。

查看更多 →

JVM监控界面线程监控处为何没有tomcat线程指标？ 当服务使用springboot2.1.x及以上版本时，需在配置文件中配置server.tomcat.mbeanregistry.enabled=true，启用Tomcat的MBean注册表以便APM探针获取到tomcat指标。

查看更多 →

后台Background线程数过多，导致新提交的任务无法及时运行。 可能原因 Hive后台的background线程池使用率过大。 HiveServer后台的background线程池执行的任务过多。 HiveServer后台的background线程池的容量过小。 处理步骤 检查HiveServer

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

“ 对象存储服务 ”的内容。 假设某用户于2023年7月1日对15TB数据做图片处理。由于数据处理费用无适用的资源包，则按照按需计费方式分析如下。 0~10TB范围内的数据免费，因此该用户的数据处理费用为： 数据处理费用= (15TB - 10TB) * 1024 * 0.025元/GB

查看更多 →

max.worker.threads HiveServer内部线程池最大能启动的线程数量。 1000 hive.server2.thrift.min.worker.threads HiveServer内部线程池初始化时启动的线程数量。 5 hive.hbase.delete.mode.enabled

查看更多 →

数据处理可以处理哪些数据源中的数据？ 目前仅支持读写OBS桶中的数据。如果读写租户OBS中数据，可以使用ModelArts提供的MoXing的API能力，实现读写OBS中的数据。 父主题： 数据处理

查看更多 →

下载quickStart(C#)样例。 运行Microsoft Visual Studio 2017，单击“打开项目/解决方案”，选择步骤1中下载的样例。 完成代码导入。 代码目录简述： App.config：Server地址和设备信息配置文件; C#：项目C#代码； EncryptUtil

查看更多 →

集成ModuleSDK(C#) 内部架构 开发指导 下载Demo 集成ModuleSDK进行数据采集 父主题： 插件侧开发

查看更多 →