北向获取数据集浏览信息 功能介绍 北向获取数据集的浏览信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset/query 参数说明 无。 请求 请求样例 GET https://ipaddr:port/da

查看更多 →

使用BulkLoad工具向HBase迁移数据 HBase的数据都是存储在HDFS中的，数据导入即是加载存放在HDFS中的数据到HBase表中。Apache HBase提供了“Import”和“ImportTsv”工具用于批量导入HBase数据。 “Import”通过“org.apache

查看更多 →

配置Flume非加密传输数据采集任务 生成Flume服务端和客户端的配置文件 使用Flume服务端从本地采集静态日志保存到Kafka 使用Flume服务端从本地采集静态日志保存到HDFS 使用Flume服务端从本地采集动态日志保存到HDFS 使用Flume服务端从Kafka采集日志保存到HDFS

查看更多 →

API网关是否支持WebSocket数据传输？ API网关支持WebSocket数据传输。 在创建API时，请求协议中的HTTP相当于WebSocket的ws，HTTPS相当于WebSocket的wss。 父主题： API调用

查看更多 →

配置Flume非加密传输数据采集任务 生成Flume服务端和客户端的配置文件 使用Flume服务端从本地采集静态日志保存到Kafka 使用Flume服务端从本地采集静态日志保存到HDFS 使用Flume服务端从本地采集动态日志保存到HDFS 使用Flume服务端从Kafka采集日志保存到HDFS

查看更多 →

北向接口 查询本地上传日志 北向调用启动项目 获取项目输出或项目组输出 本地上传成功后通知后台记录 根据标签创建项目 根据模板ID创建项目 北向启动项目 北向停止项目 北向卸载项目 查询项目状态 获取项目输出 根据标签获取模板列表 根据标签获取项目列表 根据项目ID查询项目详情 获取采集历史记录

查看更多 →

使用BulkLoad工具向HBase迁移数据 Apache HBase官方网站提供了批量导入数据的功能，详细操作请参见官网对“Import”和“ImportTsv”工具的描述：http://hbase.apache.org/2.2/book.html#tools。 父主题： 使用HBase

查看更多 →

将“properties.properties”文件上传到Flume客户端安装目录下的“flume/conf/”下。 父主题： 配置Flume加密传输数据采集任务

查看更多 →

Teleport方式传输有哪些优势？ 防尘防水，抗震抗压 有安全锁等安全防护 配置简单，适应性强 支持2*10GE高速接口 支持TB到数百TB级数据量迁移，Teleport设备可提供60TB或120TB存储容量 父主题： 服务概念类

查看更多 →

是一种海量数据传输服务，它使用物理存储介质（USB或eSATA接口）向华为公有云传输大量数据。解决了海量数据在互联网上传输的难题（高昂网络带宽成本、较长传输时间等）。 虚拟专用网络 （VPN） 是在用户的其他数据中心和公有云之间建立的一条符合行业标准的安全加密通信隧道，可将已有数据中心无缝扩展到公有云上。 云专线（DC）

查看更多 →

服务单状态是“正在传输数据”是什么意思？ 当您输入访问密钥（AK/SK）后，系统将启动数据上传，此时服务单状态将为“正在传输数据”，并保持至数据传输完成。 父主题： 服务状态类

查看更多 →

可用区之间的数据传输是否需要收费？ 同一区域下的可用区不收费，跨区域的可用区则需要收费。 父主题： 区域与可用区

查看更多 →

北向获取数据集基本信息 功能介绍 北向获取数据集的基本信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset 参数说明 无。 请求 请求样例 GET https://ipaddr:port/dataset/

查看更多 →

北向获取数据集目录结构信息 功能介绍 北向获取数据集目录结构信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset/catalogs 参数说明 无。 请求 请求样例 GET https://ipaddr:p

查看更多 →

北向获取数据集密级信息 功能介绍 北向获取数据集的密级信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset/secretlevel 参数说明 无。 请求 请求样例 GET https://ipaddr:p

查看更多 →

北向获取数据集基本信息 功能介绍 北向获取数据集的基本信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset 参数说明 无。 请求 请求样例 GET https://ipaddr:port/dataset/

查看更多 →

北向获取数据集密级信息 功能介绍 北向获取数据集的密级信息。 URI URI格式 GET /softcomai/datalake/north/v1.0/statics/dataset/secretlevel 参数说明 无。 请求 请求样例 GET https://ipaddr:p

查看更多 →

使用BulkLoad工具向HBase中批量导入数据 应用场景 经常面临向HBase中导入大量数据的情景，向HBase中批量加载数据的方式有很多种，最直接方式是调用HBase的API使用put方法插入数据；另外一种是用MapReduce的方式从HDFS上加载数据。但是这两种方式效率都

查看更多 →

CDM 未使用数据传输功能时，是否会计费？ CDM集群运行状态下，即便未使用也是正常计费的，如果长期不使用建议删除集群，需要的时候再创建集群。CDM集群计费详情请参考价格详情。 父主题： 通用类

查看更多 →

rsize 每次向 服务器 读取文件的最大字节数。实际数据小于或等于此值。rsize必须是1024倍数的正整数，小于1024时自动设为4096，大于1048576时自动设为1048576。默认时，服务器和客户端进行协商后设置。 建议设置为最大值1048576。 wsize 每次向服务器写入文件

查看更多 →

DES与普通网络数据传输相比有哪些优势？ 和普通的网络传输相比，DES有很多优势： 更高效快速的传输 用户将数据通过Teleport或磁盘这些存储设备邮寄到数据中心，数据中心管理人员对存储设备进行连线配置，然后通过内部网络进行高速数据传输，传输速度可达Internet传输速度的10倍，大大提高了数据传输速率，节省时间。

查看更多 →