数据接入服务 DIS

>> /tmp/test.log 登录DIS控制台，查看配置DIS Agent中“DISStream”或“CustomFileStream”通道的监控。有数据上传，表示DIS服务接收正常，Agent安装成功。 Windows服务器上验证DIS Agent 使用文件管理器进入“logs”目录。

查看更多 →

data.Redis.connection.RedisConnectionFactory; import org.springframework.data.Redis.core.RedisTemplate; import org.springframework.data.Redis.core

查看更多 →

fromJobConfig.streamName 是 String DIS的通道名。 fromJobConfig.disConsumerStrategy 是 枚举 设置从DIS拉取数据时的初始偏移量： LATEST：最大偏移量，即最新的数据。 FROM_LAST_STOP：从上次停止处继续拉取。

查看更多 →

对接Redis scala样例代码 pyspark样例代码 java样例代码 故障处理 父主题： 使用Spark作业跨源访问数据源

查看更多 →

DIS输出流 功能描述 DLI 将Flink作业的输出数据写入 数据接入服务 （DIS）中。适用于将数据过滤后导入DIS通道，进行后续处理的场景。 数据接入服务（Data Ingestion Service，简称DIS）为处理或分析流数据的自定义应用程序构建数据流管道，主要解决云服务外

查看更多 →

DIS源表 功能描述 创建source流从数据接入服务（DIS）获取数据。用户数据从DIS接入，Flink作业从DIS的通道读取数据，作为作业的输入数据。Flink作业可通过DIS的source源将数据从生产者快速移出，进行持续处理，适用于将云服务外数据导入云服务后进行过滤、实时分析、监控报告和转储等场景。

查看更多 →

DIS结果表 功能描述 DLI将Flink作业的输出数据写入数据接入服务（DIS）中。适用于将数据过滤后导入DIS通道，进行后续处理的场景。 数据接入服务（Data Ingestion Service，简称DIS）为处理或分析流数据的自定义应用程序构建数据流管道，主要解决云服务外

查看更多 →

因？ 访问Redis报OOM错误提示 不同编程语言如何使用Cluster集群客户端 使用Cluster的Redis集群时建议配置合理的超时时间 读取redis数据报超时错误 hashtag的原理、规则及用法示例 Redis key丢失是什么原因 重启实例后缓存数据会保留吗？ 如何确认实例是单DB还是多DB

查看更多 →

GeminiDB Redis接口广告RTA场景性能数据 RTA（RealTime API）系统是满足实时精细化投放的技术手段，属于核心业务。广告平台在进行广告检索阶段，通过RTA接口向广告主询问其广告是否参与竞价，广告平台在接收到该信息后再进行广告检索召回，一个完整的RTA广告流程如下图所示：

查看更多 →

使用distcp命令跨集群复制HDFS数据 操作场景 distcp是一种在集群间或集群内部拷贝大量数据的工具。它利用MapReduce任务实现大量数据的分布式拷贝。 前提条件 已安装Yarn客户端或者包括Yarn的客户端。例如安装目录为“/opt/client”。 各组件业务用户

查看更多 →

Redis数据连接参数说明 表1 Redis数据连接 参数 是否必选 说明 数据连接类型 是 Redis连接固定选择为Redis。 数据连接名称 是 数据连接的名称，只能包含字母、数字、下划线和中划线，且长度不超过100个字符。 标签 否 标识数据连接的属性。设置标签后，便于统一管理。

查看更多 →

阿里云数据库Redis/Tair到GeminiDB Redis的迁移 本章节主要介绍阿里云数据库Redis/Tair到GeminiDB Redis的迁移方案。 迁移原理 使用阿里云的数据迁移工具DTS中的数据迁移功能，该功能支持将阿里云Redis服务的数据迁移至其他Redis服务中，利用该工具避开阿里云

查看更多 →

Redis采集器（app-discovery-redis） 通过连接到Redis节点，获取Redis节点IP、版本、连接客户端IP信息。参数配置说明参见表1。 表1 Redis采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-redis-xxx

查看更多 →

/redis-server ../redis.conf & 访问redis 用自带的redis-cli客户端工具就可以访问Redis 服务器 了。 Redis的默认服务端口是6379 # redis-cli 127.0.0.1:6379> Redis配置文件说明 Redis的配置文件Redis.conf在R

查看更多 →

/redis-server ../redis.conf & 访问redis 用自带的redis-cli客户端工具就可以访问Redis服务器了。 Redis的默认服务端口是6379 # redis-cli 127.0.0.1:6379> Redis配置文件说明 Redis的配置文件Redis.conf在R

查看更多 →

DIS.Stream 模型说明 DIS.Stream用于创建华为云通道资源。通过创建该资源，方便用户使用高效采集、传输、分发能力。 模型属性 表1 模型定义属性说明 属性 是否必选 描述 dataType 否 源数据类型 参数类型：string 取值说明：BLOB：二进制数据；J

查看更多 →

续捕获、传送和存储数TB数据。 数据流向 DIS实时从多种数据源采集数据。 DIS连续传输数据，自动将数据传输至 MRS ，DLI，DWS和OBS等服务做计算，分析和存储。 图1 数据流向 父主题： 一般性问题

查看更多 →

启动DIS Agent Linux服务器 上启动DIS Agent 使用PuTTY工具登录日志所在服务器。 进入DIS Agent安装目录。其中“x.x.x”表示版本号。 cd /opt/dis-agent-x.x.x/ 启动DIS Agent。 bash bin/start-dis-agent

查看更多 →

停止DIS Agent 在Linux服务器上停止DIS Agent 使用PuTTY工具登录日志所在服务器。 进入DIS Agent安装目录。 cd /opt/dis-agent-X.X.X/ 停止DIS Agent。 bash bin/stop-dis-agent.sh 请确保使用bash执行脚本，否则使用sh、

查看更多 →

开通DIS服务 注册云服务账号。 开通DIS服务。 使用DIS服务之前必须先充值，才能正常使用DIS服务。 登录DIS管理控制台。 单击页面右上角的“费用”。 单击“充值”，系统自动跳转到充值窗口。 根据界面提示信息，对账户进行充值。 充值成功后，关闭充值窗口，返回管理控制台首页。

查看更多 →

DIS输入流 功能描述 创建source流从数据接入服务（DIS）获取数据。用户数据从DIS接入，Flink作业从DIS的通道读取数据，作为作业的输入数据。Flink作业可通过DIS的source源将数据从生产者快速移出，进行持续处理，适用于将云服务外数据导入云服务后进行过滤、实时分析、监控报告和转储等场景。

查看更多 →