中软国际数据治理专业服务解决方案实践

选择表模型 在设计数据仓库模型的时候，最常见的有两种：星型模型与雪花模型。选择哪一种模型需要根据业务需求以及性能的多重考量来定。 星型模型由包含数据库核心数据的中央事实数据表和为事实数据表提供描述性属性信息的多个维度表组成。维度表通过主键关联事实表中的外键。如图1。 所有的事实都必须保持同一个粒度。

查看更多 →

String 字段分隔符，当文件格式为“ CS V_FILE”时此参数有效，默认值为：“,”。 fromJobConfig.quoteChar 否 Boolean 是否使用包围符，选择“true”时，包围符内的字段分隔符会被视为字符串值的一部分，目前 CDM 默认的包围符为："。 fromJobConfig

查看更多 →

源端为Kafka JSON样例 "from-config-values": { "configs": [ { "inputs": [ {

查看更多 →

否 String 待抽取数据的数据源，作业源端为Hive时，这里为“hive”。 fromJobConfig.database 否 String 待抽取数据的数据库，例如“default”。 fromJobConfig.table 是 String 待抽取数据的表名，例如“cdm”。

查看更多 →

取值范围：任意一个字符，且包含在双引号内。 取值不可为空，即该配置项不可配置为“”。 说明： 如果取值为特殊字符，使用反斜杠（\）转义，如分隔符为引号（"），可配置为"\""，如果为反斜杠（\），可配置为"\\"。 如果为控制字符如STX（正文开始），可配置为"\u0002"。 "\n" isRemainRecordDelimiter

查看更多 →

创建方式：本文中以选择已有ELB为例进行说明，关于自动创建的配置参数请参见负载均衡器。 监听器配置： 前端协议：支持HTTP和HTTPS。本文以HTTP协议为例。 对外端口：开放在负载均衡服务地址的端口，可任意指定。 高级配置： 配置 说明 使用限制 数据压缩 开启将对特定文件类型进

查看更多 →

源端为DIS JSON样例 "from-config-values": { "configs": [ { "inputs": [ {

查看更多 →

否 String 待抽取数据的数据源，作业源端为Hive时，这里为“hive”。 fromJobConfig.database 否 String 待抽取数据的数据库，例如“default”。 fromJobConfig.table 是 String 待抽取数据的表名，例如“cdm”。

查看更多 →

size 为保留的快SQL的最大内存占用空间，取值范围为 [16, 1024]，单位为MB。 Full SQL disk size 为保留的快SQL的最大磁盘占用空间，取值范围为 [512, 1048576]，单位为MB。 Slow SQL memory size 为保留的慢SQL的最大内存占用空间，取值范围为

查看更多 →

String 字段分隔符，当文件格式为“CSV_FILE”时此参数有效，默认值为：“,”。 fromJobConfig.quoteChar 否 Boolean 是否使用包围符，选择“true”时，包围符内的字段分隔符会被视为字符串值的一部分，目前CDM默认的包围符为："。 fromJobConfig

查看更多 →

频点播APP等。 全站加速 各行业动静态内容混合，含较多动态资源请求（如asp、jsp、php等格式的文件）的网站。 如何选择服务范围 CDN为您提供三种服务范围，您可以根据终端用户的分布合理选择服务范围，为用户提供更好的使用体验。 服务范围 加速效果 适用场景 中国大陆 所有用户的访问都会调度到中国大陆的节点。

查看更多 →

Net开发环境。 Visual Studio官网，下载最新版Visual Studio。 下载完毕后，单击exe文件，开始安装。 安装过程中选择工作负荷ASP.NET和Web开发，安装完成后启动即可。 图1 选择安装.NET环境依赖 父主题： 使用SDK（.NET）

查看更多 →

聚合服务编排中非纯脚本服务选择入参时，提示错误“初始数据实体必填入参为空，请选择必填入参”？ 可能原因 初始数据实体作为入参的属性，未被设置为必填属性。 处理方法 登录LinkX-F系统首页。 选择“数据服务 > 聚合服务编排”，进入“聚合服务编排”页面。 单击具体服务的“编码”链接，进入服务详情页。

查看更多 →

memory size为保留的快SQL的最大内存占用空间，取值范围为[16, 1024]，单位为MB。 Full SQL disk size为保留的快SQL的最大磁盘占用空间，取值范围为[512, 1048576]，单位为MB。 Slow SQL memory size为保留的慢SQL的最大内存占用空间，取值范围为[16

查看更多 →

从Visual Studio官网，下载最新版Visual Studio。 下载完毕后，点击exe文件，开始安装。 安装过程中选择工作负荷ASP.NET和Web开发，安装完成后启动即可。 图1 选择安装.NET环境依赖 父主题： 使用SDK（.NET）

查看更多 →

从Visual Studio官网，下载最新版Visual Studio。 下载完毕后，点击exe文件，开始安装。 安装过程中选择“工作负荷 > ASP.NET和Web开发”，如图1所示，安装完成后启动即可。 图1 选择安装.NET环境依赖 父主题： 使用SDK（.NET）

查看更多 →

您设置的CDN缓存过期时间不合适。如果设置的CDN缓存过期时间过短，CDN节点上的数据会经常失效，导致频繁回源，因此降低CDN缓存命中率。 您的源站动态内容居多，CDN主要加速对象为静态资源（如：css、js、html、图片、txt、视频等），对于动态资源（如：asp、jsp、php、API接口和动态交互请求等）CDN会回源请求资源。

查看更多 →

详情如下： 业务类型选择的是网站加速、文件下载加速或点播加速，且源站类型为源站IP或源站 域名 的加速域名，会有两条默认缓存规则。 常规动态文件（如： .php .jsp .asp .aspx）默认缓存过期时间为0，对此类动态文件请求会直接回源，此默认规则允许修改和删除。 所有文件默

查看更多 →

源端为Kafka/MQ 迁移流程 在泛IOT、新闻、舆情、社交等数据量较大的行业，通常会引入消息中间件（kafka、MQ等）对流量进行削峰填谷，然后借助Flink/Logstash等工具消费数据并进行数据预处理，最终将数据导入到搜索引擎，对外提供搜索服务。 对于这种源端是kafk

查看更多 →

时间区间左边界（包含该值），格式为“yyyy-MM-dd hh:mm:ss”。 表示只抽取该时间及以后的数据。 fromJobConfig.endTime 否 String 时间区间右边界（不包含该值），格式为“yyyy-MM-dd hh:mm:ss”。 表示只抽取该时间以前的数据。 fromJobConfig

查看更多 →

时间区间左边界（包含该值），格式为“yyyy-MM-dd hh:mm:ss”。 表示只抽取该时间及以后的数据。 fromJobConfig.endTime 否 String 时间区间右边界（不包含该值），格式为“yyyy-MM-dd hh:mm:ss”。 表示只抽取该时间以前的数据。 fromJobConfig

查看更多 →