永洪商业智能解决方案实践

舆情获取业务 场景概述 舆情获取业务是通过信息采集技术，对互联网信息进行快速有效的检索，以获取目标信息，主要应用于搜索引擎、新闻舆情获取、数据挖掘等。 客户瓶颈 互联网具有海量页面信息，要对互联网中杂乱无章的信息进行处理，需要经过无数次的下载，分析，过滤、存储等过程，需要花费大量的

查看更多 →

区分运营，提高投入产出比。 方案架构 业务架构 图1 业务架构 如图所示，本方案主要由华为云云计算底座+观远BI形成商业智能分析平台解决方案，提供适用于企业商业智能分析系统的产品与能力的组合，满足企业数字化转型需求。 观远智能分析平台：一站式，只需一个平台，即可打通数据采集-接入

查看更多 →

。 优化数据访问与共享：简化数据访问流程，提高数据共享效率，打破数据孤岛，实现数据资源的充分利用和协同工作。 提升数据价值与利用率：通过数据挖掘、分析等技术，发现数据中的潜在价值，为业务创新和发展提供有力支持。

查看更多 →

够快速地从MapReduce切换到Spark计算平台上去。Spark提供一站式数据分析能力，包括小批量流式处理、离线批处理、SQL查询、数据挖掘等，用户可以在同一个应用中无缝结合使用这些能力。 Spark的特点如下： 通过分布式内存计算和DAG（无回路有向图）执行引擎提升数据处理

查看更多 →

Impala-shell命令行接口。 支持Kerberos身份认证。 Impala主要应用于实时查询数据的离线分析（如 日志分析 ，集群状态分析）、大规模的数据挖掘（用户行为分析，兴趣分区，区域展示）等场景。 有关Impala的详细信息，请参见https://impala.apache.org/impala-docs

查看更多 →

其中，商品属性和商品规格的填写要求如下： 表1 商品属性 参数名称 填写规范 是否公开销售 保持默认值“否” 商品分类 请选择“企业应用 > 商业智能” 商品标签 请选择“视频应用” 结算ISV 算法公开销售后，订单结算所使用的ISV账号 合同名称/结算规则 填写合同的名称和结算规则 须知：

查看更多 →

数据仓库 进行OLAP分析。当前ClickHouse被广泛的应用于互联网广告、App和Web流量、电信、金融、物联网等众多领域，非常适用于商业智能化应用场景，在全球有大量的应用和实践，具体请参考：https://clickhouse.tech/docs/en/introduction/adopters/。

查看更多 →

迭代计算（Iterative Computation）：支持迭代计算，有效应对多步的数据处理逻辑。 数据挖掘（Data Mining）：在海量数据基础上进行复杂的挖掘分析，可支持各种数据挖掘和机器学习算法。 流式处理（Streaming Processing）：支持秒级延迟的流式处理，可支持多种外部数据源。

查看更多 →

。 数据仓库服务（Data Warehouse Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。DWS的更多信息，请参见《数据仓库服务管理指南》。 前提条件 请务必确保您的账户下已在数据仓库服务（DWS）里创建了DWS集群。

查看更多 →

。 数据仓库服务（Data Warehouse Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。DWS的更多信息，请参见《数据仓库服务管理指南》。 前提条件 请务必确保您的账户下已在数据仓库服务（DWS）里创建了DWS集群。

查看更多 →

。通过自然语言提问，智能分析助手便能自动执行数据分析、生成图表和提供智能见解，极大地简化了从数据获取到决策支持的整个流程，帮助您快速进行商业智能（BI）分析。 例如，只需在对话框提问“不同区域某产品的销量是多少？”，智能分析助手将自动生成直观的图表，展示各区域的销售数据。此外，如

查看更多 →

OFFSET 25）。 JDBC驱动 Java数据库连接（JDBC）驱动程序允许您将Open Distro for Elasticsearch与您的商业智能（BI）应用程序集成。 有关下载和使用JAR文件的信息，请参阅GitHub仓库。 父主题： 使用Elasticsearch集群搜索数据

查看更多 →

参考集群方案推荐 进行部署。如果需要部署单机版本，可以参考 Web 服务器部署 进行部署。 参数调优：FineBI 是一款纯 B/S 端的商业智能分析服务平台，对 服务器 有一定的配置要求，当服务器不能满足 BI 使用时，会出现异常退出风险。因此在部署后需要修改使用内存和其他参数，确保服务器稳定运行。你可以参考修改

查看更多 →

OFFSET 25）。 JDBC驱动 Java数据库连接（JDBC）驱动程序允许您将Open Distro for Elasticsearch与您的商业智能（BI）应用程序集成。 有关下载和使用JAR文件的信息，请参阅GitHub仓库。 父主题： 使用OpenSearch集群搜索数据

查看更多 →

DLI 预置的SQL模板中TPC-H样例数据说明 TPC-H样例数据简介 TPC-H（商业智能计算测试） 是交易处理效能委员会（TPC,Transaction Processing Performance Council) 组织制定的用来模拟决策支持类应用的一个测试集。目前，在学术

查看更多 →

台”和“运渣车透视台”的选择。单击搜索框，输入名称或者经纬度可以进行相应信息的查看。 热力图分析 局部污染强度是基于移动大气监测数据进行数据挖掘后得到的浓缩信息，综合反映了局部污染的显著性以及发生概率，是小尺度溯源的重要指标。局部污染聚集数据在地图上以热力图进行展示，并以月为周期进行更新。

查看更多 →

为深度分析和应用提供基础； 建模分析。提供大数据、人工智能分析的算法模型和物理、化学等各类仿真工具，结合数字孪生、工业智能等技术，对海量数据挖掘分析，实现数据驱动的科学决策和智能应用，同时通过IDS可信数据空间试点，探索企业间的私密数据可信流转方案； 知识复用。通过建设行业知识库

查看更多 →

algorithm_parameters 是 JSON 每个算法有其各自的参数列表，包括初始化、最优化、正则项等参数。 逻辑斯蒂回归算法是一种广义的线性回归分析模型，常用于数据挖掘、疾病自动诊断、经济预测等领域。逻辑斯蒂回归算法通过在线性回归的基础上叠加一个sigmoid激活函数将输出值映射到[0,1]之间，是机器

查看更多 →

Digest函数 概述 HetuEngine提供了几个处理MinHash技术的函数。 MinHash用于估计两个集合的Jaccard相似系数。它通常用于数据挖掘，用于大规模检测近乎相同的网页。通过使用这些信息，搜索引擎有效地避免了在搜索结果中显示两个几乎相同的网页。 以下示例展示了如何使用Set

查看更多 →

集成服务（SSIS） 操作背景 SQL Server Integration Services（SSIS）是SQL Server实现商业智能（BI）的重要组件，提供了企业级数据集成和工作流处理方案。可以用于各种数据源的提取、转换、加载（ETL）操作。RDS for SQL Ser

查看更多 →

。 数据仓库服务（Data Warehouse Service，简称DWS）是一种基于基础架构和平台的在线数据处理数据库，为用户提供海量数据挖掘和分析服务。DWS的更多信息，请参见《数据仓库服务管理指南》。 前提条件 请务必确保您的账户下已在数据仓库服务（DWS）里创建了DWS集群。

查看更多 →