户，所以“数据工程师A”把userTable表的查询权限赋给了“数据工程师B”。同时，“数据工程师B”创建了一个musicTable用于存放音乐版权相关数据。 “数据工程师A”和“数据工程师B”对于队列和数据的使用权限如表3所示。 表3 使用权限说明 用户 数据工程师A（游戏数据分析）

查看更多 →

华为云 MapReduce服务 （ MRS ）是华为云提供的大数据服务，可以在华为云上部署和管理Hadoop系统，一键即可部署Hadoop集群。 MRS提供用户完全可控的一站式企业级大数据集群云服务，完全兼容开源接口，结合 华为云计算 、存储优势及大数据行业经验，为客户提供高性能、低成本、灵活易用的全栈大数据平台，轻松运行H

查看更多 →

大数据业务开发 MRS是否支持同时运行多个Flume任务？ 如何修改FlumeClient的日志为标准输出日志？ Hadoop组件jar包位置和环境变量的位置在哪里？ MRS是否支持通过Hive的HBase外表将数据写入到HBase？ 如何查看HBase日志？ HBase表如何设置和修改数据保留期？

查看更多 →

。MRS提供租户完全可控的一站式企业级大数据集群云服务，完全兼容开源接口，结合华为云计算、存储优势及大数据行业经验，为客户提供高性能、低成本、灵活易用的全栈大数据平台，轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件，并具备在后续根据业务需要进行定

查看更多 →

特征工程 如何选中全量特征列？ 算法工程处理的时候必须要先采样吗？ 特征处理操作完成后怎么应用于数据集全量数据？ 特征工程和算法工程的关系？ JupyterLab环境异常怎么处理？ 父主题： 常见问题

查看更多 →

特征工程 特征工程简介 Python和Spark开发平台 JupyterLab开发平台 父主题： 用户指南

查看更多 →

Demo工程目录 合约开发和调测可参考合约示例Demo，单击链接获取AssemblyScript语言合约工程Demo。 build目录下optimized.wasm为合约编译后对应的wasm字节码文件(最终合约类型文件为optimized.wasm压缩成的*.zip包，合约示例Demo)。

查看更多 →

String 描述 最小长度：0 最大长度：1000 id Integer 工程ID 最小值：0 最大值：2147483647 name String 工程名字 最小长度：0 最大长度：64 source Integer 工程来源 0：PerfTest，2：CloudTest 最小值：0 最大值：2147483647

查看更多 →

新建工程 idea新建工程的步骤如下： 打开idea，选择“File > New > Project”。如图1所示： 图1 新建项目 选择“gradle > Next”。如图2所示： 图2 选择路径 输入新建工程名，选择Finish。如图3所示： 图3 新建工程名 项目的grad

查看更多 →

创建工程 下面以 CLion 作为项目开发IDE。 打开CLion->File->New Project->选择新建“C Executable”工程。 这里创建一个名为“MyCApp”的工程进行下面的实践。 下载C语言版本SDK，将文件解压缩之后，复制到新创建的项目下。 C语言版本SDK一共支持三个版本，分别是

查看更多 →

创建工程 本文以 Visual Studio 2017 作为项目开发IDE。 新建工程 打开“Visual Studio > 文件 > 新建 > 项目 > 选择新建.Net Core控制台应用”，这里创建一个名为ModuleSDK-Demo的工程进行下面的实践。 添加本地Nuget包源

查看更多 →

特征工程 二值化 卡方选择 派生 特征转换 FP-growth 最小最大规范化 正则化 独热编码 主成分分析 离散化 标准化 字符串标签化 奇异值分解 过滤式特征选择 线性特征重要性 特征尺度变换 特征异常检测 特征异常平滑 gbdt编码模型训练 gbdt编码模型应用 父主题： 数据特征

查看更多 →

的资源发放。 轻开发 本方案全流程的高度可视化，没有复杂的代码编写过程，对技术人员的技术要求不高，可以大大降低大数据分析的门槛，只要懂数据库会SQL就能够进行大数据分析。 易运维 本方案为客户完全屏蔽了具体软件引擎的复杂度，让客户技术团队从传统的软件问题定位、处理、调优等运维工作

查看更多 →

数据分析常见问题 数据源常见问题 管道作业常见问题 实时分析常见问题 时序分析常见问题 资产建模和分析常见问题

查看更多 →

提升数据可靠性。 大数据融合分析 随着IT、信息技术的发展和进步，数据资源已经成为企业的核心资源。整合数据资源，构建大数据平台，发现数据价值，成为企业经营的新趋势和迫切诉求。而如何从海量数据中快速挖掘“价值”，成为助力客户实现预测性分析的关键要素。 图2 大数据融合分析 优势 统一分析入口

查看更多 →

特征工程：对数据进行特征处理操作的工程。 特征工程服务：将优质的特征工程发布成服务，用户可以直接调用该服务，对具备完全相同特征的数据进行特征处理。 特征工程任务：调用特征工程服务的过程。用户在调用特征工程服务的时候，需要基于特征工程服务新建任务。 特征工程管理页面 “特征工程”页面分为两个页签：特征处理工程和已发布服务。

查看更多 →

发布算法工程服务 如果当前算法工程操作流处理效果比较好，可以得到比较优质的训练数据，可以将当前的算法工程发布成服务。支持复用此服务对其他数据进行相同的特征操作。 在JupyterLab环境编辑界面，单击界面右上角的图标。 在弹出的“Publish”框内，设置服务名称“Service

查看更多 →

创建模型工程 前提条件 已 注册华为账号 并开通华为云。 已有可用项目，如果没有，请先新建项目。 操作步骤 官网产品页点击“使用”，进入架构建模服务首页。 在页面点击“新建模型工程”。 设置新建模型工程基本信息，保存即可。 所属项目：默认归属当前有配置权限的项目下创建工程。 名称：模型工程名称。

查看更多 →

如何删除模型工程 进入项目后，切换到架构建模工具首页中，在对应的工程操作栏下点击“删除”，即可将工程删除。 父主题： 工程管理

查看更多 →

-demo”样例工程的存储位置，勾选样例工程，如图1所示。 图1 Import Maven Projects 单击“Finish”完成项目导入。 配置Demo工程。 配置项目编码为“UTF-8”。 在左侧导航栏“Project Explorer”中右键单击所需工程，选择“Properties

查看更多 →

数据工程实施流程 本文档介绍如何构建端到端数据处理流程，协助政府进行 数据治理 ，实现政务大数据一体化管理 表1 构建一体化政务大数据平台数据处理端到端流程 序号 类 项目 描述 1 组建专班 首席数据官 首席数据官 业务专员 业务专员 数据专员 数据专员 2 数据架构规划设计 数据调研

查看更多 →