数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

 
进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           

    spark部署 虚拟机 更多内容
  • Spark

    Spark Spark jar包冲突列表 Jar包名称 描述 处理方案 spark-core_2.1.1-*.jar Spark任务的核心jar包。 Spark可以直接使用开源同版本的Spark包运行样例代码,但是不同版本的spark-core包在使用的时候可能导致互相序列化ID不一样,因此建议使用集群自带jar包。

    来自:帮助中心

    查看更多 →

  • 虚拟机环境配置

    虚拟机环境配置 概述 安装基础组件包(可选) 虚拟机网络配置 设置systemd超时时间参数默认值 关闭防火墙 配置DNS服务器(可选) 升级wicked组件(可选) 关闭虚拟机的网络管理工具(可选) 删除虚拟机网络管理工具插件(可选) 删除虚拟机的本地用户(可选) 修改DHCP配置项(可选)

    来自:帮助中心

    查看更多 →

  • 虚拟机网络配置

    虚拟机网络配置 操作场景 为虚拟机配置一个可用的IP地址,使虚拟机和宿主机网络互通。 suse15系列若是不存在ifconfig及route命令,使用zypper install net-tools-deprecated命令,安装对应工具包,即可解决 操作步骤 在虚拟机上,执行以下命令,查看网卡名称。

    来自:帮助中心

    查看更多 →

  • 配置虚拟机(Windows)

    配置虚拟机(Windows) 该任务指导用户完成Windows云服务器的相关配置与其他驱动的安装,为最终生成的Windows裸金属服务器私有镜像做准备。 虚拟机环境配置 安装Cloudbase-Init 安装bms-network-config软件包(可选) 安装SDI卡驱动(可选)

    来自:帮助中心

    查看更多 →

  • 安装虚拟机Agent

    安装虚拟机Agent 将组件部署虚拟机上时,需要安装虚拟机Agent,将主机节点纳管后,后台才能与主机节点通信。 虚拟机Agent的状态及说明,请参见表1。 表1 虚拟机Agent状态说明 Agent状态 说明 未安装agent ECS节点上没有安装虚拟机Agent,需安装。 在线

    来自:帮助中心

    查看更多 →

  • Spark

    Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题: 组件介绍

    来自:帮助中心

    查看更多 →

  • 安装Spark

    com/dev-container/spark:3.1.3-obs 配置Spark History Server 修改~/spark-obs/conf/spark-defaults.conf文件,开启Spark事件日志记录,并配置OBS桶名称及目录。 cat >> ~/spark-obs/conf/spark-defaults

    来自:帮助中心

    查看更多 →

  • 创建Linux虚拟机

    创建Linux虚拟机 概述 注册ISO文件(Linux) 使用ISO文件创建Linux云服务器 父主题: 使用镜像服务的ISO镜像功能创建虚拟机

    来自:帮助中心

    查看更多 →

  • 创建虚拟机(Linux)

    项中选择UEFI方式。 单击“Begin Installation”开始安装。 等待虚拟机启动,然后安装操作系统。按照实际需要配置操作系统语言、时区等。 父主题: 使用virt-manager工具创建虚拟机

    来自:帮助中心

    查看更多 →

  • 创建空虚拟机

    创建空虚拟机 前提条件 已安装VirtualBox。 操作步骤 打开VirtualBox,单击“新建”,在弹出的“新建虚拟电脑”对话框中输入虚拟机名称,并选择类型和版本,单击“下一步”。 以Ubuntu为例,类型选择:Linux。 请确保选择的版本与待安装的操作系统版一致。 图1

    来自:帮助中心

    查看更多 →

  • 虚拟机日志接入

    步骤三:创建日志采集配置 在“虚拟机日志接入”页面,选择左侧导航栏的“日志采集配置”。 单击“创建日志采集配置”。 配置日志采集参数,配置完成后,单击“确定”。 新创建的采集配置默认为草稿状态,展示在“草稿”页签下,当配置被微服务使用后,状态会更新为“已下发”,并展示到“已下发”页签下。

    来自:帮助中心

    查看更多 →

  • 基于虚拟机场景

    viceComb引擎服务注册发现地址。 CSE配置中心地址:获取ServiceComb引擎配置中心地址。 特别说明: 优雅下线是基于http协议进行通知,默认通知端口为16688,若您在虚机部署出现端口冲突问题(通常是单个ECS部署多个实例),请在启动时添加如下参数规避: # 请更换下面的端口号

    来自:帮助中心

    查看更多 →

  • 基于虚拟机场景

    基于虚拟机场景 前提条件 已创建ECS实例, 创建ECS请参考ECS快速入门。 已安装JDK ( 版本为1.8及以上版本 ) 并配置环境变量,详情请参考Java Downloads。 已创建未开启安全认证的ServiceComb引擎实例,详情请参考快速创建ServiceComb引擎。

    来自:帮助中心

    查看更多 →

  • 基于虚拟机场景

    基于虚拟机场景 前提条件 已创建ECS实例, 创建ECS请参考ECS快速入门。 已安装JDK ( 版本为1.8及以上版本 ) 并配置环境变量,详情请参考Java Downloads。 已创建未开启安全认证的ServiceComb引擎实例,详情请参考快速创建ServiceComb引擎。

    来自:帮助中心

    查看更多 →

  • 创建Windows虚拟机

    创建Windows虚拟机 概述 注册ISO文件(Windows) 使用ISO文件创建Windows云服务器 安装Windows操作系统和VMTools驱动 父主题: 使用镜像服务的ISO镜像功能创建虚拟机

    来自:帮助中心

    查看更多 →

  • 虚拟机日志接入

    步骤三:创建日志采集配置 在“虚拟机日志接入”页面,选择左侧导航栏的“日志采集配置”。 单击“创建日志采集配置”。 配置日志采集参数,配置完成后,单击“确定”。 新创建的采集配置默认为草稿状态,展示在“草稿”页签下,当配置被微服务使用后,状态会更新为“已下发”,并展示到“已下发”页签下。

    来自:帮助中心

    查看更多 →

  • 虚拟机日志接入

    步骤三:创建日志采集配置 在“虚拟机日志接入”页面,选择左侧导航栏的“日志采集配置”。 单击“创建日志采集配置”。 配置日志采集参数,配置完成后,单击“确定”。 新创建的采集配置默认为草稿状态,展示在“草稿”页签下,当配置被微服务使用后,状态会更新为“已下发”,并展示到“已下发”页签下。

    来自:帮助中心

    查看更多 →

  • 重启虚拟机Agent

    重启虚拟机Agent “虚拟机”类型的环境,当纳管的ECS资源的“Agent状态”为“在线”时,支持重启虚拟机Agent。 操作步骤 登录ServiceStage控制台。 在“环境管理”页面,单击待操作环境名称。 在“资源配置”下左侧列表,选择“计算”资源类型下的“弹性云服务器 ECS”资源名称。

    来自:帮助中心

    查看更多 →

  • 创建空虚拟机

    请确保选择的版本与待安装的操作系统版一致。 图1 创建虚拟机 在选择内存的对话框中,选择内存大小并单击“下一步”。 选择内存时请参考虚拟机配置及待安装操作系统的官方要求。本文以设置为2048MB为例。 图2 选择内存 在虚拟硬盘对话框中,选择“现在创建虚拟硬盘”,并单击“创建”。

    来自:帮助中心

    查看更多 →

  • 优化Linux虚拟机

    优化Linux虚拟机 为了确保镜像创建的云服务器同时支持XEN虚拟化和KVM虚拟化,请在创建镜像前完成优化私有镜像的相关操作。 本节操作以Ubuntu 20.04操作系统为例,其他操作系统优化的具体操作请参考“优化过程(Linux)”。 安装原生的XEN和KVM驱动 执行以下命令,打开modules文件。

    来自:帮助中心

    查看更多 →

  • 虚拟机日志接入

    步骤三:创建日志采集配置 在“虚拟机日志接入”页面,选择左侧导航栏的“日志采集配置”。 单击“创建日志采集配置”。 配置日志采集参数,配置完成后,单击“确定”。 新创建的采集配置默认为草稿状态,展示在“草稿”页签下,当配置被微服务使用后,状态会更新为“已下发”,并展示到“已下发”页签下。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了