创建Aura引擎端点

前提条件

• 已创建工作空间，详细操作请参见创建工作空间。
• 已创建计算资源，详细操作请参见购买预留资源池。

创建AuraJobV2引擎端点（推荐）

1. 登录AI DataLake管理控制台。
2. 在页面左上角切换至对应的工作空间。
3. 在左侧导航栏选择“引擎端点 > 多模数据引擎Aura”进入Aura引擎端点列表页面。
4. 单击页面右上角的“创建端点”，配置以下参数并单击“立即创建”。
   1. 请根据界面提示，配置端点基本信息。

      表2 端点基本信息说明

      参数	参数说明
      端点类型	默认选择端点类型为“AuraJob”。 AuraJob用于执行定时调度任务，保障大规模数据稳定处理。
      端点版本	选择端点版本，选择“v2.0”。 v1.0：自定义镜像算子，智算、通算混合资源池统一调度，支持Job级弹性。 v2.0（推荐）：细粒度Actor级算子编排调度，数据处理Pipeline执行，性能和效率极大提升。
      端点名称	端点名称是端点的唯一标识符，不可与已存在的端点重名，且创建后不支持修改。 名称只能包含小写字母、数字、中划线，且只能以字母开头，以字母或数字结尾。 输入长度不能超过63个字符。
      端点显示名称	输入端点显示名称，创建后可修改，用于用户界面展示，方便用户识别和记忆。 名称只能包含中文、英文、数字、中划线。 输入长度不能超过63个字符。
      添加描述	可单击“添加描述”添加端点描述信息。用于详细说明端点的用途、用途背景等信息，帮助其他用户理解该端点的创建目的和使用场景。

   2. 请根据界面提示，配置资源信息。

      表3 资源配置说明

      参数	参数说明
      资源使用模式	选择资源使用模式。 预留资源：预留资源通过预留专属计算资源，确保业务所需的计算资源的稳定性，同时获得最优的单价成本。更多信息，请参见资源使用模式：预留模式。 混合模式：混合模式结合了预留资源和弹性资源，优先消耗预留资源，高峰期预留资源不足时调度弹性资源组合使用。预留资源保证了业务基线的稳定性，弹性资源的自动调度又具备应对突发负载的弹性能力。更多信息，请参见资源使用模式：混合模式。
      选择计算资源池	在下拉框中选择已创建的资源池。如果下拉框中没有可选的资源池，可以单击“购买资源池”进行购买。具体操作，请参见购买预留资源池。

   3. 请根据界面提示，配置工作组。

      工作组是用于配置和管理计算资源的逻辑单元，通常用于定义一组具有相同资源规格和调度策略的计算节点（Worker），以支持特定的计算任务或工作负载。

      表4 工作组配置说明

      参数	参数说明
      名称	系统自动生成工作组名称。您可以按需修改工作组名称。创建端点后不支持再修改工作组名称。 工作组名称只能包含字母、数字、中划线，且只能以字母或数字开头和结尾。 输入长度不能超过61个字符。
      资源规格	在下拉框中选择需要配置的资源规格，支持选择CPU、GPU、NPU资源。 说明： 不支持NPU单独调度，需增加CPU资源配置。
      每Worker资源配置	在下拉框中选择每个Worker的资源配置。 CPU资源：在下拉框中选择每个Worker的CPU和内存。 GPU/NPU资源：在下拉框中选择每个Worker的GPU/NPU卡数、CPU和内存。
      Worker数量 (Min-Max)	每个工作组的Worker最大值和最小值。 Worker最小值需小于等于最大值，且需大于0。
      镜像	将鼠标悬浮在“镜像”列，单击，在“预置镜像”或“自定义镜像”页签中选择镜像名称，并勾选镜像版本，单击“确定”。 如果当前已有镜像不满足要求，可以参考注册自定义镜像进行注册后，在此处进行选择。 自定义镜像中可以改变作业的容器运行环境，增强作业的功能、性能。
      添加工作组	单击“添加工作组”，您可以添加多个工作组配置，但最多可以添加10个工作组。 如果添加工作组错误，您也可以在“操作”列单击“删除”，删除工作组，至少需保留一个工作组。
      智算资源复用	如果您选择了GPU或NPU资源，可以按需开启此功能，开启后通算工作组作业能够使用智算工作组空闲的CPU和内存资源。如果仅有GPU或NPU资源，默认开启此功能。 注意： 该操作可能会导致智算任务因资源不足而排队。

      工作组配置后，即可在页面右侧的资源配额区域查看端点关联资源池后配置的资源规格及Min和Max资源数量。

   4. 请根据界面提示，配置存储。

      表5 存储配置说明

      参数	参数说明
      选择OBS桶	选择用于存储作业运行过程中的结果缓存和日志文件的OBS桶，端点创建后不支持修改。 如果没有可用的OBS桶，可单击“新建OBS”进行创建。具体操作，请参见创建并行文件系统。
      选择临时存储资源	选择用于缓存Aura引擎的运行时程序的存储资源，端点创建后不支持修改。 资源规格负责执行计算任务，而存储资源则用于持久化数据、中间结果或模型文件等。当计算任务需要访问或生成大量数据，且这些数据无法完全由计算节点本地存储或共享存储系统承载时，就需要增加计算资源组外的存储资源。 Aura端点的配置允许用户配置外部的存储资源，用于存储Aura端点运行作业的数据。 当计算任务涉及大规模数据、需要数据共享、长期存储、跨环境访问或希望实现存储与计算解耦时，就需要增加计算资源组外的存储资源。 配置存储资源时，请先参考购买存储资源购买存储资源，然后在创建端点时选择已购买的SFS Turbo存储资源。 如果没有可用的存储资源可单击“购买临时存储”进行创建，详细操作请参见购买存储资源。

   5. 请根据界面提示，配置日志对接LTS。

      表6 配置日志对接LTS说明

      参数	参数说明
      日志对接LTS	按需勾选“日志对接LTS”，如果不对接LTS，则无法查看对应作业的日志，了解更多对接详情请参见使用LTS管理AI DataLake作业日志。 对接LTS后日志会投递到云日志服务（Log Tank Service，简称LTS）进行管理。可以使用LTS对云服务日志进行关键词搜索、运营数据统计分析、运行状况监控告警等多种操作。 勾选该参数后，还需配置“日志组”和“日志流”参数。
      日志组和日志流	日志组（LogGroup）是云日志服务进行日志管理的基本单位，用于对日志流进行分类，一个日志组下面可以创建多个日志流。日志组本身不存储任何日志数据，仅方便管理日志流， 云日志服务是以日志流（LogStream）作为日志管理维度。日志采集后，以日志流为单位，将不同类型的日志分类存储在不同的日志流上，方便对日志进一步分类管理。 如果已存在日志组和日志流：您可以在下拉框中选择日志组和日志流。 如果没有日志组和日志流：需要先创建日志组，然后选择日志组。操作如下： 说明： 每个账号下最多可以创建100个日志组。 单击“创建日志组”。 在弹出“创建日志组&日志流”面板中，配置参数。 日志组名称：输入日志组名称。 日志流名称：输入日志流名称。 日志存储时间（天）：设置日志存储时间。默认存储30天。 企业项目：选择企业项目。 单击“确定”。 单击，刷新后选择日志组和日志流。 具体参数说明，请参见创建日志组和创建日志流。

5. 单击“立即创建”，当端点状态变为“运行中”后，即可提交作业到该端点中运行。

创建AuraJob引擎端点

1. 登录AI DataLake管理控制台。
2. 在页面左上角切换至对应的工作空间。
3. 在左侧导航栏选择“引擎端点 > 多模数据引擎Aura”，进入Aura引擎端点列表页面。
4. 单击页面右上角的“创建端点”，配置参数。
   1. 请根据界面提示，配置端点基础信息。

      表7 端点基础信息说明

      参数	参数说明
      端点类型	选择端点类型为“AuraJob”。 AuraJob用于执行定时调度任务，保障大规模数据稳定处理。
      端点版本	选择端点版本，选择“v1.0”。 v1.0：自定义镜像算子，智算、通算混合资源池统一调度，支持Job级弹性。 v2.0：细粒度Actor级算子编排调度，数据处理Pipeline执行，性能和效率极大提升。
      端点名称	输入端点名称，是端点的唯一标识符，不可与已存在的端点重名，且创建后不支持修改。 名称只能包含小写字母、数字、中划线，且只能以字母开头，以字母或数字结尾。 输入长度不能超过63个字符。
      端点显示名称	输入端点显示名称，创建后可修改，用于用户界面展示，方便用户识别和记忆。 名称只能包含中文、英文、数字、中划线。 输入长度不能超过63个字符。
      添加描述	单击“添加描述”，添加端点描述信息。用于详细说明端点的用途、用途背景等信息，帮助其他用户理解该端点的创建目的和使用场景。

   2. 请根据界面提示，配置资源信息。

      表8 资源配置说明

      参数	参数说明
      资源使用模式	选择资源使用模式。 预留资源：预留资源通过预留专属计算资源，确保业务所需的计算资源的稳定性，同时获得最优的单价成本。更多信息，请参见资源使用模式：预留模式。 混合模式：混合模式结合了预留资源和弹性资源，优先消耗预留资源，高峰期预留资源不足时调度弹性资源组合使用。预留资源保证了业务基线的稳定性，弹性资源的自动调度又具备应对突发负载的弹性能力。更多信息，请参见资源使用模式：混合模式。
      选择计算资源池	在下拉框中选择已创建的资源池。如果下拉框中没有可选的资源池，可以单击“购买资源池”进行购买。具体操作，请参见购买预留资源池。

   3. 请根据界面提示，配置资源规格。
      规格配置后，即可在页面右侧的资源配额区域查看端点关联资源池后配置的资源规格及Min和Max资源数量。

      表9 规格配置说明

      参数	参数说明
      资源规格	在下拉框中选择需要配置的资源规格，支持选择CPU、GPU、NPU资源。
      数量 (Min-Max)	配置资源池分配给当前端点的最低可用资源和资源上限。 Min值默认为0，且置灰不可修改。 Max值需大于0，但不能超过所选计算资源池的资源上限。
      添加规格	您可以按需单击“添加规格”，添加多个规格配置，最多可以添加10个规格。 如果不需要某个规格，可以单击“操作”列中的“删除”，删除规格配置，但至少需保留一个规格配置。

   4. 请根据界面提示，配置存储。

      表10 存储配置说明

      参数	参数说明
      存储配置	按需勾选“存储配置”，勾选后即可使用配置的存储资源存储业务数据，并能实现作业之间的数据共享，否则只能使用CCE容器自带的磁盘存储数据，无法实现数据共享。 勾选该参数后，还需配置“选择临时存储资源”和“挂载目录”参数。
      选择临时存储资源	在下拉框中选择已购买的临时存储资源，端点创建后不支持修改。 如果没有可用的存储资源，请单击“购买临时存储”。具体操作，请参见购买存储资源。
      挂载目录	配置Aura Job端点运行作业Pod中挂载存储文件所在的路径。

   5. 请根据界面提示，配置日志对接LTS。

      表11 配置日志对接LTS说明

      参数	参数说明
      日志对接LTS	按需勾选“日志对接LTS”，如果不对接LTS，则无法查看对应作业的日志，了解更多对接详情请参见使用LTS管理AI DataLake作业日志。 对接LTS后日志会投递到云日志服务（Log Tank Service，简称LTS）进行管理。可以使用LTS对云服务日志进行关键词搜索、运营数据统计分析、运行状况监控告警等多种操作。 勾选该参数后，还需配置“日志组”和“日志流”参数。
      日志组和日志流	日志组（LogGroup）是云日志服务进行日志管理的基本单位，用于对日志流进行分类，一个日志组下面可以创建多个日志流。日志组本身不存储任何日志数据，仅方便管理日志流， 云日志服务是以日志流（LogStream）作为日志管理维度。日志采集后，以日志流为单位，将不同类型的日志分类存储在不同的日志流上，方便对日志进一步分类管理。 如果已存在日志组和日志流：您可以在下拉框中选择日志组和日志流。 如果没有日志组和日志流：需要先创建日志组，然后选择日志组。操作如下： 说明： 每个账号下最多可以创建100个日志组。 单击“创建日志组”。 在弹出“创建日志组&日志流”面板中，配置参数。 日志组名称：输入日志组名称。 日志流名称：输入日志流名称。 日志存储时间（天）：设置日志存储时间。默认存储30天。 企业项目：选择企业项目。 单击“确定”。 单击，刷新后选择日志组和日志流。 具体参数说明，请参见创建日志组和创建日志流。

5. 单击“立即创建”，当端点状态变为“运行中”后，即可提交作业到该端点中运行。

后续操作

Aura端点创建完成后，即可在DataArts Studio作业开发页面提交一个单任务Shell或Pipeline类型的AI DataLake作业至端点运行，详细操作请参见作业开发。