更新时间:2024-10-30 GMT+08:00
分享

多模态检索

多模态检索通过大模型算法,对用户视频库进行特征提取,再通过多模态视频检索功能,检索出满足文本或者视频搜索条件的视频片段。

前提条件

在服务控制台“总览”>“我的模型”区域,开通“多模态检索”服务,具体操作步骤请参考开通我的模型和购买套餐包

视频库配置

  1. 在左侧菜单栏中单击“智驾模型服务 > 多模态检索”。
  2. 单击左上角“视频库配置”。
  3. 完成基本信息。

    图1 视频库配置
    • 名称:只能包含数字、英文、中文、下划线、中划线,输入长度不得超过64个字符。
    • 描述:简要描述任务,不能包含“@^\#$%&*<>'|"/`”,输入长度不能超过256个字符。
    • 视频文件:请选择视频库的路径。

  4. 单击“生成视频特征”,平台根据大模型算法自动生成视频特性。生成新视频特征会覆盖原视频库信息,请谨慎操作。

当前一个用户只支持配置一个视频库。

视频检索

  1. 在左侧菜单栏中单击“智驾模型服务 > 多模态检索”。
  2. 单击多模态检索任务操作栏中的“检索”,在检索弹出框中填写基本信息。

    图2 视频检索
    • 检索输入:当检索类型为“文本”时,请输入检索文本;当检索类型为“视频”时,上传一个视频文件,文件大小不能超过5MB。
    • 检索类型:可选择“文本”和“视频”。
    • 检索结果个数:设置检索个数。每次最多可以检索出100个结果。

  3. 单击“检索”,将从视频库中按置性率检索出符合检索特征的视频路径及视频片段。

    图3 检索视频

  4. 单击“预览”,预览检索视频片段。
  5. 单击“保存检索结果CSV文件”,将搜索结果下载到本地保存。

相关文档