Skip to content

[Feature] 知识库支持多模态 #6920

Description

@xxyj6450

MaxKB Version

2.10.6

Please describe your needs or suggestions for improvements

现在知识库只支持文本型内容,而不支持图像,视频内容

Please describe the solution you suggest

  1. 知识库支持上传图像,视频格式文件
  2. 上传的每一个图像/视频可作为独立的段落(而非文档)追加写入([Feature] 知识库工作流支持文档参数设置 #6918 )
  3. 知识库写入节点支持使用多模态嵌入模式向量化文档,并将内容追加到指定文档([Feature] 知识库工作流支持文档参数设置 #6918 )
  4. 知识库写入段落时保留与原始文档的链接关联/记录([Feature] 支持分布式对象存储 #6919)
  5. 图像的描述信息由开发者自行通过AI对话生成,并通过标题,标签等进行存储([Feature] 知识库全局标签及检索功能 #6916 )
  6. 知识库检索支持使用图像/视频/音频
  7. 重排模型支持对多模态内容进行重

Additional Information

No response

Activity

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

Labels

No labels
No labels

Type

No type

Projects

No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions