《Ai流程编排+知识库》v8.2更新内容

COOL发布于:3天前

项目

本次更新的项目为《Ai流程编排+知识库》,Node版本

更新内容

由于市面上的知识库产品实在太难用,无法满足我们的业务需求。本次更新主要加强了知识库的导入、分片、智能检索等功能。

并且还引入的知识图谱等强大的功能,极大地提高了检索的准确性。

Description

1、知识导入

  • 文件导入不再依赖unstructured,官方限制开源版本的能力,又慢又不准。已集成各种文档解析的内置依赖,解析速度大大提升。
  • 网页导入,支持扫描整个网站进行导入,如导入整个开发文档:https://node.cool-admin.com
  • 完善源资源与分块信息浏览布局,更加直观。

Description

Description

2、知识分块

  • 分块分为:高质量、快速、不分块,根据场景自由选择;
  • 高质量:不再是粗鲁地一刀切,而是根据文档内容和含义进行分块,并且会美化排版还有给分块打上标签;
  • 快速分块:可以配置分段标识符、分段最大长度、分段重叠长度;
  • 不分块:顾名思义就是不进行分块,一般用于自定义录入信息;

Description

3、知识检索

  • 知识检索分为:经济、高质量、知识图谱。
  • 经济:根据用户问题进行简单的向量检索,速度快但是准确率相对较低;
  • 高质量:根据用户问题和目的,到知识库里检索相关信息,大大提高准确率;
  • 知识图谱:在高质量的基础上,将检索出来的进行,再进行关联关系检索,极大地提升回复的完整和准确性;

4、其它

  • 新增JSON提取节点,不依赖大模型的结构化输出,准确提取大模型输出的JSON内容并转为对象;
  • 开始节点支持文件,可以上传文档与大模型进行交互;
  • 新增支持阿里云、硅基流动的向量模型和重排模型;

Description

效果对比

文档的重要信息会被分在不同的块中,这样可能导致大模型回复的时候信息丢失,回复不完整。

Description

回复时丢失重要信息

Description

Cool的高质量分块,不仅将相关的重要内容放在一起,还对分块打上标签。

Description

完整回复

Description

无知识图谱,无法关联各种信息,一个问题有多个内容无法索引到相关信息,导致无法输出相关信息。

Description

有知识图谱加持,能够关联到对应信息,回复完整准确。

Description

Description

注意事项

本次更改内容较多,数据结构和菜单均有变化,需要重新初始化数据库,更新前请做好数据备份!!!

似乎问题还未解决