Kernel Memory 入门系列：生成并获取文档摘要

风晓 2023-12-30 09:51:57  22859 赞同 0 反对 0

分类：资源

前面在RAG和文档预处理的流程中，我们得到一个解决方案，可以让用户直接获取最终的问题答案。但是实际的业务场景中，仍然存在一些基础的场景，不需要我们获取文档的所有详情的，而只是了解的文档的大概信息，得到文章整体的摘要或者总结，此时仍然可以使用Kernel Memory来处理。

生成摘要

我们依然使用Kernel Memory的文件导入方法，不过此时不需要指定默认的处理流程，而只需要指定Summary流程即可。

	await memory.ImportDocumentAsync(new Document("doc1")
	.AddFile("file4-SK-Readme.pdf")
	.AddFile("file5-NASA-news.pdf"),
	steps: Constants.PipelineOnlySummary);

其中PipelineOnlySummary 包含了一下步骤：

extract
summarize
gen_embeddings
save_records

相比较默认的流程，仅是将partition变更为了summarize, 但是实际存储的记录将不再是源文档的分片，而是经过LLM总结之后的内容摘要。

获取摘要

获取的摘要的方法更加直接，使用SearchSummariesAsync方法，通过文档过滤条件过滤需要获取文档摘要即可。

	// Fetch the list of summaries. The API returns one summary for each file.
	var results = await memory.SearchSummariesAsync(filter: MemoryFilters.ByDocument("doc1"));

	// Print the summaries!
	foreach (var result in results)
	{
	Console.WriteLine($"== {result.SourceName} summary ==\n{result.Partitions.First().Text}\n");
	}

检索生成数据

摘要的生成和检索在Kernel Memory中实际是数据类型标记和自定义筛选筛选的过程。

在生成摘要的过程中，将摘要内容作为生成内容，通过添加__synth:summary标记进行存储，筛选的时候也是类似。文档的标记和筛选，将会在后续【文档管理】中的详细讲解。

而摘要的检索的过程SearchSummariesAsync实际上也是调用SearchSyntheticsAsync过程，指定了__synth:summary标记的段落进行检索。

同理，生成摘要的过程也可以进行自定义的过程，例如文章分类，关键词提取，实体提取，题图生成等任何的文章处理流程。后续也会详细介绍【自定义流程】的处理。

如果您发现该资源为电子书等存在侵权的资源或对该资源描述不正确等，可点击“私信”按钮向作者进行反馈；如作者无回复可进行平台仲裁，我们会在第一时间进行处理！

评价 0 条

相关资源

openstack如何创建项目上传含kernel、initramfs和rootfs三者的镜像 2024-01-31 20938 浏览
openstack如何创建项目上传含kernel、initramfs和rootfs三者的镜像
如何解决C++运行时错误：’out of memory exception’？ 2024-01-09 22694 浏览
引言：在C++编程中，经常会遇到内存不足的情况，特别是在处理大数据集合或者复杂的算法时。当程序无法再分配额外的内存来满足其需要时，就会抛出’out of memory exception’（内存不足异常）。本文将介绍如何解决这类问题，并给出相应的代码示例。
无法生成模型“表“TableDetails”中列“IsPrimaryKey”的值为DBNull 2023-12-15 23050 浏览
无法生成模型“表“TableDetails”中列“IsPrimaryKey”的值为DBNull
奔图P2200、P2500系列打印机如何查看碳粉余量？ 2023-12-20 23323 浏览
常用打印面的朋友们，应该都会经常监控打印机的碳粉用量，以便可以及时地购买耗材，避免正打印这一堆文件却没碳粉的尴尬，查看碳粉余量，难道每次都要麻烦地连接电脑吗？今天教你如何快速查看碳粉余量？适用用奔图PP2200、P2500系列打印机
奔图P3010-P3300、M6700-7300系列打印机如何调整纸盒？ 2023-12-20 20356 浏览
采购选定了奔图A4幅面打印面，可是入手后发现纸盒的长度不够，无法平整放入A4纸，2步教你如何调整纸盒。适用奔图P3010-P3300、M6700-7300系列打印机
电脑入门级最基础知识 2023-12-21 22717 浏览
适用于电脑操作人员,最基础知识
NetCore实战：基于html生成pdf文件案例讲解 2023-12-25 22509 浏览
今天会给大家分享NetCore实战：基于html生成pdf文件案例讲解
PowerShell系列（一）：PowerShell介绍和cmd命令行的区别 2023-12-25 21316 浏览
什么是Windows系统的命令行环境，之前我们在使用XP、Win7系统的时候，用的最多的就是微软官方自带的cmd命令窗口了，我们通过敲命令行窗口可以实现和操作系统之间的交互。当然随着微软技术的快速发展，到了目前比较流行的Win10操作系统，默认采用的就是PowerShell命令行交互工具了，今天就给大家介绍Powershell相关的知识，希望对大家学习能带来一些帮助！
CP/CM2200系列产品套色不准的解决方法 2024-04-12 18296 浏览
小图,我在打印彩页时发现页面出现2个颜色的重影,这怎么办呀? CP/CM2200系列产品套色不准的解决方法
PowerShell系列（三）：PowerShell发展历程梳理 2023-12-25 23284 浏览
今天给大家聊聊PowerShell的发展历程，以及各个版本之间有什么亮点。

Kernel Memory 入门系列： 生成并获取文档摘要

生成摘要

获取摘要

检索生成数据

相关资源

Kernel Memory 入门系列：生成并获取文档摘要