目录
一、概述
二、详解
三、代码实操
一、概述
这个demo涉及两个知识点,添加历史信息以及大文本切块。
添加聊天信息能够上大模型有上下文你记忆,大文本切块能够控制进行单一工作是,大模型回话不要超token。
二、详解
- TextChunker.SplitPlainTextLines
TextChunker.SplitPlainTextLines
是 Semantic Kernel(微软的一个开源框架,旨在通过与大语言模型(LLMs)进行交互来构建智能应用程序)中的一个功能,它主要用于处理纯文本,并将其分割为单独的行。
TextChunker.SplitPlainTextLines
是一个文本处理工具,旨在将输入的纯文本(plain text
)按照行进行分割。这个方法的目的是帮助开发者在处理长文本时,能够有效