text-splitter 将文本拆分为语义块

授权协议:None操作系统:None 开发语言:None
将文本拆分为语义块,直至达到所需的块大小。支持按字符和标记计算长度,并可从 Rust 和 Python 调用。 大语言模型 (LLM) 可用于多种任务,但其上下文大小通常有限,可能小于你想要使用...