漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2024-06-08 talkingdev

RAG应用中的分块:精准切分很难做到?

在自然语言处理(NLP)中,分块是指将句子分成更小的组块(块)的过程,每个块都有自己的语法和含义。在RAG(Retrieval-Augmented Generation)应用程序中,分块是生成响应的重要步骤。不同于传统的基于规则或基于统...

Read More
2024-04-09 talkingdev

Open Parse:轻松实现复杂文档的智能分块

Open Parse是一个开源项目,旨在帮助用户像人类一样轻松地对复杂文档进行分块处理。该项目提供了一个灵活的库,能够直观地识别文档布局并有效地进行分块。Open Parse不仅支持Markdown格式,还能够处理表格数据。它的...

Read More
2024-01-25 talkingdev

优化矩阵乘法,以加速AI运行

本文简要介绍了硬件特定的矩阵乘法优化和一般流程,以加速AI代码。现代深度学习算法中,矩阵乘法是常见的操作。优化矩阵乘法的实现可以显著提高模型的训练和推理速度,进而提高模型的准确性和效率。矩阵乘法优化的主...

Read More
2023-06-26 talkingdev

embedchain:一个用于创建基于大型语言模型的聊天机器人的框架

embedchain是一个用于创建基于大型语言模型的聊天机器人的框架。它抽象了加载数据集、分块、创建嵌入和存储到向量数据库的整个过程。用户可以通过链接到媒体文件,如视频、PDF、博客文章或网站,创建聊天机器人。这...

Read More