2024年9月3日
[ 大型语言模型(LLMs)快速发展,为聊天机器人提供了事实上的框架。通过按照提示直接操作,这些模型可以扮演永远有帮助的数字助理的角色。然而,与早期不那么复杂的同行相比,它们提供更密集、凝聚力更强的反应。然而,没有完美的英雄,也缺乏不可替代的知识地图。尽管如此,当他们不知道自己不知……
阅读全文
2024年9月2日
通过Hartmut Elsenhans的经济理论理解大型语言模型( LLM )中的检索增强生成(RAG)的有趣尝试 [ ](https://palarkaprabha..com/?source=post_page-----f358e0e0077d--------------------------------) 人工智能与经济理论的交汇:检索增强生成(RAG)与哈特穆特·埃尔森汉斯的政治经济学 在探索人工智能(AI)的边界时,我们发现自然语言处理(NLP)领域的检索增强生成(RAG)……
阅读全文
2024年9月2日
RAG系统概述 RAG,即Retrieval-Augmented Generation,是一种结合了检索(Retrieval)和生成(Generation)的模型架构,用于处理复杂的自然语言处理任务。RAG系统通过检索相关信息并结合生成模型来提供准确的回答。 如何搭建RAG应用 搭建一个……
阅读全文
2024年8月28日
转载自:机器之心 Transformer 在深度学习领域取得巨大成功的关键是注意力机制。注意力机制让基于 Transformer 的模型关注与输入序列相关的部分,实现了更好的上下文理解。然而,注意力机制的缺点是计算开销大,会随输入规模而二次增长,Transformer 也因此难以处理非常长的文本。 前段时间,Mamba 的出现打破了……
阅读全文
2024年8月28日
Tech Day 本文由阿里云技术专家魏子珺在【AI搜索TechDay】上的分享【阿里云Elasticsearch AI搜索实践】整理而成。 【AI搜索TechDay】是Elastic和阿里云联合主办的AI技术Meetup系列,聚焦企业级AI搜索应用和开发者动手实践,旨在帮助开发者在大模型浪潮下升……
阅读全文
2024年8月28日
CentOS7下制作openssl1.1.1i RPM包并升级 OpenSSL最新漏洞 OpenSSL官方发布了拒绝服务漏洞风险通告,漏洞编号为CVE-2020-1971 漏洞详情 OpenSSL是一个开放源代码的软件库包,应用程序可以使用这个包来进行安全通信,避免窃听,同时确认另一端连接……
阅读全文
2024年8月20日
在这一期中,我们延续上一期 Bert 中文短句相似度计算 Docker CPU镜像,继续使用 huggingface transformer 和 sentence-transformer 类库,并将英语句子生成 bert embedding,然后引入 faiss 类库来建立索引,最后查询最接近的句子。 Docker 镜像获取方式 本期 docker 镜像获取方式为,关注 MyEncyclopedia 公众号后回复 docker-faiss-transformer 即可获取如下完整命令。 1 docker run -p 8888:8888 myencyclopedia/faiss-demo bash -c 'jupyter notebook --allow-root --port 8888 --NotebookApp.token= --ip 0.0.0.0' 然……
阅读全文
2024年8月20日
Faiss向量数据库使用教程:Docker化部署与向量化执行 一、前言 Faiss(Facebook AI Similarity Search)是由Facebook AI开发的一个高效相似性搜索库和工具集。它能够支持数十亿级别的向量存储,并在毫秒级别完成相似性搜索,为推荐系统、图像和文本检索等任务提供了强大的解……
阅读全文
2024年8月20日
高性能向量检索库(milvus & faiss)简介 Milvus和Faiss都是高性能向量检索库,它们能够快速检索出与目标向量最相似的向量。本文将对这两个库进行介绍和对比,并提供Milvus和Faiss的安装及使用教程。 什么是Milvus和Faiss? Milvus是一款开源的向量数据……
阅读全文
2024年8月20日
检索增强生成技术(RAG)概述 引言生成式人工智能(GenAI)在文本生成、文本到图像生成等领域展现出强大的能力,但同时也存在一些局限性,如幻觉倾向、数学能力不足和缺乏可解释性。为了克服这些问题,**检索增强生成(Retrieval-Augmented Generation, RAG)**技术应运而生。 R……
阅读全文