首页 > 其他分享 >基于AI知识库RAG的综合窗口系统

基于AI知识库RAG的综合窗口系统

时间:2024-09-15 10:23:48浏览次数:12  
标签:检索 RAG AI 知识库 系统 生成 组件

基于AI知识库RAG的综合窗口系统banner

背景

      电子政务网上大厅统一接件系统是为各市、区(市)县所有行政权力事项(行政许可、行政处罚、行政强制、行政征收、其他行政权力等)实现在线统一接件、办理调度、办件过程信息查询、结果查询及公开、服务评价、办件统计等功能的应用系统,它通过标准数据接口、基于政务信息共享交换平台实现与行政审批系统等市级综合业务平台、地税局网上办税系统等部门业务平台、电子监察系统等应用实现互联互通,办件数据共享,为没有业务系统的部门及事项提供在线接件功能,通过该系统形成一个真正意义的在线办事服务平台,将分散于不同业务系统的接件平台统一到政府门户网站,让用户不再跑网上的分散窗口。针对政府网站信息搜不到、搜不全的问题,平台对网站信息进行结构化处理,通过构建信息知识图谱,整合辖区情况介绍、政策文件、办事服务、热门问答等内容,形成知识库。市民只需输入关键词或问题,平台就能迅速总结提炼相关信息,有效提升咨询效率和准确度。GPT智能客服通过对大量政策文件的深度学习,精准把握政策深层含义,当企业用户、普通市民只需在线输入问题,平台即可智能匹配相关政策法规和办事流程等信息,并生成清晰、简洁的解读及指导,有效破解传统智能客服“不解人意”“答非所问”的问题,帮助公众更好理解政策。以下实践某政务综合窗口接件系统基于RAG的实践

RAG(Retrieval-Augmented Generation)

      RAG技术全称为“检索增强的生成”,它将传统的信息检索技术与现代的自然语言生成技术相结合,旨在提高文本生成的准确性和相关性。这种技术通过引入外部知识源,使得语言模型在生成文本时能够参考更广泛、更准确的信息,从而显著提升生成内容的质量和可信度。

RAG技术主要由两个核心组件构成:检索组件和生成组件。

  1. 检索组件:负责从大型知识库中检索出与给定输入相关的信息。这个知识库可以是维基百科、专业期刊、书籍等任何形式的文档集合。检索组件通常使用向量检索技术(如FAISS或Annoy库)来快速定位相关文档或文档片段。

  2. 生成组件:是一个预训练的Transformer模型(如GPT或BERT),它结合了原始输入和检索组件提供的外部信息来生成文本。生成组件能够根据融合了检索信息的上下文生成回答或续写文本,从而确保生成内容的准确性和丰富性。

流程

image


数据流

image

功能架构

image


Elastic k-Nearest Neighbor (kNN) Search

k 最近邻 (kNN) 算法对密集向量类型的字段执行相似性搜索。这种类型的搜索更合适地称为“近似 kNN”,接受向量或嵌入作为搜索项,并查找索引中接近的条目。以下图片来自Elastic官方image



实践

    将之前收集到政策相关事项docx文件,195个文档上传知识库,包含 事项要素,材料模板,审查样表 的docx文档,其中审查样表部分docx包含图片

clip_image002


如下是已经导入完成

clip_image004

解析完成后

clip_image006

数据管理可查看导入文档详情

clip_image008

clip_image010

创建索引

clip_image012

知识库管理

clip_image014

知识库基于向量存储ElasticSearch

clip_image016

已经自动切片

clip_image018

命中测试

clip_image020

应用配置 对应知识库

clip_image022

测试对话

clip_image024

前端UI编写

clip_image026

最终我们看到 综合窗口的AI助手

入口


clip_image028

智能AI对话与咨询

clip_image030

示例2

clip_image032

示例3

clip_image034

我们可以看HTTP 请求响应体

clip_image036

第二部分

clip_image038

总结

      我们看到电子政务网上大厅综合窗口接件基于RAG实现准确智能助手。RAG技术在多个领域具有广泛的应用前景,包括但不限于问答系统、文本摘要、对话系统、企业信息库建设、AI文档问答、业务培训、科研等场景。通过结合检索和生成两种技术,RAG技术为这些领域提供了更加高效、准确和可靠的解决方案。



今天先到这儿,希望对云原生,技术领导力, 企业管理,系统架构设计与评估,团队管理, 项目管理, 产品管理,信息安全,团队建设 有参考作用 , 您可能感兴趣的文章:
构建创业公司突击小团队
国际化环境下系统架构演化
微服务架构设计
视频直播平台的系统架构演化
微服务与Docker介绍
Docker与CI持续集成/CD
互联网电商购物车架构演变案例
互联网业务场景下消息队列架构
互联网高效研发团队管理演进之一
消息系统架构设计演进
互联网电商搜索架构演化之一
企业信息化与软件工程的迷思
企业项目化管理介绍
软件项目成功之要素
人际沟通风格介绍一
精益IT组织与分享式领导
学习型组织与企业
企业创新文化与等级观念
组织目标与个人目标
初创公司人才招聘与管理
人才公司环境与企业文化
企业文化、团队文化与知识共享
高效能的团队建设
项目管理沟通计划
构建高效的研发与自动化运维
某大型电商云平台实践
互联网数据库架构设计思路
IT基础架构规划方案一(网络系统规划)
餐饮行业解决方案之客户分析流程
餐饮行业解决方案之采购战略制定与实施流程
餐饮行业解决方案之业务设计流程
供应链需求调研CheckList
企业应用之性能实时度量系统演变

如有想了解更多软件设计与架构, 系统IT,企业信息化, 团队管理 资讯,请关注我的微信订阅号:

image_thumb2_thumb_thumb_thumb_thumb[1]

作者:Petter Liu
出处:http://www.cnblogs.com/wintersun/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。 该文章也同时发布在我的独立博客中-Petter Liu Blog。

标签:检索,RAG,AI,知识库,系统,生成,组件
From: https://www.cnblogs.com/wintersun/p/18415036

相关文章

  • 强力推荐小奈AI效率神器
    在这个科技飞速发展的时代,人工智能已经渗透到生活的方方面面。人类通过AI的力量,突破了创作、交流和工作效率的限制。今天,我要向你隆重推荐一款开创未来的智能助手——小奈AI,它不仅集成了全球领先的AI模型,还为用户提供了全方位的核心功能,从对话、绘画到音乐创作,为你打开一个崭新......
  • SpringBoot+Neo4j+Vue+Es集成ES全文检索、Neo4J知识图谱、Activiti工作流的知识库管理
     在数字化高度普及的时代,企事业机关单位在日常工作中会产生大量的文档,例如医院制度汇编,企业知识共享库等。针对这些文档性的东西,手工纸质化去管理是非常消耗工作量的,并且纸质化查阅难,易损耗,所以电子化管理显得尤为重要。【springboot+elasticsearch+neo4j+vue+activiti】实现......
  • WPF this.DragMove() DropShadowEffect
    //xaml<Windowx:Class="WpfApp367.MainWindow"xmlns="http://schemas.microsoft.com/winfx/2006/xaml/presentation"xmlns:x="http://schemas.microsoft.com/winfx/2006/xaml"xmlns:d="http://schemas.mi......
  • AI与艺术的碰撞:当机器开始创作,创造力何在?
    一、引言艺术与创造力的定义及重要性艺术,作为人类情感和思想的表达形式,涵盖了绘画、音乐、文学等多种领域。它不仅是文化传承的载体,更是人类想象力和创造力的结晶。创造力,则是推动艺术发展和社会进步的关键力量,它促使人们不断突破传统框架,探索新的艺术表现方式和文化内涵......
  • FLUX1. AI 绘画有多强大?无需登录就可使用,带你解锁无限创意!
    Flux1.Art是一个基于AI技术的平台,它允许用户利用最新的Flux.1模型生成图像。不需要用户登录,并且提供了无限次数的使用权限。用户只需在输入框中输入想要生成的图像描述,调整图像清晰度、大小等设置,然后点击“生成”按钮,Flux.1模型就会根据描述创建图像。支持中文简......
  • AI大语言模型LLM学习-本地部署大语言模型(Ollama)
    系列文章1.AI大语言模型LLM学习-入门篇2.AI大语言模型LLM学习-Token及流式响应3.AI大语言模型LLM学习-WebAPI搭建4.AI大语言模型LLM学习-基于Vue3的AI问答页面5.AI大语言模型LLM学习-语义检索(RAG前导篇)6.AI大语言模型LLM学习-RAG技术及代码实现7.AI大语言模型LL......
  • 法国的Mistral AI大语言模型详解
    MistralAI概述MistralAI是一家法国人工智能(AI)公司,专注于开发开源大型语言模型。该公司成立于2023年4月,由前Meta平台和GoogleDeepMind的员工创立。MistralAI在AI领域迅速崛起,成为全球领先的开源模型提供商之一。历史背景MistralAI由ArthurMensch、GuillaumeLample和Tim......
  • 马斯克xAI公司的Grok大语言模型详解
    Grok详细介绍Grok是由xAI开发的生成式人工智能聊天机器人,基于大型语言模型(LLM),由埃隆·马斯克发起。该聊天机器人以“具有幽默感”和直接访问X的能力为卖点。目前,Grok正处于测试阶段,仅对XPremium用户开放。背景埃隆·马斯克于2015年与SamAltman共同创立了AI研......
  • 解码3D数字人及AIGC产品,如何赋能医美行业全场景业务增长
    9月13日,第六届“医美小小聚”暨医美信息与服务创新发展大会在热烈的氛围中拉开帷幕。此次盛会汇聚了医美行业的顶尖精英与前瞻者,他们围绕“聚焦营销,合规增长,融合共创”的主题,深入剖析了行业的新趋势、新机遇与新挑战。在这场前瞻观点与前沿技术的碰撞中,魔珐科技凭借领先的3D数......
  • OpenAI的ChatGPT各个模型有什么区别?
    ChatGPT版本历史/区别特点对比以下是OpenAI 公司ChatGPT 各主要模型版本的详细描述,说明了每个版本中的显著变化:GPT-3.5发布日期:2022年11月描述:GPT-3.5是第一个用于ChatGPT的版本,基于GPT-3.5模型。此版本在准确性和理解能力上有所提升,但仍在GPT-3的基础......