• 2024-06-20RAG 如何消除大模型幻觉
    什么是大模型幻觉假设我们有一个基于大型生成模型(如GPT-3)的问答系统,该系统用于回答药企内部知识库中的问题。我们向其提出一个问题:“阿司匹林的主要药理作用是什么?”正确的答案应该是:“阿司匹林主要通过抑制环氧酶(COX)酶的活性,降低前列腺素和血栓素的生成,从而起到抗血小板
  • 2024-05-29微调真的能让LLM学到新东西吗:引入新知识可能让模型产生更多的幻觉
    大型语言模型(llm)是在巨大的文本语料库上训练的,在那里他们获得了大量的事实知识。这些知识嵌入到它们的参数中,然后可以在需要时使用。这些模型的知识在培训结束时被“具体化”。在预训练结束时,模型实际上停止学习。对模型进行对齐或进行指令调优,让模型学习如何充分利用这些知识,
  • 2024-05-27NOI模拟 排序幻觉
    涉及知识点:二进制,贪心题意给一个数组\(a[1],a[2],\ldots,a[n]\),选择一个数\(b\),如果\(b\)满足:\[(a[1]\oplusb)\leq(a[2]\oplusb)\leq\ldots\leq(a[n]\oplusb)\]则称\(b\)是数组\(a\)的幻数。有\(q\)次询问,每次永久修改一个数。对于原数组与每次询问后
  • 2024-05-25Agent 如何更有用
    先看这篇会更连贯Agent的记忆能力学习来源LLM的基础能力1、复杂任务的规划和分解2、遵循复杂指令3、自主使用工具4、减少幻觉一两个人就能开发的有用AIAI的优势:长文本的阅读理解能力、广阔的知识面。1、导游:GPT-4知道很多著名景点,还能做行程规划。2、企业ERP助手
  • 2024-03-27【译】你的大脑是幻觉吗?
    原作:狄巴克·乔布拉作者:狄巴克·乔布拉医学博士、美国内科医师学会会员、英国皇家内科医师学会会员/Gemini翻译/ 当得知古印度关于玛雅的概念时,即认为世界是幻觉,东西方的大多数人都会耸耸肩。如果他们思考玛雅,他们会将其归为形而上学,这同样容易被忽视。但在物理学量子革命一
  • 2024-03-23A Survey on Large Language Model Hallucination via a Creativity Perspective
    本文是LLM系列文章,针对《ASurveyonLargeLanguageModelHallucinationviaaCreativityPerspective》的翻译。从创造力的角度考察大型语言模型的幻觉摘要1引言2LLM时代的幻觉3幻觉中隐藏的创造力4大型语言模型的创造力5利用LLM幻觉进行创造6结论和未
  • 2024-02-22Prompt技巧
    减少幻觉明确角色定义,任务描述,列出执行规则或步骤;最后一句为总结,比如:请按照以上要求执行以下任务:遇到某些幻觉,尽量直接描述应该怎么做,不要使用否定词,比如:禁止做什么什么,更容易误导GPTprompt不要太长,不要有模糊不清的词语,不要有前后矛盾的词语,尽量少的让GPT做辩证的工
  • 2024-02-10创新指南|企业实施Gen AI面临的10大挑战
    文章列出了实现生成式人工智能(GenAI)成功的十大挑战。这些挑战涵盖了从数据管理和法律法规到处理能力、解释能力、准确性问题等多个方面。文章强调,尽管GenAI具有巨大的潜力,但要克服这些挑战以实现其在业务中的有效应用。这些挑战反映了目前GenAI领域面临的关键问题和正在进行的
  • 2024-01-15解密Prompt系列23.大模型幻觉分类&归因&检测&缓解方案脑图全梳理
    上一章我们主要聊聊RAG场景下的幻觉检测和解决方案,这一章我们单独针对大模型的幻觉问题,从幻觉类型,幻觉来源,幻觉检测,幻觉缓解这四个方向进行整理。这里就不细说任意一种方法了,因为说不完根本说不完,索性用脑图概览式地看下整个大模型幻觉领域。主要参考以下两篇论文ASurveyonHa
  • 2024-01-09什么是大语言模型的“幻觉”
    使用ChatGPT的朋友应该遇到过这样的情况,模型有时候会答非所问甚至自相矛盾,这种情况被成为大语言模型的“幻觉”,即在处理和生成文本时出现的一些特定的错误或误解。这些幻觉可能源于模型对现实世界的理解不足、数据训练的偏差、或者算法本身的局限性。出现幻觉的原因有几个方面:1、数
  • 2024-01-08使用知识图谱提高RAG的能力,减少大模型幻觉
    在使用大型语言模型(llm)时,幻觉是一个常见的问题。LLM生成流畅连贯的文本,但往往生成不准确或不一致的信息。防止LLM产生幻觉的方法之一是使用提供事实信息的外部知识来源,如数据库或知识图谱。向量数据库和知识图谱向量数据库向量数据库是表示实体或概念(如单词、短语或文档)的
  • 2023-12-11奥特曼被指爱权力胜过金钱;人类才是「幻觉问题」根本原因丨 RTE 开发者日报 Vol.103
       开发者朋友们大家好:这里是「RTE开发者日报」,每天和大家一起看新闻、聊八卦。我们的社区编辑团队会整理分享RTE(RealTimeEngagement)领域内「有话题的新闻」、「有态度的观点」、「有意思的数据」、「有思考的文章」、「有看点的会议」,但内
  • 2023-10-26让大模型真正学会1+1=2!谷歌教会模型自动学习推理规则,大模型的幻觉有救了
    作者|谢年年在初学算术加法或乘法时,我们通过数小棍的方式逐步从1+1=2,1+2=3等例子中得出1+3=4,这是一种依赖记忆中的数学表格进行演绎推理的过程。后来老师告诉我们前辈们总结了一套完备的求和或乘法表,只要背住,做简单算术题根本不成问题,也不需要数小棍啦!这样一套完备的求和或乘法表
  • 2023-10-25大模型的幻觉问题
    一什么是幻觉问题大模型的幻觉问题是指大模型生成的答案不基于任何事实数据,简单来说就是杜撰、一本正经的胡说八道。幻觉问题也是影响大模型落地的重要原因之一幻觉问题分类1和用户输入冲突的幻觉2和上下文冲突的幻觉3和事实知识冲突的幻觉(目前重点)例如,大模型在生成医疗
  • 2023-09-10字体颜色变换与阴影效果实现字体变大幻觉
    定义元素<divclass="myText">342342</div>CSS按照如下设置,hover时将体验到字体动态凸出的视觉效果.myText{background-color:black;font-family:'PingFangSC','HelveticaNeue','Helvetica','Ari
  • 2023-08-18构建LLM应用程序时需要了解的5件事
    推荐:使用NSDT场景编辑器助你快速搭建可二次编辑的3D应用场景1.幻觉使用LLM时应注意的主要方面之一是幻觉。在LLM的背景下,幻觉是指产生不真实的,不正确的,无意义的信息。LLM非常有创意,它们可以用于不同的领域,但仍然存在的一个非常关键的未解决问题是它们的幻觉。由于LLM不是搜索引