首页 > 其他分享 >COT:大模型的强化利器

COT:大模型的强化利器

时间:2024-04-01 17:29:05浏览次数:24  
标签:分析 COT 案例 指派 模型 问题 利器 芝罘区

大模型相关目录

大模型,包括部署微调prompt/Agent应用开发、知识库增强、数据库增强、知识图谱增强、自然语言处理、多模态等大模型应用开发内容
从0起步,扬帆起航。

  1. 大模型应用向开发路径:AI代理工作流
  2. 大模型应用开发实用开源项目汇总
  3. 大模型问答项目问答性能评估方法
  4. 大模型数据侧总结
  5. 大模型token等基本概念及参数和内存的关系
  6. 大模型应用开发-华为大模型生态规划
  7. 从零开始的LLaMA-Factory的指令增量微调
  8. 基于实体抽取-SMC-语义向量的大模型能力评估通用算法(附代码)
  9. 基于Langchain-chatchat的向量库构建及检索(附代码)
  10. 一文教你成为合格的Prompt工程师
  11. 最简明的大模型agent教程
  12. 批量使用API调用langchain-chatchat知识库能力
  13. langchin-chatchat部分开发笔记(持续更新)
  14. 文心一言、讯飞星火、GPT、通义千问等线上API调用示例
  15. 大模型RAG性能提升路径
  16. 结合基础模型的大模型多源信息应用开发
  17. COT:大模型的强化利器

文章目录


简介

一个完整的包含 CoT 的 Prompt 往往由
指令(Instruction),逻辑依据(Rationale),示例(Exemplars)
三部分组成。一般而言指令用于描述问题并且告知大模型的输出格式,逻辑依据即指 CoT 的中间推理过程,可以包含问题的解决方案、中间推理步骤以及与问题相关的任何外部知识,而示例则指以少样本的方式为大模型提供输入输出对的基本格式,每一个示例都包含:问题,推理过程与答案。

作用

  • 增强了大模型的推理能力:CoT
    通过将复杂问题分解为多步骤的子问题,相当显著的增强了大模型的推理能力,也最大限度的降低了大模型忽视求解问题的“关键细节”的现象,使得计算资源总是被分配于求解问题的“核心步骤”;
  • 增强了大模型的可解释性:对比向大模型输入一个问题大模型为我们仅仅输出一个答案,CoT
    使得大模型通过向我们展示“做题过程”,使得我们可以更好的判断大模型在求解当前问题上究竟是如何工作的,同时“做题步骤”的输出,也为我们定位其中错误步骤提供了依据;
  • 增强了大模型的可控性:通过让大模型一步一步输出步骤,我们通过这些步骤的呈现可以对大模型问题求解的过程施加更大的影响,避免大模型成为无法控制的“完全黑盒”;
  • 增强了大模型的灵活性:仅仅添加一句“Let’s think step by step”,就可以在现有的各种不同的大模型中使用 CoT方法,同时,CoT 赋予的大模型一步一步思考的能力不仅仅局限于“语言智能”,在科学应用,以及 AI Agent 的构建之中都有用武之地。

上述引用:https://zhuanlan.zhihu.com/p/670907685

示例

"SmartAssign":
            '''# 角色
- 你是烟台市市民服务热线智能助手。
- 你的任务是参考以往案例分析市民问题应该指派到哪个部门。 

# 说明
1. 案例由标题、内容、提交时间、答复机构四部分内容组成。
2. 案例中包含真实的用户问题和答复机构。
3. 案例中描述的地区均属烟台市管辖。(也即市教育局、市公安局等指的都是烟台市,其余指明具体市名称的均属)

# 提示
1. 问题中提及具体地区的,会被优先指派该地区相关的部门回复。
2. 问题中未提及具体地区的,会避免指派到包含具体地区名称的部门。
3. 有时候问题中未提及具体地区,但也被指派到了包含具体地区名称的部门是因为考虑到了问题提交者所在地区。(但这个数据我们没有,你知道有这么回事就行)

# 规则
1. 若案例中出现了相同的问题,请优先使用案例中的答复机构。
2. 给出的机构名称应与案例中的完全相同。
# 案例
<
{{ context }}
>

# 问题
请问e类高层次人才个人买房最多贷款额度是65w还是80w?

# 分析
- **内容简述**: 咨询高层次人才个人买房的最多贷款额度。
- **问题分析**: 问题是关于住房公积金贷款的,特别是针对高层次人才的贷款额度,因此自然考虑指派给负责公积金管理的部门,即市住房公积金部门。问题没有指明具体地区,因此参考相似案例,指派到市住房公积金。
- **指派机构**: 市住房公积金

# 问题
想咨询一下低保办理需要什么条件?

# 分析
- **内容简述**: 市民咨询低保办理需要的条件。
- **问题分析**: 低保办理是民政部门的职责范畴,因此问题可以考虑指派给民政局。问题没有指明具体地区,因此参考相似案例,考虑指派到市级的民政局。
- **指派机构**: 市民政局

# 问题
文化苑社区去年测量面积?什么时候拆迁?

# 分析
- **内容简述**: 咨询文化苑社区拆迁的相关信息。
- **问题分析**: 问题是关于具体社区(文化苑社区)的拆迁事宜,因此参考相似案例,需要指派给该社区所在地的街道办事处,即芝罘区毓璜顶街道办事处,以便提供更具体和直接的信息。
- **指派机构**: 芝罘区毓璜顶街道办事处

# 问题
您好!我母亲是黑龙江省户口,现在龙口市居住,办理的龙口市居民医保,上个月住院确诊糖尿病和脑梗塞,请问可以在龙口市办理慢

# 分析
- **内容简述**: 咨询外地户口在本地办理医保后能否享受慢性病优惠。
- **问题分析**: 因为问题中提到了龙口市居住和医保办理,直接涉及到医保业务,因此参考相似案例,问题可以被指派给龙口市医保局,这是因为医保业务通常由当地医保局处理。
- **指派机构**: 龙口市医保局

# 问题
关于芝罘区规划建议,芝罘区作为烟台的市中心,现在发展不如往年,芝罘区得天独厚地里优越,但现在尤其火车站附近烂尾房成片,守着火车站旅客一下车便是第一印象-烟台市中心像是小县城。芝罘区位置很好,其实并不是说建多少CBD彰显城

# 分析
- **内容简述**: 提出芝罘区发展规划的建议。
- **问题分析**: 问题涉及到城市规划和建设,因此自然资源和规划局是合适的答复机构。尽管问题是关于芝罘区的,但答复机构可以考虑市级的自然资源和规划局,这是因为问题涉及到整个区的城市规划,需要更高级别的部门进行回应。因此参考相似案例,指派机构应是市自然资源和规划局。
- **指派机构**: 市自然资源和规划局

# 问题
刚毕业的硕士研究生,想了解领取补贴需要的条件及需要的各项证明。

# 分析
- **内容简述**: 咨询关于领取补贴的条件及所需证明。
- **问题分析**: 问题关于人才引进政策和补贴条件,通常由人才服务或就业服务部门负责,因此需要指派给公共就业和人才服务中心。问题没有指明具体地区,因此参考相似案例,选择指派到市级的服务中心。
- **指派机构**: 公共就业和人才服务中心(网上民声)

# 问题
蓬莱东市场内路北宠物店,无证经营,用别人的营业执照开展经营,卖过期商品,去找店主理论,他告诉他不是店主,店主不在他是店员,他明明就是店主,为了逃避责任,用别人的营业执照。不知道管理部门是否管理过!

# 分析
- **内容简述**: 投诉蓬莱东市场内宠物店无证经营和其他违规行为。
- **问题分析**: 问题涉及无证经营和使用别人营业执照等违规行为,这类问题通常由市场监管部门处理。因为问题中明确提到了蓬莱东市场,因此参考相似案例,考虑直接指派给蓬莱区市场监管局。
- **指派机构**: 蓬莱区市场监管局

# 问题
2023年工程类职称评审什么时间启动

# 分析
- **内容简述**: 咨询关于工程类职称评审的启动时间。
- **问题分析**: 职称评审是专业技术人员管理的范畴,因此问题可以被指派给负责此项工作的专业技术人员管理科。问题没有指明具体地区,因此参考相似案例,考虑指派到相应的市级部门。
- **指派机构**: 专业技术人员管理科

# 问题 
{{ question }}

# 分析'''

提升

当然,COT本质上是一种思维,是令模型具备分步思考、链式思维能力的一种开发技巧,其应用形式本质上不应该局限于prompt。

在构建思维链中,应用Agent、多Agent其实也是cot的一种表现形式。

标签:分析,COT,案例,指派,模型,问题,利器,芝罘区
From: https://blog.csdn.net/qq_43128256/article/details/137239498

相关文章

  • KingbaseES数据库运维案例---SCOTT用户及对象创建
    案例说明:生产用户从Oracle环境迁移到KingbaseES数据库后,需要使用Oracle下scott用户的应用测试环境,本案例借助Oracle创建scott用户应用环境的脚本,创建KingbaseES下的应用测试环境。适用版本:KingbaseESV8R3/R6SCOTT用户有四张数据表:1)部门信息表:dept2)雇员信息表:emp3)工资等......
  • 【形式化方法模型在软件工程中的应用】
    文章目录前言什么是形式化方法模型?常见的形式化方法模型1.Z语言优点:缺点:2.B-Method优点:缺点:3.Alloy优点:缺点:前言形式化方法通过数学和形式化语言来描述和验证软件系统的行为。什么是形式化方法模型?形式化方法模型是一种用于软件开发的工程化方法,它通过形......
  • 小太阳进销存 -- 企业精细管理利器
    小太阳进销存系统是一款功能强大的企业管理软件,旨在帮助企业实现全面的业务管理,提高管理效率和业务运营能力。系统提供了从采购到销售,再到库存管理的完整流程,并整合了财务管理功能,为企业提供了一个集成化的解决方案。在销售管理方面,小太阳进销存支持多种销售模式,如线上销售和线......
  • 隐私计算:保护数据隐私的利器
    PrimiHub一款由密码学专家团队打造的开源隐私计算平台,专注于分享数据安全、密码学、联邦学习、同态加密等隐私计算领域的技术和内容。随着信息时代的发展,个人数据的收集和处理已经成为了许多行业和领域的核心活动之一。然而,随之而来的数据隐私和安全问题也日益突出。个人的敏......
  • 苹果应用商店上架利器:推荐几款常用的应用发布工具
    摘要移动应用app上架是开发者关注的重要环节,但常常会面临审核不通过等问题。为帮助开发者顺利完成上架工作,各种辅助工具应运而生。本文探讨移动应用app上架原理、常见辅助工具功能及其作用,最终指出合理使用工具的重要性。引言移动应用的上架不仅关乎开发者的收益,也直接......
  • 学习transformer模型-Dropout的简明介绍
    Dropout的定义和目的:Dropout是一种神经网络正则化技术,它在训练时以指定的概率丢弃一个单元(以及连接)p。这个想法是为了防止神经网络变得过于依赖特定连接的共同适应,因为这可能是过度拟合的症状。直观上,dropout可以被认为是创建一个隐式的神经网络集合。PyTorch的nn.Drop......
  • MOF 四层模型
    MOF(MetaObjectFacility)四层模型是一个用于描述元数据和元模型的层次化结构,它提供了一种可扩展的元数据管理方式。下面将结合实例详细解释MOF的四层模型:元元模型层(M3层):定义:元元模型层是MOF的最上层,它提供了一种用于描述元模型的元语言。该层定义了元元模型的元素和结构,以及......
  • AI构建新质生产力,合合信息Embedding模型助力专业知识应用
    一、合合信息acge模型获MTEB中文榜单第一 现阶段,大语言模型的飞速发展吸引着社会各界的目光,背后支撑大型语言模型应用落地的Embedding模型也成为业内关注的焦点。近期,合合信息发布了文本向量化模型acge_text_embedding(简称“acge模型”),获得MTEB中文榜单(C-MTEB)第一的成绩。......
  • 9n-triton部署bert模型实战经验
    一、背景对于算法工程师来说,通常采用python语言来作为工作语言,但是直接用python部署线上服务性能很差。这个问题困扰了我很久,为了缓解深度学习模型工程落地性能问题,探索了Nvidia提供的triton部署框架,并在九数中台上完成线上部署,发现性能提升近337%!!(原服务单次访问模型推理时间175m......
  • 大语言模型中常用的旋转位置编码RoPE详解:为什么它比绝对或相对位置编码更好?
    自2017年发表“ AttentionIsAllYouNeed ”论文以来,Transformer架构一直是自然语言处理(NLP)领域的基石。它的设计多年来基本没有变化,随着旋转位置编码(RoPE)的引入,2022年标志着该领域的重大发展。旋转位置嵌入是最先进的NLP位置嵌入技术。大多数流行的大型语言模......