目录概BACON代码[YangZ.,FengR.,etal.BACON:Superchargeyourvlmwithbag-of-conceptgraphtomitigatehallucinations.2024.]概本文提出了一种新的数据格式:BACON(BAg-of-Conceptgraph).BACONBACON希望将一个图片转换为\(G=(D,O,R,B)\)的数据格式

发表时间：2024(ICLR2024)文章要点：文章提出用预训练的视觉语言模型作为zero-shot的rewardmodel（VLM-RMs）。好处在于可以通过自然语言来给定一个具体的任务，通过VLM-RMs让强化学习基于reward学习这个任务（usingpretrainedvision-languagemodels(VLMs)aszeroshotrewardmodels

一、前提知识：大模型部署背景：什么是模型部署：部署面临的挑战：受Transformer架构影响：常见GPU算力还能一战，但是显存带宽受限严重，时间花费在数据交换上居多大模型部署方法：模型参数以定点数或整数形式存储，实际计算时，反量化为浮点数去计算，再用定点数和整数去存储计算结