首页 > 其他分享 >课程6-笔记-书生浦语大模型实战营-6

课程6-笔记-书生浦语大模型实战营-6

时间:2024-02-26 11:24:16浏览次数:19  
标签:实战 评测 模型 笔记 书生 浦语

大模型评测概述

评测目的:了解模型能力,指导模型迭代,监控模型风险,把握模型应用

大模型评测方法

客观评测:问答题、多选题、判断题等 主观评测:主观题(人类评价、模型评价)

OpenCompass评测平台

image.png image.png

标签:实战,评测,模型,笔记,书生,浦语
From: https://www.cnblogs.com/russellwang/p/18033901

相关文章

  • 书生浦语大模型实战营-结业材料
    第一节课笔记https://www.cnblogs.com/russellwang/p/18023910第二节课笔记https://www.cnblogs.com/russellwang/p/18023922第二节课作业https://www.cnblogs.com/russellwang/p/18024031第三节课笔记https://www.cnblogs.com/russellwang/p/18033843第三节课......
  • 课程4-笔记-书生浦语大模型实战营-4
    1、XTuner安装#如果你是在InternStudio平台,则从本地clone一个已有pytorch2.0.1的环境:/root/share/install_conda_env_internlm_base.shxtuner0.1.9#如果你是在其他平台:condacreate--namextuner0.1.9python=3.10-y#激活环境condaactivatextuner0.1.9#进入家目......
  • 课程5-笔记-书生浦语大模型实战营-5
    一、大模型部署1、模型部署及大模型特点模型大,token不固定,结构简单2、大模型部署遇到的问题及解决方案硬件、速度、技术、方案模型部署存在的问题:1、硬件需求相对较大,特别在于显卡及内存方面。2、由于模型较大,则速度就会很慢优化方法:1、在卷积神经网络中是有:剪枝、量......
  • 课程3-笔记-书生浦语大模型实战营-3
    对LLM进行增强的方法一般有两种:RAG(RetrievalAugmentedGeneration检索增强生成)或者finetune。其中,RAG可以简单理解为外接一个知识库,从而对某个特定的领域进行增强原始LLM的能力。相比Finetune而言,成本低,且实时性好。不需要对原模型进行修改,但是,也非常受限于原LLM的能力。RAG......
  • MMFN论文阅读笔记(Multi-modal Fake News Detection on Social Media via Multi-graine
    论文标题:Multi-modalFakeNewsDetectiononSocialMediaviaMulti-grainedInformationFusion论文作者:YangmingZhou,YuzhouYang,QichaoYing,ZhenxingQian,XinpengZhang论文来源:ICMR2023,paper论文代码:暂无介绍目前的多模态方法主要集中在文本和视觉特征的融......
  • Slope trick 学习笔记
    博客传送门Slopetrick的定义Slopetrick是一种通过分析DP函数在转移时的斜率变化来优化转移的技巧。通常来说,被维护的函数图像是离散的凸函数,Slopetrick会维护函数的斜率或者斜率的差分。维护凸函数主要有以下几个优点:方便维护形如\(dp'[i]\leftarrow\max(dp[i],dp......
  • Lua学习笔记之迭代器、table、模块和包、元表和协程
    迭代器迭代器是一种对象,它能够来遍历标准库模板容器中的部分或全部元素,每个迭代器对象代表容器中确定的地址,在Lua中迭代器是一种支持指针类型的结构,他可以遍历集合的每一个元素。泛型for迭代器泛型for自己内部保存迭代函数,实际上保存三个值:迭代函数、状态常量、控制变量。泛型......
  • 《构建之法》阅读笔记二
    在《构建之法》的第一章就有醒目的黑体字写着软件=程序+软件工程。作为一名程序员,不能仅仅会写代码,深入了解一个软件是通过怎么样的层层工序制作出来,也是我们应当重点掌握的。文中通过生活实例,启发我对什么是程序,什么是软件,什么是软件工程,没有使用到算法需不需要学习、掌握。软......
  • 《构建之法》读书笔记一
    个人的成功不是天生的,而是慢慢积累的。当然,一个优秀的程序员也是慢慢学成的;正所谓:千里之行始于足下,我们必须从最基础的开始,不仅要学会写代码,更要学会看代码,看别人的代码,发表自己的意见;并且还要学会将代码规范化,代码看了要简洁明了,让别人看了就很舒服;当代码完成后,我们在为团队成员......
  • 《构建之法》阅读笔记三
    编程是艺术,开发是工程比起一门编程语言,软件工程的入门过程,要难得多。盖因一门语言,其语法、关键字、系统库和常用工具,总是确定而有限的。而软件工程,作为工程学的一个门类,它肩负着在软件开发的过程中,将种种条件确定下来,将资源安排妥当,使工作过程确定清晰,产出稳定可靠的责任。这其中......