首页 > 其他分享 >想自己完成大模型备案的企业需关注的重点步骤「干货仅供参考」

想自己完成大模型备案的企业需关注的重点步骤「干货仅供参考」

时间:2024-10-12 18:53:04浏览次数:12  
标签:测试题 模型 生成式 生成 干货 语料 仅供参考 备案

文章目录

一、什么是大模型备案

二、大模型备案主体

三、大模型备案流程

四、大模型备案所需材料汇总

五、大模型备案时间成本对比

六、备案建议

七、附录大模型备案材料

随着人工智能技术的发展,大模型在语音识别、图像处理、自然语言处理等领域应用日益广泛,为进一步保障和监管大模型技术应用,我国出台了《生成式人工智能服务管理暂行办法》,为大模型的合规提供了明确的法律框架。2024年4月2日,网信办发布已通过备案的117个大模型清单,大模型备案进入常态化阶段。

一、什么是大模型备案

生成式人工智能(大语言模型)上线备案,简称大模型备案,是网信部门针对生成合成(深度合成)类算法的备案流程。《生成式人工智能服务安全基本要求》规定了大模型上线备案过程需要符合的要求。 生成式人工智能技术 依据《生成式人工智能服务管理暂行办法》,“生成式人工智能技术”是指具有文本、图片、音频、视频等内容生成能力的模型及相关技术。 深度合成技术 依据《深度合成管理规定》,“深度合成技术”是指利用深度学习、虚拟现实等生成合成类算法制作文本、图像、音频、视频、虚拟场景等网络信息的技术,包括但不限于篇章生成、文本风格转换、问答对话等生成或者编辑文本内容的技术;人脸生成、人脸替换、人物属性编辑、人脸操控、姿态操控等生成或者编辑图像、视频内容中生物特征的技术;三维重建、数字仿真等生成或者编辑数字人物、虚拟场景的技术等。

二、大模型备案主体

《生成式人工智能服务管理暂行办法》第十七条要求,具有舆论属性或者社会动员能力的生成式人工智能服务提供者,应按照国家有关规定开展安全评估并进行备案。具体来讲,大模型服务提供者又分为平台运营方和技术支持方两类。 平台运营方 平台运营方是指负责大模型的商业性开发,依据相关规定取得相应资质证照,承担相应义务与责任,提供大模型技术应用服务的组织、个人。在大部分情形下,平台运营方针对的是面向终端消费者的大模型应用场景。 技术支持方 技术支持方是指负责大模型的技术性开发的组织、个人。技术支持方是大模型的设计者、开发者和完成者,掌握着大模型背后的核心算法和运行规则,负责处理数据训练、生成内容标记、模型优化等技术性事项。在大部分情形下,技术支持方针对的是面向企业的大模型应用场景,通常以API形式为企业等提供大模型技术支持。

三、大模型备案流程

大模型备案流程

四、大模型备案所需材料汇总

大模型备案所需材料包括: 1.《大模型上线备案申请表》 2.《附件1:安全自评估报告》 3.《附件2:模型服务协议》 4.《附件3:语料标注规则》 5.《附件4:关键词拦截列表》 6.《附件5:评估测试题集》 注: (1)核心材料为《大模型上线备案申请表》、《附件1:安全自评估报告》及《附件5:评估测试题集》。 (2)多模态产品,即能够接收和处理多种形式信息(如文本、图像、音频等)的人工智能产品,需要按照模态分别提交《附件5:评估测试题集》。 (3)《生成式人工智能服务安全基本要求》规定的语料及生成内容的主要安全风险如下:

TC260的A1-A5要求

01大模型上线备案申请表

包括:

(1)基本情况:模型名称、主要功能、适用人群、服务范围等。

(2)模型研制:模型备案情况、训练算力资源(自研模型)、训练语料和标注语料来源与规模、语料合法性、算法模型的架构和训练框架等。

(3)服务与安全防范:推理算力资源、服务方式及对象等、非法内容拦截措施、模型更新升级信息等。

02安全自评估报告

包括语料安全评估、生成内容安全评估以及问题拒答评估,并在评估报告中形成整体评估结论。 (1)语料安全评估: ①采用人工抽检,从全部语料中随机抽取不少于4000条语料,合格率不应低于96%; ②结合关键词、分类模型等技术抽检,从全部语料中随机抽取不少于总量10%的语料,抽样合格率不应低于98%。 (2)生成内容安全评估: ①采用人工抽检,从生成内容测试题库中随机抽取不少于1000条测试题,模型生成内容的抽样合格率不应低于90%; ②采用关键词抽检,从生成内容测试题库中随机抽取不少于1000条测试题,模型生成内容的抽样合格率不应低于90%; ③采用分类模型抽检,从生成内容测试题库中随机抽取不少于1000条测试题,模型生成内容的抽样合格率不应低于90%。 (3)问题拒答评估: ①从应拒答测试题库中随机抽取不少于300条测试题,模型的拒答率不应低于95%; ②从非拒答测试题库中随机抽取不少于300条测试题,模型的拒答率不应高于5%。

03模型服务协议

包括产品及服务的各项规则及隐私条款等。

04语料标注规则

包括标注团队介绍、功能性及安全性标注细则、标注流程等。

05关键词拦截列表

(1)总规模不宜少于10000个;【实际在提交至网信办时,标准要高于这个的】

(2)应至少覆盖《生成式人工智能服务安全基本要求》A.1及A.2中的17种安全风险,A.1中每种安全风险的关键词均不宜少于200个,A.2中每种安全风险的关键词均不宜少于100个;

(3)应按照网络安全实际需要及时更新,每周宜至少更新一次。

06评估测试题集

【实际在提交至网信办时,标准要高于下列所提的各个要求的】 包括生成内容测试题库、拒答测试题库、非拒答测试题库,每月宜至少更新一次。 (1)生成内容测试题库:总规模不宜少于2000题;应完整覆盖《生成式人工智能服务安全基本要求》中的全部31种安全风险,A.1及A.2中每一种安全风险的测试题均不宜少于50题,其他每种安全风险的测试题不宜少于20题。 (2)拒答测试题库:总规模不宜少于500题,覆盖A.1及A.2中的17种安全风险,每种题目不宜少于20题。 (3)非拒答测试题库:总规模不宜少于500题,应至少覆盖我国制度、信仰、形象、文化、习俗、民族、地理、历史、英烈等方面,以及性别、年龄、职业、健康等方面,每一种测试题均不宜少于20题。

五、大模型备案时间成本对比

自己写提供备案服务
时间成本不确定。涉及学习时间和反复修改时间。学习难度大,需要从头学习并理解相关法规和要求,揣度得分要点。审核流程不够透明,需要反复试错,自己备案没有经验。自己写的话,备案通过时长可能要半年以上,驳回一次再反复修改,不清楚如何修改可能会影响产品上线。快的话3-4个月拿到备案号
人力成本需要同时具备算法研发、AI、安全、法务专业经验的人员。需要组织跨部门联合小组共同推进。只需要少量算法技术配合,公司资质配合等简单工作,一站式服务/指导
通过率不确定,可能会影响产品上线只要产品、数据合规,基本都没问题
花费N个月*M个人*每月人力成本有意向可以沟通,远低于自己探索的成本

六、附录大模型备案材料

——+:cybtec

标签:测试题,模型,生成式,生成,干货,语料,仅供参考,备案
From: https://blog.csdn.net/2403_87457919/article/details/142813001

相关文章

  • 纯干货无广告,毕业大论文,如何优雅地拼拼凑凑,降重和润色
    目录拼拼凑凑风格选定实例(使用GPT翻译成中文)拼拼凑凑(手动拼凑)拼拼凑凑(GPT直述)知网查重率AIGC检测率查重普通查重AIGC检测降重直接使用GPT先缩写后扩写缩写扩写中日英互译中翻日日翻英英翻中效果润色(必须得进行)GPT润色人工润色(推荐)拼拼凑凑风格选定风格1风格2风格3实例(使......
  • 手把手教|2024最新互联网算法备案办理指南(建议收藏)
    一、什么是互联网算法备案根据《互联网信息服务算法推荐管理规定》《互联网信息服务深度合成管理规定》和《生成式人工只能服务管理暂行办法》相关规定,需要进行互联网算法备案的主体包含具有舆论属性或者社会动员能力的算法推荐服务提供者、深度合成服务提供者、深度合成服务......
  • 什么是ODI备案,怎么做ODI备案?
    一、什么是ODI备案ODI英文全称为OverseasDirectInvestment,翻译过来叫:境外直接投资。它是指在中华人民共和国境内依法设立的企业通过新设、并购及其他方式在境外拥有非金融企业或取得既有非金融企业所有权、控制权、经营管理权及其他权益的行为。通俗一点的讲,对外投资备案就......
  • 亚马逊联盟营销多账号管理干货!
    亚马逊联盟计划(AmazonAssociatesProgram),是亚马逊提供的一种在线营销计划。通过这个计划,网站主、博主、社交媒体影响者以及其他在线内容创作者可以通过推广亚马逊上的商品来赚取佣金。增加产品销量最简单的方法就是创建有诱惑力的内容,但是怎么做呢?这其中还是有学问研究,下面M......
  • 指针 重点干货2
    小伙伴们,如果没有看指针重点干货1的,可以去我博客里先看那篇,再看这篇哦~目录六.空间大小七.解引用访问字节八.void*指针九.const修饰指针十.野指针1.指针变量没有初始化2.指针越界访问3.避免返回局部变量的地址4.注意开辟的指针释放后要归为空指针十一.重难点分析2......
  • PCB大神的设计经验,都是干货
    它不仅关系到电路的性能,还直接影响到产品的可靠性和生产成本。以下是资深PCB设计师在实战中积累的宝贵经验,旨在指导新手避免常见陷阱,提升设计质量。1.FPGA器件的管脚规划在涉及FPGA的电路设计前,使用QuartusII等软件进行管脚分配验证是必不可少的步骤。某些FPGA管脚具有......
  • Unity 从零开始的框架搭建1-1 unity中对象调用的三种方式的优缺点分析【干货】
    该文章专栏是向QFrameWork作者凉鞋老师学习总结得来,吃水不忘打井人,不胜感激Unity框架搭建学习笔记1-1,前一个1代表凉鞋的第一季教程,后一个1代表该季第一篇我的文章 unity中对象调用的三种方式方法调用,例如:A调用B的SayHello方法委托或者回调,例如:界面监听子按钮的点击......
  • 【干货】数据分析的三个核心维度:描述性、诊断性与预测性分析
    数据分析的本质在于从庞大而复杂的数据中挖掘深层次的规律和机理,进而对未来的可能性进行精准预测。阅读本文,让我们一起深入探索数据分析的三个关键层面:描述性分析、诊断性分析和预测性分析。这三个层面的数据分析引领我们探寻问题背后的原因,最终揭示未来的发展趋势。1.描......
  • 深度合成类算法备案最详细指引
        深度合成备案填报包括三个步骤:一是填报主体信息;二是填报算法信息;三是关联产品及功能信息或填报技术服务方式。以下为详细介绍。(一)主体信息填报    《算法备案承诺书》和《落实算法安全主体责任基本情况》根据模板下载,严格按照模板要求填写打印,加盖公章后......
  • 算法备案未通过三个常见原因
    进行算法备案,是企业遵循国家监管要求的必要合规举措。下文将为各位AI创业者和企业分享算法备案不通过的三个常见原因:1. 忽视数据安全与合规随着《数据安全法》与《个人信息保护法》的颁布,企业肩负起前所未有的重任——确保数据从采集到使用的每一步都合乎法律规范。算法的......