申明:九析唯一授权【超级网红系列课程——AI 大模型全栈架构师】系列课程
一、技术流程
1. 确定数据源
2. 根据不同类型的数据源选择合适的加载器,从数据源加载非结构化数据,进行数据分片,即将长文章拆分成若干个文章段落,专业术语叫做Chunk,这样做的好处是为了方便后续大模型的处理。
3. 整个技术流程的核心,根据业务诉求,从第二步产生的数据分片中利用大模型抽取相关内容。
4. 将第三步抽取出来的文本内容映射进Python预先定义好的对象里。这时携带信息的对象存活在计算机内存中,这一步尤其重要,因为在这一步真正实现了从业务到技术的转化。
5. 将第四步在内存中运行的Python对象,经过数据结构转换,最终转变成Neo4j数据库当中可供管理和操作的图对象。
自此处理流程告一段落,在整个技术流转过程当中,数据经历了从自然语言到Python程序对象,再到图对象的转变,这也是几乎所有IT信息处理的核心和本质 。
“你听懂了吗?三上。”
“听懂了九析老师,真是豁然开朗,感觉整个技术关都打开了,提升了一个认知境界,原来从日常生活走进光怪陆离的技术世界,就是将处理对象的数据格式不停的转变,有点像拍电影,我日常有自己的人设,但进入到拍戏环节,就变成了另一个角色去了,但实际上两个不同的角色本质上都是我。”
“哈哈,三上你看你都会类比思考了,而且联想的非常到位呢。”
二、环境安装
“九析老师技术路线图已经确定好了,相当于项目里程碑设定完毕,下一步我们该做什么呢?”
“三上下一步的工作非常的关键,你听说过这么一句中国的谚语吗?”
“什么谚语?九析老师。”
“工欲善其事,必先利其器。”
“知道的,这句话在日本也同样出名呢。”
“好,既然如此,那我们在正式项目开发前,需要将开发环境准备到位。”
“嗯,老师开发环境都需要准备什么呢?”
准备步骤:
- 选择目标大模型
- 安装和配置图数据库
- 安装Anaconda
- LangChain框架安装
“九析老师,那我这就操作下。”
“好的三上,趁你安装这个功夫,我也放松一下。”
“九析老师,你打算怎么放松呢?”
“我准备玩下我的鸟......”
感谢各位老爷的观看!!!
可以直接观看视频:九析带你轻松完爆AI大模型 别忘了一键三连,您的支持是九析更新的最大动力。
标签:完爆,九析,AI,数据源,模型,对象,安装 From: https://blog.csdn.net/yangpiqiulaotou/article/details/144223373