首页 > 其他分享 >AnnotatedTransformer中文pycharm项目版

AnnotatedTransformer中文pycharm项目版

时间:2024-07-14 16:01:13浏览次数:16  
标签:中文 项目 代码 pycharm AnnotatedTransformer spacy 下载

本文项目代码链接为:
AnnotatedTransformer中文pycharm项目版
本文是学习AnnotatedTransformer过程中产出的笔记,原项目代码来自于Annotated-Transformer,本项目主要是将原文中的jupyter版本的代码转换成pycharm项目的形式来进行注释和运行(jupyter中的可视化部分没有添加到项目中)。

另外,就运行该代码中间出现的问题进行了记录,希望帮助到后面学习的人。

出现的问题

只要按照原项目的环境进行安装,最容易出现的问题就是以下两个方面的问题(或许多卡训练部分的代码运行也会出问题,但是我没有多卡\doge)。

spacy库

完全按照原项目中的requirements进行库的安装后,spacy库调用过程中会出现一系列问题,其中有可能会出现一个报错:

TypeError: issubclass() arg 1 must be a class

这个错误可以根据这个链接得到解决。

另外,还有可能出现分词器模型下载出错的问题,这个需要到这个github页面中找到匹配spacy的模型版本进行下载(在原项目中spacy的版本是3.2,所以下载的模型也应该是对应这个版本)。

multi30k下载出错

这个主要原因是原数据下载网址已经失效了,在本项目的代码中已经增加了修改代码解决了这个问题,解决方案来源于这个链接

标签:中文,项目,代码,pycharm,AnnotatedTransformer,spacy,下载
From: https://blog.csdn.net/ElysiaCoding/article/details/140418029

相关文章

  • 突破权限壁垒:彻底解决PyCharm中无法写入的权限问题
    突破权限壁垒:彻底解决PyCharm中无法写入的权限问题引言在使用PyCharm进行开发时,可能会遇到权限不足导致无法写入文件或目录的问题。这种情况通常发生在尝试保存文件到一个没有写权限的目录,或者PyCharm没有足够的权限去修改系统文件时。本文将提供一份详尽的指南,帮助你诊断......
  • 终结文件观察之痛:深度解析PyCharm中的文件观察程序错误
    终结文件观察之痛:深度解析PyCharm中的文件观察程序错误引言PyCharm,作为Python开发者的首选IDE之一,提供了强大的文件观察功能,以实现诸如自动编译、即时运行等高级功能。然而,在使用过程中,用户可能会遇到文件观察程序错误,这些错误可能由多种原因引起,包括IDE配置问题、文件系......
  • 一劳永逸解决路径难题:PyCharm中Python解释器路径错误的终极指南
    一劳永逸解决路径难题:PyCharm中Python解释器路径错误的终极指南引言PyCharm作为Python开发者的强大IDE,提供了许多便利的功能来简化开发流程。然而,在使用PyCharm时,可能会遇到Python解释器路径错误的问题,这通常会导致项目无法正常运行或调试。本文将提供一份详尽的指南,帮助......
  • 优化编码体验:深度定制PyCharm的代码自动完成功能
    优化编码体验:深度定制PyCharm的代码自动完成功能引言在现代软件开发过程中,代码自动完成功能已成为提升开发效率的关键因素之一。PyCharm,作为一款广受Python开发者喜爱的集成开发环境(IDE),提供了丰富的代码自动完成设置选项。本文将深入探讨如何调整PyCharm的代码自动完成设......
  • Ubuntu如何设置中文系统环境
    最近又重新下载Ubuntu了,在这里留下个脚印,做个记录步骤一:安装中文语言包打开终端(Terminal),分别输入以下命令行sudoaptupdatesudoapt-getinstalllanguage-pack-zh-hans步骤二:设置中文环境1.添加中文语言sudodpkg-reconfigurelocales用方向键往下翻找,直到看见zh_CN......
  • 单机角色扮演游戏推荐:颂钟长鸣 Bellwright 中文安装包
    自从被诬陷谋杀王子并被王庭判处死刑后,您一直活在阴影之中。在侥幸的又一次逃过刺客的暗杀后,您发现了了一张刺客的合同,事情的走向开始变得扑朔迷离-您被诬陷仅仅是因为不幸吗?还是说背后有更大的阴谋?为了寻找答案,您决定结束背井离乡的生活并回来调查。您将逐步领导一场叛乱,反......
  • LoRA微调中文版Llama3模型
    文章目录概要整体微调流程疑难问题有哪些小结概要LoRA(Low-RankAdaptation)是一种微调大模型的方法,通过引入低秩矩阵来减少参数量和计算复杂度,主要应用于大型预训练语言模型的微调过程。本文章讲解的是使用LoRA技术微调Llama3中文版模型。实验环境为kaggle、GPU环境......
  • Pycharm教程
    文章目录1.1简介及安装等1.2新建项目1.3创建Python文件1.4运行python文件的方式1.5三方库的引入1.6界面简介1.7常用快捷键1.8TODO注释1.1简介及安装等略1.2新建项目1.3创建Python文件在文件夹点击鼠标右键自定义文件模板信息......
  • Visio 2019 中文版安装下载教程【32/64位】,图文步骤详解,超简单,无套路!!!
    文章目录前言软件介绍软件下载安装步骤激活步骤前言本文针对visio2019的下载安装进行详细讲解,没有任何套路,大家可以放心使用,由于该类文章容易被和谐,大家可以收藏关注,以免迷路,若安装出现问题,请移步本文章收入的专栏,里面有解决方法,专栏内收入了超多好用软件,欢迎大家......
  • php:访问/tmp文件夹中文件会报错:file does not exist
    一,php访问/tmp文件夹中文件会报错:代码:$filePath="/tmp/php-temp/keji.jpeg";$is_ex=file_exists($filePath);//print_r("is_ex:".$is_ex);if($is_ex){echo"文件".$filePath.&......