首页 > 其他分享 >conda配hugging face环境 & 服务器系统盘容量不足

conda配hugging face环境 & 服务器系统盘容量不足

时间:2024-07-25 10:22:11浏览次数:9  
标签:username sudo hugging face 系统盘 chown conda install home

conda create --name env_name python=3.10
安装pytorch:https://pytorch.org/get-started/locally/
conda install jupyter
conda install -c huggingface transformers datasets evaluate
conda install -c fastai accelerate
conda install scipy scikit-learn

服务器系统盘容量不够了,可以把home目录软链接到其他盘

mv /home/username /dev_sdb/home/username 
sudo ln -s /home/data/username / /home/username 
sudo chown -R  username:username  /home/username 
sudo chown -R  username:username /dev_sdb/home/username

cp -a /home/username/. /dev_sdb/home/username
rm -rf /home/username
sudo ln -s /home/data/username /home/username
sudo chown -R  username:username /home/username
sudo chown -R  username:username /home/data/username

标签:username,sudo,hugging,face,系统盘,chown,conda,install,home
From: https://www.cnblogs.com/snail1502/p/18322390

相关文章

  • java8interface的新特性:default,static,funcation
    default:默认方法在类接口中可以直接定义的方法,实现接口的类可以直接使用使用案例:publicinterfaceMyInterface{defaultvoiddisplay(){System.out.println("Thisisdefaultmethod.");}}说明:被default修饰的方法可以不被子类实现。即在......
  • datasets(HuggingFace)学习笔记
    一、概述(1)datasets使用ApacheArrow格式,使得加载数据集没有内存限制(2)datasets的重要模块:load_dataset:用于加载原始数据文件load_from_disk:用于加载Arrow数据文件DatasetDict:用于操作多个数据集,保存、加载、处理等Dataset:用于操作单个数据集,保存、加载、处理等二、数据......
  • 快速大规模抓取 Facebook 粉丝页面的数字 ID
    许多Facebook粉丝页面现在采用以下格式-https://www.facebook.com/TiltedKiltEsplanade其中“TiltedKiltEsplanade”是页面所有者声称的名称的示例。但是,可以在https://www.facebook.com/feeds/page.php?id=414117051979234&format=rss20找到同一页面的RSS......
  • Hugging Face基础:简单讲解Transformer模型和结构,小白也能看懂,每个词都给你解释清楚了!
    1.Transformer是什么Transformer 是一个基于自注意力机制(Self-attentionmechanism)的神经网络架构,是由2017年的论文《AttentionisAllYouNeed》中提出的,为自然语言处理(NaturalLanguageProcessing)领域带来了新的模型架构。他是一种seq2seq模型(SequencetoSequenceMo......
  • 如何使用 HuggingFace 的 run_translation.py 脚本从头开始训练翻译?
    我尝试了各种HuggingFace脚本来构建语言模型,例如run_mlm.py(link)、run_clm.py(link)和run_translation.py(link)。对于前两个脚本,它可以从头开始训练语言模型(即没有基本模型)。但是,我无法使用run_translatio......
  • Facebook在Linux服务器上使用selenium登录
    我已经想到了这个项目。其中一部分是登录Facebook帐户。这段代码在我的本地机器(windows)和本地服务器(ubuntu)上完美运行,但当我在在线Linux服务器上运行它时它不起作用。deflogin_facebook(driver,email,password):try:logging.info("LoggingintoFacebook......
  • 苹果系统注入三码,避免封号,解锁iCloud/FaceTime/iMessage/随航!
    黑苹果遇到的问题多种多样,这是一篇比较简单直接的、适合大部分配置的教程,如果解决不了你的问题,请见谅。如果完成三码注入后iMessage和FaceTime仍不能正常工作,需要考虑主板NVRAM支持问题。随航功能(Sidecar)仅支持macOSCatalina及以上,基本开启要求参阅官网,其中特别需要说明的......
  • Facebook 开源 C++ 框架 Ocean:用于计算机视觉和增强现实
    Facebook开源C++框架Ocean:用于计算机视觉和增强现实来源:OSCHINA编辑: 局2024-07-1211:05:00 0Facebook开源了其内部用于计算机视觉(CV)和增强现实(AR) 应用程序的框架Ocean,用于执行各种任务,包括计算机视觉、几何、媒体处理、网络和渲染。Ocean......
  • Java中interface的default和static方法
    Java中interface的default和static方法Java中interface的default和static方法完整代码及其运行结果从Java8开始:static方法:接口不能通过实例调用static方法接口中的static方法不能被继承子类不能继承接口的static方法,可以继承、不能覆写父类的static方法。default......
  • Go踩坑:interface{}判断nil
    问题背景在实习的一次真实程序开发中,我编写了一个函数,其处理一个接口类型(interface{})的参数,根据其类型返回一个字符串。在传入的参数为nil时,我希望通过判断,返回空字符串。看看我的大致代码:funcmain(){ varp*int64 fmt.Println(defaultValueFn(p))//p未赋值,我希望返回......