- 2024-07-30CVAE 合成数据分布过于狭窄
我有一个数据集,其中包含3个特征、2个浮点特征和1个包含33个类别的分类特征。(此处称为Float_A、Float_B和Cat_A)。我正在尝试训练CVAE来生成合成数据。数据使用以下sklearn转换器进行转换:df=df[["float_A","float_B","categorical_A"]]transformers=[('floa
- 2024-04-14Conditional AutoEncoder的Pytorch完全实现
一个完整的深度学习流程,必须包含的部分有:参数配置、Dataset和DataLoader构建、模型与optimizer与Loss函数创建、训练、验证、保存模型,以及读取模型、测试集验证等,对于生成模型来说,还应该有重构测试、生成测试。AutoEncoder进能够重构见过的数据、VAE可以通过采样生成新数据,对于MN
- 2024-04-08【机器学习】利用Autoencoder进行无监督异常检测(含代码)
Autoencoder算法是一种常见的基于神经网络的无监督学习降维方法(其他常见降维方法)。文章目录一、Autoencoder简介二、Autoencoder无监督异常检测三、利用Antoencoder检测信用卡欺诈四、完整代码一、Autoencoder简介Autoencoder,中文称作自编码器,是一种无监督式学习模
- 2023-12-24人工智能大模型原理与应用实战:从Autoencoder到Variational Autoencoder
1.背景介绍人工智能(ArtificialIntelligence,AI)是计算机科学的一个分支,研究如何让计算机模拟人类的智能。在过去的几年里,人工智能技术的发展非常迅速,尤其是在深度学习(DeepLearning)方面。深度学习是一种通过多层神经网络学习表示的方法,它已经取得了巨大的成功,例如在图像识别、语音
- 2023-12-23FLAC: Federated Learning with Autoencoder Compression and Convergence Guarantee-2022
目的:减少通信量(成本),例如VGGNet架构具有大约1.38亿个参数(4264Mb)方法:具有自动编码器压缩(AutoencoderCompression)且具有收敛保证(ConvergenceGuarantee);利用冗余信息(theredundantinformation)和FL的迭代纠错能力(iterativeerror-correctingcapabilityofFL)来压缩client的模型,
- 2023-10-09Implicit Autoencoder for Point-Cloud Self-Supervised Representation Learning论文阅读
ImplicitAutoencoderforPoint-CloudSelf-SupervisedRepresentationLearning2023ICCV*SimingYan,ZhenpeiYang,HaoxiangLi,ChenSong,LiGuan,HaoKang,GangHua,QixingHuang*;ProceedingsoftheIEEE/CVFInternationalConferenceonComputerVision
- 2023-09-27音频数据的自定义DataLoader及其AutoEncoder降噪算法
DataLoader要求每一个Batch里面的数据的shape都一样,但是语音数据显然不可能都是等长的,因为每一条语音长度都不一样,因此在定制DataLoader的时候还要对每一个batch的数据进行剪裁(crop)或者填充(padding)处理。这里采用padding来对齐数据,方法采用PytorchDiscussion的网友Felix
- 2023-09-26手写数字数据集AutoEncoder降噪算法
对训练数据加噪声的方法,在训练里面对x做如下处理,添加椒盐噪声:bs,ch,h,w=x.shapex=x.reshape(bs,ch,h*w)+0.2*np.random.normal(size=28*28)x=x.to(torch.float32)数据集里面的标签label无用,因为AutoEncoder去噪是无监督方法。
- 2023-06-22Graph Masked Autoencoder for Sequential Recommendation
目录概符号说明MAERecLearningtoMaskTransitionPathMaskingTask-AdaptiveAugmentation模型代码YeY.,XiaL.andHuangC.Graphmaskedautoencoderforsequentialrecommendation.SIGIR,2023.概图+MAE.符号说明\(\mathcal{U},\mathcal{V}\),users,items;
- 2023-06-02CNN autoencoder 进行异常检测——TODO,使用keras进行测试
https://sefiks.com/2018/03/23/convolutional-autoencoder-clustering-images-with-neural-networks/https://blog.keras.io/building-autoencoders-in-keras.htmlhttps://www.kaggle.com/atom1231/keras-autoencoder-with-simple-cnn-kfold4-lb-1704 https://datascience.st
- 2023-06-02VAE--就是AutoEncoder的编码输出服从正态分布
花式解释AutoEncoder与VAE什么是自动编码器自动编码器(AutoEncoder)最开始作为一种数据的压缩方法,其特点有:1)跟数据相关程度很高,这意味着自动编码器只能压缩与训练数据相似的数据,这个其实比较显然,因为使用神经网络提取的特征一般是高度相关于原始的训练集,使用人脸训练出来的自动编
- 2023-03-06Context Autoencoder for Self-Supervised Representation Learning
0.前言相关资料:arxivgithub(官方实现,其他实现)论文解读(作者解读,知乎)论文基本信息:领域:自监督表示学习发表时间:arxiv2022(2022.2.7)1.针对的
- 2023-02-23用AutoEncoder做一些有趣的事情
用AutoEncoder做一些有趣的事情有人甚至做了MaskAutoEncoder之类的东西,第一次知道可以这样去恢复原数据,真的非常有意思。可以在这里也试一下AutoEncoder,下面用了mnist俩
- 2023-02-03PyTorch | 生物医学 | Deep learning
以前一直没有条件,曾一度想自己买个显卡搞DL,但没有时间,也没有支持,最后就不了了之了。无论是NGS的genetics,还是NGS的single-cell,DL都是大有可为的,最近出现的chatgpt更是
- 2022-12-21[深度学习] Contractive Autoencoder
转载于DeepLearning:ContractiveAutoencoder-dupuleng-博客园一、雅克比矩阵雅克比矩阵是一阶偏导,假设(x1,x2,....,xn)到(y1,y2,...,ym)的映射,相当于m个n元函
- 2022-10-17Improving Item Cold-start Recommendation via Model-agnostic Conditional Variational Autoencoder阅读笔记
动机本文是2022年SIGIR上的一篇论文。解决推荐系统中冷启动问题通常有两种方法:1.挖掘历史数据中的分布模式,例如学习一个辅助信息到id的映射。2.在交互物品有限的情况下提
- 2022-09-22AE(AutoEncoder) 学习笔记
AE(AutoEncoder)学习笔记目录AE(AutoEncoder)学习笔记Auto-Encoder,AEDenosingAuto-Encoders,DAEStackedDenoisingAuto-Encoders,SAEConvolutionAuto-Encoders,