首页 > 其他分享 >【MMAsia 2021】基于分块的点云几何压缩自编码器

【MMAsia 2021】基于分块的点云几何压缩自编码器

时间:2023-02-07 14:05:56浏览次数:59  
标签:编码器 分块 模型 MMAsia 2021 tilde 点云 重建

Patch-Based Deep Autoencoder for Point Cloud Geometry Compression

https://arxiv.org/abs/2110.09109

这篇论文使用深度自编码器,提出了一种基于分块(patch)的有损点云几何压缩模型。与现有的点云压缩网络(在整个原始点云上应用特征提取和重建)不同,该模型通过采样和KNN操作将输入点云划分为多个小块并独立地压缩处理。最终的完整点云由解压缩后的各个小块组合得到。此外,作者使用分块的局部重建损失训练整个模型,以逼近最优的全局重建性能。使用分块来训练模型有两个优点:

  • 首先,由于分块已经是点云的局部区域,因此网络模型不需要使用多个集合抽象层堆栈来捕获局部细节,从而降低了训练模型的复杂性。
  • 其次,将点云划分成块增强了训练数据,这可以避免过拟合问题,提高模型预测精度。

在点云压缩任务中,该模型可以保证重建的点云与输入点云的点数相同,有很好的率失真性能(尤其是在低比特率下)。此外,还可以通过调整重建点云的点数将该模型应用于其他点云重建任务,例如点云上采样。

压缩流程

首先原始点云被分为两部分:独立的分块和作为分块的辅助信息的采样点坐标。该过程描述如下:

  • 对于$N$个点的原始点云,使用FPS采集$S$个点${p_1,p_2,...,p_S}$,作为各个分块的辅助信息。

  • 对于每个采样点,使用KNN得到$K$个最近邻点${p_i^1,p_i^2,...,p_i^K}$。然后计算每个最近邻点相对于采样点的坐标,即${p_i^1-p_i,p_i^2-p_i,...,p_i^K-p_i}$,作为网络模型的输入。

即使使所有分块的总点数等于输入点云的总点数,也不足以覆盖整个点云。因此,作者令$S×K=αN(α>1)$来避免某些点无法被捕获。

在编码过程中,每个分块被传递给自编码器的编码器,然后生成一组潜在表示。使用量化器对这些表示进行量化,然后将其与采样点的坐标信息相结合,以形成整个点云的最终潜在表示。

最后,最终的潜在表示被熵编码成比特流并传输到解码器。

解码过程与编码过程基本相反。在获得点云的表示之后,作者从中分离出各个分块的潜在表示,并将这些表示分别传递给自编码器的解码器得到各个重建分块。

然后,作者将解码器输出与辅助坐标信息(采样点坐标$

标签:编码器,分块,模型,MMAsia,2021,tilde,点云,重建
From: https://blog.51cto.com/u_15278213/6042040

相关文章

  • 2021年安徽省合肥市信息学科普日活动
    题目解析:T1.新冠病毒群体免疫(covid)题目描述:新冠病毒肆虐全球将近两年了,给世界各国都带来了极大的麻烦,为了最终能战胜新冠病毒,各个国家都在加紧研发疫苗,我们国......
  • cartographer环境最新配置(2021.11.11)
    0.前言最近群里有些老哥在问cartographer配置的相关问题,将我以前自己记录的文件测试后发现竟然已经失效,其原因在于cartographer官网对程序又进行了一次升级,以前的部分操作......
  • 《2020总结-2021展望》
    一年又一年2020开局就是一波大“惊喜”,工作以来放的最长的一次假,疫情原因导致我们都居家办公了。现在回想起来,那段时间还是很空闲的,除了工作任务,下班后就没看啥书了,带带娃,刷......
  • 自编码器 Tensorflow 实战 MNIST 数据集
    1、生成模型1.1、什么是生成模型概率统计层面:能够在给丁某一些隐含参数的条件下,随机生成观测数据的这样一种模型,称之为“生成模型”。它给观测值和比周数据系列制定一个连......
  • 2021-09-16
    HashMap和HashSetHashSet是在HashMap上套了一层,只设置key,val设为默认值LinkedHashMap和HashMap通过双向链表维护了节点之间的顺序,不仅要维护map还要维护节点之间的双向链表L......
  • 论文阅读: CCF A 2021 PROGRAML:用于数据流分析和编译器优化的基于图的程序表示 (PMLR
       Motivation:  编译器实现是一项复杂而昂贵的活动。出于这个原因,人们对使用机器学习来自动化各种编译器任务产生了极大的兴趣,大多数工作都将注意力限制在选择编......
  • 题解 G. Grammar Path 2020-2021 ICPC NERC (NEERC), North-Western Russia Regional
    传送门【大意】给定一个CNF和一个有向图。有向图上的每一条边都写上了一个字母。要求你从\(s\)到\(t\)走一条尽可能短的路,且将经过的字母写下来后,这个字符串能被......
  • [JOI 2021 Final] 地牢 3 题解
    做法学习自日语酱的题解/hs/bx。本文旨在讲述我个人看完题解对此题做法的理解,可以视作对日语酱题解的注解(?。本人很菜,很可能出错,请谅解qwq。首先,对样例进行模拟,得到......
  • python-json的自定义编码器与自定义解码器
    json的数据类型有限,在实际业务中可能会遇到数据无法使用JSON编码的问题。如果我们需要转发的数据有大量或位置不规则的json无法解析数据类型时,事先处理就变成了一件比较麻......
  • 亚马逊关于攀岩绳的政策是什么呢?BS EN 892:2012+A2:2021报告如何提交报告呢?
    亚马逊关于攀岩绳的政策是什么呢?攀岩绳又称主绳,是攀登的象征,它为攀登者与保护者之间建立起了一种可靠的远程连接,为操作者提供了一个安全的平衡过渡。亚马逊政策适用的攀岩绳......