首页 > 其他分享 >数字人论文:Audio-Driven Facial Animation by Joint End-to-End Learning of Pose and Emotion

数字人论文:Audio-Driven Facial Animation by Joint End-to-End Learning of Pose and Emotion

时间:2023-10-15 23:01:10浏览次数:27  
标签:Emotion End Joint Pose Driven 画面 Animation

老规矩. 直接第三章

3. 端到端网络结构

给一个audio 短窗口, 也就是片段. 我们预测窗口中间时刻的面部表情.

我们把表情看做一个全端点的向量 (后面我们会看这是什么的一种刻画面部)

一旦我们网络训完, 我们回各个时间点同时生成, 并行. 即使不需要过去的帧画面, 依然生成很稳定的画面. (指的是画面不会跳帧严重, 画面连贯).

 

标签:Emotion,End,Joint,Pose,Driven,画面,Animation
From: https://www.cnblogs.com/zhangbo2008/p/17766402.html

相关文章

  • remotion 基于react 创建视频的框架
    remotion可以让我们直接基于react创建视频,使用到的技术webgl,css,canvas,svg说明对于希望使用web创建使用的场景这个是一个不错的选择(比如营销动画),很值得学习下参考资料https://www.remotion.dev/docs/https://github.com/remotion-dev/remotion/......
  • ABC202E Count Descendants
    ABC202ECountDescendants线段树合并模板题。每次询问就是给定有序数对\((u,d)\),求有根树\(T\)上,点\(u\)的子树内有多少点\(v\),使得\(v\)的深度恰好等于\(d+1\)。定义根节点深度为\(1\)。考虑对每一个点开一个长度为\(n\)(因为\(T\)的最大深度为\(n\))的数组......
  • Transpose a data frame in R语言 转置
     #firstrememberthenamesn<-df.aree$name#transposeallbutthefirstcolumn(name)df.aree<-as.data.frame(t(df.aree[,-1]))colnames(df.aree)<-ndf.aree$myfactor<-factor(row.names(df.aree))str(df.aree)#CheckthecolumntypesR......
  • 万户OA SendFileCheckTemplateEdit-SQL注入
    漏洞简介万户OA存在SendFileCheckTemplateEdit-SQL注入,该漏洞为前台漏洞漏洞复现fofa语法:app="万户ezOFFICE协同管理平台"登录页面如下:POC:/defaultroot/public/iWebOfficeSign/Template/SendFileCheckTemplateEdit.jsp?RecordID=1'%20UNION%20ALL%20SELECT%20sys.fn_sqlvar......
  • Epoque: Practical End-to-End Verifiable Post-Quantum-Secure E-Voting
    Todate,thesecurityofallpracticalend-to-endveri-fiablee-votingprotocolsrelieson“traditional”hardnessassumptions,suchasfactoringintegersorcomputingdiscretelogarithms.Withmoreandmorepowerfulquantumcomputersonthehorizon(see,......
  • Flask中render_template('index.html')查找index.html文件
    问题:jinja2.exceptions.TemplateNotFound:index.html解决方法如下:普通:render_template('index.html'),其中index.html的查询是找创建app=Flask(name)文件的同级目录的templates中查找注意:当导入create_app函数fromRealProjectimportcreate_appapp=create_app()@app......
  • Vue3| 模板引用、defineExpose宏函数
    模板引用的概念:通过ref标识获取真实的dom对象或者组件实例对象 使用:1.调用ref函数生成一个ref对象<script setup>import {ref} from 'vue'const h1Ref=ref(null)</script>2.通过ref标识绑定ref对象到标签<script setup>import {ref......
  • label-studio docker-compose 运行试用
    label-studio是一个支持多格式的数据标注工具,以下是基于docker-compose运行的试用环境准备docker-composeversion:"3.9"services:nginx:image:heartexlabs/label-studio:latestports:-"8080:8085"-"8081:8086"......
  • EndNote 21:文献与论文管理的智能化解决方案 Mac+win版
    EndNote21是一款在学术界被广泛使用的文献和论文管理软件,帮助用户轻松高效地组织、引用、分析和分享文献资源。→→↓↓载EndNote21mac/win版 EndNote21具有强大的文献搜索和导入功能,可以方便地从各大数据库、Web资源和其他EndNote用户共享的文献库中导入所需文献。同时,它......
  • Android开发 Jetpack_Compose_7 文字
    前言此篇博客主要讲解Compose里的文字相关的UI功能。文本处理相关的内容与细节较多,此篇博客尽量涵盖完整,所以博客较长需要耐心看完。  官网文档:https://developer.android.google.cn/jetpack/compose/text?hl=zh-cnText文本全部参数这里列出全部参数,下面会一个一个举......