论坛简介
虚拟数字人作为连接着现实人类与虚拟世界的重要载体,是元宇宙、人机交互、混合现实等应用的关键元素,近年来得到学者的广泛研究和关注。在基础表征、数据和大模型技术协同驱动下,数字人在外在形象、内在行为、智能交互水平方面不断取得突破,构建方式面向便捷化、智能化方向发展。在此背景下,本论坛聚焦虚拟数字人领域中的前沿热点问题,邀请学者分享最新技术进展并展现前沿研究工作,探讨虚拟数字人在文娱、教育等方面领域的应用及其未来发展趋势。
论坛召集人
张鸿文
北京师范大学
个人简介
张鸿文,北京师范大学人工智能学院副教授,博士生导师。主要从事三维数字人的动捕、重建、驱动与生成等研究,发表TPAMI/TOG和SIGGRAPH/CVPR/ICCV等顶刊顶会论文40余篇,包含口头报告/亮点论文7篇,Google Scholar引用量4000余次,一作提出的动捕系列开源算法累计获GitHub星标上千次,承担国家重点研发计划子课题、中国人工智能学会-联想蓝天基金等多项科研项目,入选或获评中国科学院院长奖、中国科学院优秀博士论文、中国科协青年人才托举工程等。
论坛讲者信息
许威威
浙江大学
报告题目:端到端的数字人重建与驱动技术
报告摘要:数字人重建和驱动技术可为元宇宙提供自然的交互入口,其高效便捷的构建与驱动备受关注。本报告将介绍如何利用端到端的神经渲染技术从稀疏视点中重建高质量的三维数字人,采用RGBD相机提升动态人体重建算法的效率和结果质量,并进一步介绍从视频构建可驱动数字人的技术进展。
个人简介:许威威,现任浙江大学计算机科学与技术学院CAD&CG国家重点实验室长聘教授,教育部长江学者。曾任日本立命馆大学博士后,微软亚洲研究院网络图形组研究员, 杭州师范大学浙江省钱江学者特聘教授。主要研究方向为计算机图形学,涵盖三维重建、深度学习、物理仿真。在国内外高水平学术会议和期刊发表论文100余篇,其中ACM Transactions on Graphics, IEEE TVCG、IEEE CVPR、AAAI等CCF-A类论文60余篇。获中国和美国授权专利15项。所开发的三维注册和重建技术在高精度扫描仪及人体三维重建系统中得到应用。2014年受国家自然科学基金优秀青年基金资助,主持国家自然科学基金重点项目一项,获浙江省自然科学二等奖一项。
张盛平
哈尔滨工业大学
报告题目:超写实虚拟数字人驱动技术
报告摘要:赋予情感的虚拟数字人在元宇宙,虚拟现实等多项应用中发挥着重要作用,而其中,如何通过带有情感的动作信号准确驱动虚拟数字人,是提升数字人真实感和沉浸感的关键问题。因此,为了增强虚拟数字人驱动的准确性与稳定性,我们从二维和三维的不同人体表达出发,挖掘驱动信号与人体表示在不同维度下的关联性,提出基于生成式大模型的可控人体视频生成算法和基于3D高斯的三维人体驱动算法,进而在单目拍摄的视频中学习一个可驱动的二维/三维超写实虚拟数字人表示,为情感动作的精确表达提供高效的载体。
个人简介:张盛平,哈尔滨工业大学长聘教授/博士生导师、青年科学家工作室学术带头人,美国布朗大学博士后、香港浸会大学博士后、美国加州大学伯克利分校访问学者,入选国家级青年人才计划、山东省泰山学者青年专家、哈尔滨工业大学青年拔尖人才计划(副教授、教授)、人社部香江学者人才计划。主要研究方向为3D视觉、虚拟数字人等。主持国家自然科学基金4项、华为公司项目10余项。研究成果获2019年度黑龙江省自然科学二等奖(排名第一)。已发表学术论文80余篇,包括PNAS、IEEE T-PAMI、IJCV、ICML、CVPR、ICCV等。
晏轶超
上海交通大学
报告题目:高精度数字人的三维表征与生成式学习
报告摘要:面对大规模三维数字人的生产需求,利用生成式人工智能技术产生高拟真、规模化的虚拟数字人正逐渐成为研究热点。三维高斯、大模型等技术在过去一年快速发展,并与数字人技术进行了广泛结合。本次报告将主要探讨通过何种表征能构建高精度的数字人,并讨论结合大模型的生成式学习方法。
个人简介:晏轶超,上海交通大学人工智能研究院副教授,博士生导师。获上海交通大学电子工程系学士、博士学位,法国里昂中央理工学院硕士学位,曾担任阿联酋起源人工智能研究院研究科学家。主要研究方向为人体视觉表征学习,发表包括TPAMI、CVPR、NeurIPS在内的论文40余篇。先后主持国家自然科学基金青年项目、CCF-阿里巴巴青年科学家基金等项目8项。曾入选上海市海外高层次人才计划,获2024年中国图象图形学学会自然科学二等奖(排二),2023挑战杯-揭榜挂帅专项赛特等奖,2020年中国图象图形学学会优秀博士论文奖。
郭玉东
中国科学技术大学
报告题目:情感数字人智能生成技术
报告摘要:数字人,作为人类在数字化空间中的具象化身,是元宇宙和虚拟现实产业的核心研究领域之一,在影视、传媒、文旅等众多领域具有广泛的应用价值。在学术界,如何高效、高质量地建模超写实三维数字人,并让其具有情感表现力近年来是数字人领域的关键技术问题。本次报告将分享本人近期在基于生成模型创建高效情感数字人方面的研究成果。
个人简介:郭玉东,中国科学技术大学特任副研究员。2021年博士毕业于中国科学技术大学,后曾于杭州像衍科技公司担任研发总监,期间研发的数字人相关产品已在杭州电视台和中央广播电视总台多个栏目得到应用。研究方向为三维视觉与数字人,近年来在相关领域的顶级期刊与会议上发表论文10余篇,曾获得华人数学家联盟最佳论文奖(若琳奖),并多次担任CVPR、ICCV、SIGGRAPH (ASIA)、IJCV、TVCG等期刊会议审稿人。
朱昊
南京大学
报告题目:原生3D数字人生成模型
报告摘要:便捷快速地重建3D数字人是元宇宙、影视游戏制作、虚拟客服等产业的重要需求。尽管现有方法提高了重建质量,但仍存在泛化能力有限、重建过程缓慢等问题。同时,面向真实人物的三维生成大模型因缺乏足够数量的真实3D数据而受阻。我们重新审视了三维数字人生成大模型这一任务,针对当前数据获取方式难以大规模扩展的问题,研究基于单幅输入图像的可驱动三维数字人生成模型,实现快速逼真的三维人体生成。该项工作构建了大规模高分辨率的人物多视角图像数据集,并基于此提出了前馈式三维人体生成模型IDOL,能够高效生成逼真的纹理和准确的几何外形。该方法实现了在1s内完成基于图像的可驱动三维数字人生成,且高效表示使其适用于无缝动画、编辑等下游任务。
个人简介:朱昊于南京大学获得学士和博士学位,现为南京大学智能科学与技术学院助理教授、姑苏青年教授、博导,共同指导南京大学三维视觉实验室(NJU-3DV),同时也是计算成像实验室(CITE)的一员,从事三维视觉和人工智能方向的研究。近年来聚焦数字人三维重建、生成与驱动技术,发表三十余篇学术论文,包括TPAMI、CVPR、AAAI、ECCV、SIGGRAPH等,代表工作包括FaceScape系列和MoFaNeRF系列。相关研究成果被应用于国内首部真人全CG电影的制作和联合国世界文化遗产大足石刻的三维建模。入选第八届中国科协青年人才托举工程、腾讯犀牛鸟专项研究计划,获得IEEE CAS杰出青年作者奖、江苏省双创博士、南京大学博士生校长特别奖等荣誉。
论坛召集人联系方式