「AI新青年讲座」由智东西公开课出品,致力于邀请青年学者,主讲他们在生成式AI、LLM、计算机视觉、机器学习等人工智能领域的最新重要研究成果。
AI新青年是加速人工智能前沿研究的新生力量。AI新青年的视频讲解和直播答疑,将可以帮助大家增进对人工智能前沿研究的理解,相应领域的专业知识也能够得以积累加深。同时,通过与AI新青年的直接交流,大家在AI学习和应用AI的过程中遇到的问题,也能够尽快解决。
「AI新青年讲座」目前已完结221讲,错过往期讲座直播的朋友,可以点击文章底部“阅读原文”进行回看!
有兴趣分享学术成果的朋友美国藤校留学,可以与智东西公开课教研团队进行邮件()联系。
基于文本的图像生成技术近期取得了显著的进展,相比之下,文本到 3D 生成的质量仍难达到相应的高度。现有方法主要依赖于 提出的由文本引导的分数蒸馏采样方法(SDS),虽然已取得可喜的进展,但仍存在下述问题:
1、缺乏人体三维先验知识,现有方法难以生成可控动作和形态的高保真度三维人体模型;
2、预训练的二维图像扩散模型的限制,现有方法容易出现“多脸”问题,并很难在保持原有特征的情况下完成三维人体的精细编辑;
针对第一个问题,香港大学的研究者提出新框架 ,利用 SMPL 人体先验知识的方法,从而有效控制生成人体的动作以及形态。他们同时提出双重空间的设计的方法,有效的将在标准空间中学习到的高质量几何和纹理,转移到观察空间中。
针对第二个问题香港读博士要几年,研究者设计出新框架 ,提出了 Prior- Score 方法,并利用 FLAME 人头先验模型, 以及 ,解决三维生成任务中常见的多脸问题。他们进一步提出 -aware 方法,进而实现高精细度的编辑工作,并同时能够有效的保持原有三维模型的特征。这些方法能够有效的提高三维人体生成和编辑的能力。
8月10日晚7点,「AI新青年讲座」第 222 讲邀请到、一作香港读博士要几年,香港大学在读博士操雨康:基于二维扩散模型的可控三维人体生成和编辑|AI新青年讲座,香港大学在读博士操雨康参与,主讲《基于二维扩散模型的可控三维人体生成和编辑》。
讲者
操雨康
香港大学在读博士
香港校长奖学金获得者,师从 Wong 教授。博士期间,他有幸与香港大学韩锴博士和腾讯曹炎培博士合作密切。他的研究兴趣主要集中在计算机视觉和深度学习领域,包括三维人体重建、二维/三维人体生成等。近几年他以第一作者在 CVPR发表多篇论文,并于近期进行了三维人体生成的多个探索。他目前担任 CVPR,ICCV,, Asia 等顶级会议的审稿人。
第222讲
主 题
《基于二维扩散模型的可控三维人体生成和编辑》
提 纲
1、文本到3D生成的研究及难点
2、可控动作和形态的三维人体生成
3、精细编辑下的高保真三维人头生成
4、实验结果展示及未来展望
直 播 信 息
直播时间:8月10日19:00
直播地点:智东西公开课知识店铺
成果
论文标题
《: Text-and-Shape 3D Human 》
《: 3D Head with Text》
论文地址
开源代码
报名方式
针对本次讲座,可以扫码添加小助手茉莉报名。已添加过茉莉的老朋友,可以给茉莉私信,发送“222”即可报名。
同时,针对「AI新青年讲座」,我们已经组建了专属学习群,也将邀请各位AI新青年加入。加入学习群,除了可以免费听课之外,还能认识讲者,与更多同行和同学一起学习。想要加入的朋友,也可以和茉莉进行申请了。
点个“在看”和大家一起聊聊
香港中文博士读几年,香港中文大学MMLab在读博士沈宇军:生成对抗网络的可解释性研究及其应用 | 直播预告
「CV研究合辑」,是智东西公开课针对计算机视觉推出的一档合辑,聚焦于计算机视觉前沿领域研究成果与进展的讲解。每一讲由主讲与答疑两个环节组成,其中,主讲60分钟,采用视频直播形式,答疑30分钟,将在相应交流群进行。
神经网络由于网络特征或决策逻辑在语义层面难以理解,同时也缺少数学工具去诊断与评测网络的特征表达能力,进而解释目前不同神经网络模型的信息处理特点,一直被大家称为是一种“黑箱”。而如何对神经网络进行“解释”,称为近年来的热门研究方向。
生成对抗网络近年来随着其不断的发展,生成图片的质量以及模型的训练稳定性不断提高。然而,对于对抗生成网络的可解释性还少有研究。生成图片的过程是否有迹可循?生成模型是否像分类模型一样可以学到高级的语义信息?除了生成高清图片之外,一个预训练好的生成模型还有哪些应用?
6月5日晚8点,智东西公开课「CV研究合辑」第7讲直播开讲,由香港中文大学MMLab在读博士沈宇军为大家深度讲解《生成对抗网络的可解释性研究及其应用》。沈博士将从隐空间的角度出发,深入分析对抗生成网络的可解释性香港中文博士读几年,并介绍如何对生成网络自发学到的知识进行再利用,使得一个预训练好的模型可以被应用到各种各样的任务中去。
沈宇军,香港中文大学MMLab在读博士,师从汤晓鸥教授和周博磊教授,香港博士研究生奖学金计划(HKPFS)获得者。沈博士本科毕业于清华大学电子工程系。
课程内容
主题:生成对抗网络的可解释性研究及其应用
提纲:
1、生成对抗网络的可解释性
2、基于隐空间可解释性的深度解析
3、如何对生成网络自发学到的知识进行再利用
讲师介绍
沈宇军,香港中文大学MMLab在读博士,师从汤晓鸥教授和周博磊教授,香港博士研究生奖学金计划(HKPFS)获得者;本科毕业于清华大学电子工程系。
直播信息
直播时间:6月5日20点
直播地点:智东西公开课小程序
答疑地址:GAN交流群
加入交流群
本次课程的讲解分为主讲和答疑两部分,主讲以视频直播形式,答疑将在「GAN交流群」进行。
加入交流群,除了可以免费收看直播之外香港中文博士读几年,香港中文大学MMLab在读博士沈宇军:生成对抗网络的可解释性研究及其应用 | 直播预告,还能认识讲师,与更多同行和同学一起学习美国top30名校留学,并进行深度讨论。
扫码添加小助手糖糖(ID:)即可申请,备注“姓名-公司/学校/单位-职位/专业”的朋友将会优先审核通过哦~