武大研究生,全国一等奖!
游戏建模、AI影像、智能客服......
数字人应用愈发广泛
图采难、成本高、材质失真......
武大人创想解决方案
快来和珞珞珈珈一起走近这支
在“华为杯”第五届
中国研究生人工智能创新大赛中
夺得一等奖的“材智先锋队”吧
对于武汉大学计算机学院的江宇、李远珍、赵恩煦、陈泽政4名研究生来说,参加第五届中国研究生人工智能创新大赛,既是一项将多年研究落实为具体项目的实践挑战,也是一场经历过失败后破而后立的“战斗”。
此次大赛以“AI赋能、创新引领”为理念,是“中国研究生创新实践系列大赛”主题赛事之一。“材智先锋队”成员们在肖春霞、罗飞两位老师指导下,应用多种深度学习算法,化解人体几何重建和人体材质估计难题,最终成功开发出智材创想系统,通过创新算法以一种便捷的方式从图片或视频中构建出较高质量的数字人资产。凭借这一系统,“材智先锋队”从1778支队伍中脱颖而出,获得了全国一等奖(亚军)的优异成绩。
智材创想系统是一个轻量化、全自动、便携式写实数字人生成系统,相较于传统工业界需要大规模相机阵列,该系统只通过单个或少量手机、相机等移动设备拍摄人体外观图像集,就能进行几何重建、材质估计,并进行重光照和材质编辑等应用,进而生成高质量数字人模型。与传统的数字人建模系统相比,智材创想系统有三大新突破:
目前项目团队已与华为、腾讯等知名企业合作,并在SIGGRAPH和CVPR等国际顶会顶刊中发表了多篇论文。
谈及项目初衷,队长江宇这样说道,“首先是顺应数字经济的时代风口,数字人市场的火爆反映了对建模技术更准确、更广泛的需求,因此我们想做一个更灵活、更精确、准入门槛更低的数字人生成系统,从而让更多普通人能够参与到虚拟现实发展的浪潮中来,为元宇宙构建出一份绵薄之力。”出于对动漫《凡人修仙传》的喜爱,江宇一直对建模方面的技术发展十分敏感,个人对ACG元素的兴趣也促进了该项目的落地实施。
在兴趣与责任心的双重驱动之下,江宇队长与其团队开始了对项目的研究。成功的道路并非一帆风顺,第一年参与竞赛时,同课题组的其他队伍都取得了不错的成绩,而自己的团队却在赛事中折戟。尽管努力没有得到收获,成员们却并没有困于负面情绪,经过短暂的失意后主动反思自身的不足,不断调整战略,改良技术,确定更加明晰的目标并不断沉淀自我,为之后“重回赛场”夯实基础。
在今年课题老师提出组队参赛建议时,队长江宇不假思索地坚持原班人马,队员们也积极回应了这份相互间的信心和信任。“当时心里还是想争口气,我们把彼此完全托付给对方,想要证明我们是有能力的。”江宇回忆道。
在与志同道合伙伴们的一同努力下,团队遇见一个难题,解决一个难题。在系统开发的过程中,成员需要弥补物理光学基础知识的不足;在前沿技术学习过程中,还面临现有数据集样本数据的缺失等问题。关关难过关关过,队员们知难而上,针对已有研究空白,开发出材质估计扩散模型,研发出体素+TSDF结合的方法、物理动力学思想构建动态几何重建模型等,创新性地解决了实践中碰到的问题,实现了前所未有的技术突破。
除了学术难题需要攻克,再战还给队员们带来了前所未有的心理的压力。队员们彼此相互鼓励,导师们也给予了许多技术支持和改进建议,“有任何困难及时提出来,大家都会帮助你们,不要自己闷头硬扛”的暖心话语让艰难备赛阶段的成员们感念铭记在心。
收获了多方的支持、历经一年的韬光养晦,团队破釜沉舟,通过一次次的技术革新突出重围,在“华为杯”第五届中国研究生人工智能创新大赛中取得了全国一等奖(亚军)的好成绩。
开辟多源数据,优化模型材质
升级信息化产业,助力数字人推广
珞珈学子用不懈奋斗书写青春力量
用技术创新尽责国家所需
创心之所想,“智”造美好未来
擦亮青春底色,展示青年风采