欢迎访问千教网-生活知识百科,百科知识大全,优质生活百科知识分享网站

千教网-生活知识百科,百科知识大全,优质生活百科知识分享网站

千教网 > 科技 >

杨铀 | DEDE视觉技术 感知多维世界

www.kujyd.com 2025-01-06 15:40 科技

▲杨铀

1999年,电影《黑客帝国》(The Matrix)上映。在这部电影中,制作组使用了360度旋转的视角来全方位呈现男主角尼奥仰身躲子弹的场景。这一被命名为“子弹时间”的经典慢动作镜头,不只给予了当时的观众“从平面到立体”的新鲜观影感受,也激起了视觉、计算光场及多媒体通信等有关行业从业者和专家的持续考虑。“被拍摄的人、事物或场景本质上都是三维的,然而当它被拍摄后,呈现出的却是二维图像。换言之,在拍摄的过程中,被拍摄主体发生了一次‘降维’的过程,这会致使大家在观看这类视频内容时没办法全方位完整地看到被拍摄主体的全貌,导致了视觉信息的缺失。‘子弹时间’的出现,无疑为补全图像的信息缺失提供了一种新的策略。”提及这番由影视作品引发的技术升级,华中科技大学电子信息与通信学院副院长杨铀如是介绍道,而他现在所从事的以视觉感知与计算为核心的计算光场、计算机视觉、立体视频系统等方面的研究工作,也正与此密切有关。“我的工作就是达成更高维度的视觉信息获得,给予平面视频或图像更全方位的三维信息,使观众对目的场景有更深层次的理解,让‘观看’这件事不止停留于‘我看到’,更要‘看得清’‘看得懂’‘看得更好’,并将有关技术应用于愈加多的应用场景,这就是大家为之奋斗的目的。”

打破视限,“还原”立体世界

为了获得光场f(x,y,z,θ,φ,λ,t)的信息,将空间(x,y,z)、角度(θ,φ)、光谱(λ)和时间(t)等多个原因引入其中,杨铀及其团队尝试了不少方法,并在研究过程中不断探索着影响视觉信息呈现的要点。以视觉信息的获得为开端,人的双目视觉给予了他们想法——“虽然单相机的视觉获得只能得到平面图像,但仿照人眼的双目视觉系统,只须可以借助2个及以上的相机进行多视点同步采集,就可以在得到的多视点图像基础上进行立体匹配,从而得到深度z的信息。”基于这一认识,杨铀以多视点解决多维度视觉问题为切入点,针对离散的多视点数据的结构化、可计算、可优化、可传输这4个主要问题,拓展了多学科联合攻关,形成了多视点多模态视觉信息的采集、处置与传输重点技术。在内容的采集和预处置层面,他提出了相位信号时域差分校正、像素光流时域传播、递进式多视点视频配准等办法,达成了三维空间任意位姿大规模相机阵列数据的多模态标定与结构化表示;创造了模型与数据联合驱动的耦合计算办法,研制联合计算系统,达成了多视点多模态数据的混合计算;并突破性地提出了时域上采样法和时域校正法等多种办法,为运动场景的立体感知提供了丰富的工具集。而在编码压缩与传输优化,与交互与呈现等方面,他创造了多视点视频优化编码办法、多视点视频数据的筛选优化模型、时-角维差值技术等,减少了多视点多模态混合计算资源代价;并基于直接借助编码参数(如运动矢量、块模式等)来进行深度图滤波的办法、跨视点多边滤波的办法,与新型局部双边滤波器等办法,着力提高视频的绘制水平。

抗灾救困,彰显“天眼”实力

在自然灾害、事故灾难、公共卫生、社会安全等突发性公共安全事件中,总是会出现因电力、通信设施损毁致使通信中断的状况,这不只给受灾地区内人民群众生命财产安全带来巨大威胁,也会为后续救援和指挥调度工作导致紧急妨碍。在这种极端状况下,现有些应对通信系统仅能在小范围内为持有专用设施的职员提供窄带传输业务,没办法满足灾区态势感知、现代化救援对宽带应对业务的重大需要。怎么样迅速构建灾害现场与后方之间的信息通路,并对灾害现场态势进行全方面、多角度感知,是目前突发公共事件应对处置、现代化应对救援所面临的共性难点。而杨铀团队基于多视点视觉系统的研究成就,就在如此断电、断网、断路的“三断”环境中,在灾区态势感知上找到了一处全新的“用武之地”。

▲杨铀与朱中梁院士(左一)合影

以“天-空-地”全覆盖的广电专网体系为依托、公网为补充,杨铀团队整理“专-公”多网信道资源塑造了多体制大容量融合通信信道,在揭示分布式多模态感知耦合机制与传递规律的基础上,创造了多模态视频时间-角度-尺度关联技术,就此研究的关联感知系统,在国际上初次达成了60个视点、3个模态的分布式关联感知,视点数提高1个数目级,克服了广、散、多的分布式感知抓立视点顽疾,并突破了有关范围的国际技术壁垒与欧美技术禁运;基于关联机制下的多模态视频预测与编码办法,与多模态协同的视频筛选优化技术,编码能耗大幅度减少,同步研发的灾区小队协同计算系统则达成了极端通信下的窄带好看的,被欧盟第七框架技术咨询报告评价为“多视点视频编码范围最为要紧的进展”;其所打造的多模态视频模型-数据联合驱动的协同机制,跨模态、跨视角协同的场景优质重建技术,与分布式多模态协同计算系统,突破了深度场角频率感知全向同频干扰的物理制约,重建水平打破了维持24年的国际纪录;自主研发的应对融合通信传输系统与通信车,更是初次达成了通信空洞下灾区的“广电-公网-卫星”三网融合通信。杨铀团队形成了以灾区态势感知和灾害救援为核心,涵盖安防监控、广播电视、通信装备等十多个行业的100余型新品与新服务,服务南水北调、雄安新区建设等重大工程,冬天奥运会、全国高考考试等重大活动,与贵州、山东、吉林等省的应对演练与系统检验。现在,这一成就在中国国家应对广播中的应用,已覆盖72%的国土面积、服务全国62.8%的人口,真的落实了国内应对救援“以防为主,抗救结合”的策略使命。

应对救灾事关人民生命财产安全、社会安全、国家安全,可谓牵一发而动全身。而通过面向灾害现场的多视点视频采集、处置与传输办法及装置将灾区状况传递给后方指挥,可以有效提高后方指挥对于灾区全貌及细节的把控程度,进而做出更为精确的调度指挥,这对国内应对救援及有关行业的技术和管理体系进步都有积极意义。不唯这样,杨铀团队此次在应对范围的发展,也为有关技术应用于自动驾驶、车路协同、智慧家庭、服务机器人、远程视频会议、高档工业视觉监测、远程医疗和专用医疗装备等多个场景打开了局面。“经由这个项目,我看到了这项技术更广阔的应用场景,也更深刻地意识到尚有无数的科研山峰正等待着大家。”而过去有良师为引、不断成长的杨铀,目前也已成为新的引路人,带领更多的青年不辍攀登。

▲杨铀与武筱林老师(左一)合影

行稳致远,建设革新高地

1990年,就读于广东培英中学的杨铀,在初中一年级时就早早地接触了计算机有关课程。这段历程让他在高考考试时义无反顾地考试报名了计算机专业,而随后面向图互联网和立体视频等细分方面的研学的道路,也为他日后涉足交叉范围打下了坚实的基础。据悉,在杨铀攻读博士期间,彼时数字电视在国内尚未完全普及,“大伙用的还都是那种‘大块头’的显像管电视”;而他已经在导师蒋刚毅老师的指导下,开始接触立体视频的处置编码工作。“我日后从事的视觉感知与计算工作即以此为始,蒋老师高瞻远瞩的科研视线、全方位知道行业进步前沿的钻研精神和严谨认真的工作态度也深深地影响了我。”而在拓展博士后研究时,合作导师戴琼海放眼将来的策略大局观、博采众长的交叉学科的思维模式、敏锐的学术触觉和提纲挈领的总领能力,与一直维持考虑的习惯,都让年轻的杨铀收获颇丰,并沉淀为他日后走上工作职位、带领团队的不竭养料。

作为范围内较早拓展计算光场研究与应用的科研职员之一,革新是杨铀科研生涯中最亮眼的底色;现在担任华中科技大学电子信息与通信学院副院长,他仍坚持以实质需要为导向,积极推进技术革新和系列成就落地,全方位奠定团队的行业影响力和学科影响力。在培养行业后来人时,他第一强调了思想导向的重要程度。“要目光长远,要考虑所学所研能帮助国家解决什么样的问题”,是他教会学生时常说的话。同时,他一直坚持产教融合、科教融汇的人才培养办法,“大家所在的电子信息行业,是很接地气的行业。想要解决实质的问题,就不可以纯粹以发论文为导向,而是要到产业的第一线去,将产业、科研与教学有机融合起来”。为此,他积极发展课堂和产业一线的“对接”通道,通过学生深入企业一线、产业专家到校讲课等有效交流形式,杨铀团队成员及学生得以真切获悉行业进步的近况和前景,为科研工作提供愈加“有些放矢”的发力靶点。除此之外,杨铀也沿袭了恩师的习惯,从写作逻辑、写作办法、结构布局乃至标点细节入手,亲自执教学生的写作课程。“假如科研成就不可以够被非常不错地传达出去、不可以够被普罗大众所同意,如此的科研是没任何用处的。”他强调道,“写作的过程,也是对成就进行梳理的过程。通过提高写作方法,他们的成就将得以更好地推广传播,这也将提振他们的科研信心,并以愈加明确的思路进入后续的工作中。”

▲杨铀团队自主研制的多维计算光场成像装备

“立大志、入主流、上大舞台、成大事业”,杨铀以此为自己团队的精神内核作注,也以此描绘了他与团队的将来图景。“将来,大家将继续坚持‘四个面向’,踏踏实实、补全健全有关技术在应对救灾范围弱点的同时;更要持续探索学科前沿、进一步拓宽有关技术的应用场景。”以科研凝结核心竞争优势、以应用增进人民福祉,杨铀及其团队将继续前行、不畏寒暑。

Tags:华中科技大学

热点排行
热门推荐
热门tag
清朝的衰落 兵权给了李严 活饵 肺吸虫 分电脑屏教程 幼龟 高中 红茶 昆虫 足部 痛风 无花果 脂肪酸 应酬 调休制度 都市 血液循环 电脑教程炒股 思维能力 克重 油渍 习俗 大热门结局 蒙家 人数 叶片 鱼头 孔庆德 寓意 蜀汉 沟通 专业 容器 特殊处理 诚信 降温 体育 太原 珍珠龟 咚咚喵科普 cf电脑人机教程 未时 浮肿 hpv疫苗 粘贴 雅诗兰黛 保质期 规培生 沈阳 风沙 混合 养分 水质 皇帝 商超 家庭医生 机体 化妆 三价砷 出油