时间: 2024-06-06 12:39:24 | 作者: 无插件360体育直播
近日,计算机视觉顶级会议CVPR 2022公布了会议录取结果,美图影像研究院(MT Lab)与北京航空航天大学可乐实验室联合发表的论文被接收。该论文突破性地提出分布感知式单阶段模型(DAS),用于解决极具挑战性的多人3D人体姿态估计问题。该方法通过一次网络前向推理同时获取3D空间中人置信息以及相对应的关键点信息,从而简化了预测流程,提高了效率。此外,该方法有效地学习了人体关键点的真实分布,进而提升了基于回归框架的多人3D人体姿态估计方法的精度。
实际上,这只是美图利用人工智能为影像技术赋能的冰山一角。早在2010年,美图就成立了核心研发部门——美图影像研究院,该研究院致力于计算机视觉、机器学习、增强现实等人工智能(AI)相关领域的研发,在人脸技术、人体技术、图像分割、图像识别、图像生成、图像增强等方面处于领先水平,为美图现有和未来的产品提供核心算法支持,并通过前沿技术推动美图产品发展,曾先后多次参与CVPR、ICCV、ECCV等计算机视觉国际顶级会议,并斩获冠亚军10余项,被称为美图的“技术中枢”。
计算机视觉中的经典技术——多人3D人体姿态估计在AR/VR、游戏、运动分析、虚拟试衣等领域具有广泛的应用潜力,近年来随着元宇宙概念的兴起,更是让这一技术备受关注。
目前,一般会用两阶段方法来解决多人3D人体姿态估计的问题:自顶向下方法,即先检测图片多个人体的位置,之后对检测到的每个人使用单人3D姿态估计模型来分别预测其姿态;自底向上方法,即先检测图片中所有人的3D关键点,之后通过相关性将这些关键点分配给对应的人体。
尽管两阶段方法取得了良好的精度,但要通过冗余的计算和复杂的后处理来顺序性地获取人置信息和关键点位置信息,其速率通常难以满足实际场景需求,因此多人3D姿态估计算法流程亟须简化。
为了克服两阶段方法存在的问题,该论文提出了一种分布感知式单阶段模型用于解决基于单张图片的多人3D人体姿态估计问题。另外,DAS在优化过程中对3D关键点的分布进行学习,这为3D关键点的回归提供了极具价值的指导性信息,从而有效地提升了预测精度。
此外,为了缓解关键点分布估计的难度,DAS采用了一种迭代更新策略以逐步逼近真实分布目标,通过这样一种方式,DAS可以高效且精准地从单目RGB图片中一次性获取多个人的3D人体姿态估计结果。
与已有的两阶段方法相比,该模型能够最终靠一次网络前向推理同时获取人置信息以及所对应的人体关键点位置信息,从而有效地简化预测流程,克服了已有方法在高计算成本和高模型复杂度方面的弊端。另外,该方法成功将标准化流引进到多人3D人体姿态估计任务中,以在训练过程中学习人体关键点分布,并提出迭代回归策略缓解分布学习难度,来达到逐步逼近目标的目的。通过该模型能获取数据的真实分布,有效地提升模型的回归预测精度。
对人脸皮肤进行精细化的瑕疵修复与暗沉祛除,一键入“齿”修复牙齿上的瑕疵,照片上模糊的容颜清晰重现,全身美型告别大粗腿、水桶腰……AI技术正让修图小白秒变大师。
一家商业摄影机构的业务流程基本包括:营销获客、摄影服务、后期处理、成品制作等环节。其中,后期修图是商业摄影工作流程中占比高、耗时长、工作量大的一个环节。
在旺季或者拍摄任务激增时,从拍摄到出片的周期甚至长达1个月左右。尤其是在人像处理部分,非常考验修图师的专业功底,而一名合格修图师的培养需要耗费高昂的人力、物力成本,还需要面临人员频繁流动的风险。
美图创始人兼首席执行官吴欣鸿在接受科技日报记者正常采访时表示,据不完全统计,商业摄影1年修图可达120亿张,大量繁杂的重复性劳动以及较高的技术门槛,给商业影楼带来非常大的成本压力。借助AI技术完成重复繁杂的后期初修工作,不仅仅可以提升商业摄影后期的修图效率,同时也为商业摄影行业提供了深层次地融合美学艺术的专业级图像处理服务。
由美图技术大脑——美图影像研究院自主研发的美图云修,通过智能预设功能,一键就可以完成对照片的批量处理。其中,脸部优化功能能修复面部瑕疵,打造细腻肌肤;妆容调整功能可实现对妆容的智能调节。此外,美图云修还能完成塑造立体的面部五官、分区域实现全身美型、美化身体肌肤等80余项修图工作。同时,灵活自由的参数自定义也满足了用户对修图更专业的需求。
“美图云修还提供滤镜特效、牙齿修复、祛双下巴、匀肤、缩头、一键仿妆、背景增强、多人全身美型等独特功能,能够在一定程度上帮助影楼快速完成约80%的精修工作。”美图技术副总裁、美图影像研究院负责人刘洛麒表示。
今年3月30日,美图披露2021年全年业绩报告。报告数据显示,2021年美图研发投入达5.455亿元,同比2020年增长35%。
随着中国影像软件产业对研发技术投入的不断加大,近年来中国影像软件在技术能力方面有了很大的进展,有些已经不输国外同类产品。
“我们推出的视频美颜App——Wink,它的视频人像美化功能需要将人像美颜从图像扩展到视频维度,这就需要实时的人脸检测跟踪、分割、3D建模等技术与人像美颜算法进行有机结合,并且要应对视频抖动、大侧脸等极端情况,才能为用户更好的提供满意的结果。”刘洛麒说。
“用户拍摄的照片或视频存在清晰度低、画质差、产生噪点等问题,我们利用基于深度学习的画质增强技术可提升用户照片与视频的质量,满足他们的拍摄需求。同时,我们也将深度学习应用到人像美颜中,例如我们自主研发的AI匀肤技术,既能祛除脸部瑕疵,同时也保留了细腻的皮肤纹理质感。”吴欣鸿说。
“我们基于AI研发的人体美型技术,不是简单地对人体进行拉伸,而是先结合人体3D重建、人体分割等技术去建立人体的三维模型,再利用深度学习算法学习美化之后的人体模型形变,同时对背景的Mesh(网格)进行建模,从而缓解背景的变形扭曲,最终实现用户满意的人体美型效果。”刘洛麒指出。
此外,美图证件照应用到的人像抠图技术,能轻松实现发丝级的精细抠图,完成对证件照人像的一键换装,同时保持人像和背景的光线和谐性。而基于AI生成的增发技术,能调整发际线,能改变发色和发型,还能使头发显得更蓬松。
未来,人工智能将如何赋能影像技术?对此,吴欣鸿表示,一方面,基于AI的影像技术,将与各行各业有更多、更深入的结合,这也对影像技术提出了更高的要求。另一方面,通过3D技术和AR技术等,为用户更好的提供沉浸式和可交互的虚拟化体验也是未来影像技术发展的热门方向。(马爱平)
高考临近,考生如何科学饮食成了很多家长关心的问题。专家提醒,考生在备考期间,切忌盲目进补和过量饮用提神饮料,应保证睡眠、注意营养、适度运动。家长还应关注考生心理健康状态,避免将焦虑情绪传递给考生,多给考生一些正向鼓励,让其以积极乐观的心态面对高考。
在6月5日世界环境日到来之际,中国科协生态环境产学联合体在京发布2023年度中国生态环境十大科技进展,涉及水质基准、气候效应、生态系统、长江模拟器、船舶低碳技术、农林废弃物、
由浙江大学和中国科学院分子植物科学卓越创新中心科学家组成的联合研究团队,通过线粒体—细胞核协同演化研究,定位了新的长寿基因。
清华大学航天航空学院、柔性电子技术实验室张一慧教授课题组在国际上首次研制出具有仿生三维架构的新型电子皮肤,可在物理层面实现对压力、摩擦力和应变三种力学信号的同步解码和感知,对压力位置的感知分辨率约为0.1毫米,接近于真实皮肤。相关研究成果日前在国际学术期。
中国是全球生物多样性最丰富的国家之一。据统计,我国拥有高等植物39000多种,其中一半以上仅分布于中国;动物物种同样很丰富,其中鸟类1500余种,是世界上鸟类种数最多的国家之一。
为新质生产力发展打造深层次地融合科创生态——全国无党派人士考察团2024年度重点考察调研观察
近期,全国无党派人士考察团围绕“推动新质生产力发展的科学技术创新生态建设”,在安徽开展2024年度重点考察调研。
中国科协生态环境产学联合体是在中国科协指导支持下成立的协同创新平台组织,由生态、环境、气象、地学、海洋、水利、农林等跨领域全国学会、行业领军企业、代表性科研机构和公益组织发起。
屠格森与尹文英,又“吵架”了! “尹女士,请再仔细看看,你会同意我的看法。” “您知道,屠格森先生,不是一天两天,您也承认华蚖是很特别的,我有充分的理由坚持我的意见。”
6月4日,携带月球样品的嫦娥六号上升器自月球背面起飞,随后成功进入预定环月轨道。在嫦娥六号“挖土”的每一步,都有“关节肌肉”和“神经末梢”——航天电机的助力。它们大小不一、功能各异,
6月2日至3日,嫦娥六号圆满完成世界首次月球背面采样。本次任务中,由航天科技集团五院精心设计的钻采和表采相结合的“挖土”模式,以及为嫦娥六号装备的“挖土神器”,包括钻取采样装置、
芒种的“芒”指一些有芒的作物,如麦、稻、黍、稷等,这些作物种子壳上的细刺针状物称为“芒”;“种”,一为种子的“种”,二为播种的“种”。芒种是谷物生长的黄金期,芒种一到,夏熟作物要收获,夏播秋收作物要下地,春种的庄稼要管理,夏收、夏种、夏管交叉,简称为“三夏”。
近日,我国科研人员在广西壮族自治区崇左市龙州县地下溶洞采集鱼类样本时,发现了一种白色盲鱼,基于形态学和分子系统生物学研究结果,确认该鱼类为新物种,并将其命名为“龙州中华喀鳅”。根据形态学和分子系统生物学研究,科研人员将龙州中华喀鳅归入中华喀鳅属,确定了其分类学地位,目前正在慢慢地开展相关研究。
搭建广聚英才、集思广益、建言献策的平台,助力北京专精特新企业高质量发展。
目前,正在推进南岸区重大慢性病防治中心试点建设,提供更高质量的全人群、全生命周期健康服务。
鸣沙山东麓、党河北岸,莫高窟散发着穿越千年的璀璨华光。这里,现存735个洞窟、45000平方米壁画,2400多身彩塑……被誉为“世界艺术画廊”“墙壁上的博物馆”。
在建院30周年之际,经广大院士推选,中国工程院精选出院士主导或参与的100项工程科技成果以及中国工程院100项战略咨询研究成果。“神舟”飞天、“嫦娥”奔月、三峡工程、南水北调、
走进河北保定立中车轮集团,实验桌前,年轻工程师用扫描电镜检测铝合金中的夹杂物;隔壁的试制车间,工人们通过自主研发的新型高效精炼熔剂和净化工艺,对再生铝的铝液进行二次净化提纯……
“国字号”博物馆又添新成员!5月30日是第八个“全国科技工作人员日”,这一天,中国科学家博物馆正式面向公众开放并举办首展系列活动,引发广泛关注。
自长三角一体化发展上升为国家战略以来,“长三角新坐标”在经济地理版图中更加醒目。2023年长三角经济总量突破30万亿元,人均GDP超过1.8万美元,世界级城市群地位逐步提升。