作为美图公司的算法中枢,MT Lab在人脸技术、人体技术、图像识别、图像处理、图像生成等多个方向处于世界先进水平。
前沿技术能快速与产品结合,日调用量逾亿次,已在美图秀秀、美颜相机等多款产品验证算法的稳定性及实用性。
美图公司专注于美,拥有长期的审美积累,艺术基因深植其中,能够把握美的趋势,实现艺术与技术的有机结合。
由MT Lab自主研发的人脸技术,包括人脸检测,人脸关键点,人脸属性分析(性别,年龄等)。能够在各类复杂情况下进行实时、稳定、准确的分析,为后续的图像处理提供坚实基础。
MT3D包括三维重建技术和深度估计技术等。举例来说,三维人脸重建算法通过分析图像视频中人脸的脸型、表情、五官特征等重建出人脸三维信息,精细度高且实时性强;而基于双摄的深度估计技术,不但能精确重建拍摄场景的深度信息,还可以用来模拟大光圈相机的景深虚化效果。
基于海量数据以及深度学习算法,可以精准实时识别人体的骨骼关键点位置,例如肩,肘,腕,髋,膝,踝关节等。得益于关键训练样例挖掘和专门为肢体检测定制的卷积神经网络结构,我们的肢体检测系统对于复杂背景,光照变化,大面积遮挡,衣着变化,夸张姿态等有极强的鲁棒性。
MTrestore可准确判断画质问题并针对不同成因(如暗光拍摄)对图像或视频进行自动去噪、去模糊、超分辨率,去压缩失真等处理,一键提升画质。
MTenhance从美学角度对图像或视频进行自动裁剪,对比度饱和度调整,纹理细节增强,过曝欠曝修正,景深虚化等。不论是白天还是夜景,手机照片也可以呈现出单反后期大片的效果。
通过结合美图自有的AI技术对项目输出统一跨平台的渲染SDK。负责包括萌拍、虚拟试妆、动态滤镜(实时字幕与效果剪辑)、ARKit&ARCore技术应用等业务。
基于AI技术,MTsegment通过分析轮廓、遮挡关系、颜色、纹理、形状等把图像划分成若干互不交迭的区域。根据实际应用场景,我们可以对人体、皮肤、头发、五官等区域进行精确分割,为后续的图像编辑和处理奠定了坚实的基础。
基于MT Lab自主研发搭建的生成网络DrawNet,通过深度学习技术对大量图像数据进行分析与学习,针对不同需求的图像处理的任务,构建出不同应用场景的图像生成模型,经过模型处理,当用户输入自己的图片便可直接生成出对应效果的输出图。目前该技术已应用于AI人像美化、绘画机器人、亚裔变混血等方面。
一套会思考的美颜算法,通过对人脸进行分析,能够根据不同年龄、性别进行个性化、定制级的智能美颜处理。同时通过机器学习,不断优化美颜效果。作为MT Lab核心技术之一,已被广泛应用到美图公司旗下产品中。
应用人脸点、语义分割、3D重建与图像融合等算法,对图像和视频中的人像进行精细编辑,包括上妆和换脸等。另外,通过自动对五官、轮廓、肤色等维度的分析,可为每个用户智能推荐专属的个人形象(如妆容,配饰,发型等)。
基于MT Lab自研业界领先的人脸技术及海量医疗级图像数据开发的深度学习皮肤检测方案,能够通过图像来检测和评估个人皮肤状态,如肤质、肤龄、肤色、毛孔、黑眼圈、痘、斑、痣等等。