Loading [MathJax]/jax/output/CommonHTML/config.js
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >京东发布全球首个“发丝级”全自动抠图软件么么照发力买家秀

京东发布全球首个“发丝级”全自动抠图软件么么照发力买家秀

作者头像
京东技术
发布于 2018-06-20 09:41:03
发布于 2018-06-20 09:41:03
1.3K0
举报
文章被收录于专栏:京东技术京东技术

2018年4月,京东Y事业部对外发布全球首款全自动智能图片合成处理软件——么么照。么么照可实现“发丝级”识别精度的全自动抠图效果,能够满足于买家秀、社交、海报制作等应用场景,未来还将覆盖邀请函、电子名片、直播等静态图片及动态视频的应用。给用户带来更丰富有趣的玩法及全新的互动体验。

么么照以人像抠图为核心,可实时更换背景/贴纸,并支持全身效果合成,由来自于京东美国硅谷研发中心数字科技团队提供了领先的AI及AR技术,可创造出内容更加丰富的创意表达,极低的学习门槛让用户可轻松上手进行创作。目前么么照已发布iOSAndroid版本,用户可前往应用商店下载体验。

“发丝级”全自动抠图让创意信手拈来

目前市面上种类繁多的图片美化软件和大部分的抠图App,几乎都是半自动化的,需要用户手动框出人物区域,用户们在选取人物或其他对象时经常有不小的麻烦,需要消耗一定的时间。

么么照解决了用户这一烦恼,规避了其他半自动抠图软件效果差不好控制的问题。采用人工智能算法,将人与复杂背景自动分割,智能识别人体部位与动作,达到发丝级识别精度,用户可通过使用app内置主题背景或自由上传背景,实现万千虚拟场景自由更换,赋予用户沉浸式的深入体验,让图片处理变得富有创意。

么么照在抠图方面采用最先进的深度学习算法对照片进行语义分割,可精准分割出人像与背景,并返回一个由浮点数组成的字符串,字符串内的每个浮点数对应原图的一个像素,浮点数的值代表相应的像素是否在人体轮廓内的置信度。

为了使用户获得最佳的用户体验,么么照针对手机端和服务器端分别采用了轻量级网络和高精度网络来做上百万的数据训练,做到了既精准又轻量化的效果。利用深度学习中的Encoder-decoder模型结合提取到的全局和局部特征,能够对每个像素进行人物、背景分类,得到高精度的人物分离,最后组合成多种处理方法,并对神经网络得到的人体模型,做进一步的细节优化,简单背景下甚至可做到PhotoShop级别的精度。

为了增加图片的趣味性,么么照还在抠图选取过程中加入了人体关键点检测,例如检测到图像中人体肩膀的位置,可自动搭配翅膀等梦幻元素,还可自动更换背景、识别背景颜色。同时通过后台算法可以检测到图像中服装属性、背景图元素,根据提取的标签信息智能匹配语料,未来更可一秒钟写好配图文章。此项技能作为AI 技术在图片领域的拓展,还能够提取用户全身照片里服装风格信息,可用于用户偏好等标签数据信息梳理。

进击的娱乐化趋向 动态视频实现一键抠图

根据2015 CNNIC数据显示,截止2015年底,在中国30岁以下的网民占比超过一半(54%),20岁以下网民占比24.1%,互联网娱乐继续向低龄群体渗透。这些崛起的90后是各大平台都无法忽视的新兴消费势力,日益成为影响中国互联网未来发展的关键力量。从供需两端看,90后最关注的行业是文娱,而短视频又是对文娱类产业影响最大的部分,深入到产品层面的改变,在产品设计及运营策略等方面各大企业也都在迎合着90后,么么照正是抓住了年轻群体娱乐化的需求,在市面上静态抠图尚不精准的情况下率先进行了动态视频抠图处理的研发。

么么照能够检测到图像中所包含人物中脸的各个关键点位置,捕捉用户脸部形态,进行人脸实时视频抠图,完成82个人脸关键点定位检测深度模型,服务器GPU可达322 fps,手机端(iphone7)GPU为33 fps。在动态抠图方面,后台算法会根据视频输入的每一帧计算出一张二值掩蔽图,通过对大批量视频进行分割训练,保证帧之间的连续性,加上对沙漏型分割网络架构的改进,能够提高并解决视频在手机端的速度问题。

么么照在动态抠图过程中可以识别到点头、摇头、手势等动作,使用神经网络能够做到毫秒级的动效跟踪和贴纸展示,此外在移动中拍摄识别依旧准确。作为全身视频的新颖玩法,适用于体感游戏在短视频平台上的应用,能够让用户真实体验线下Cosplay,例如实时制作出用户翱翔太空、深入火山等效果,同时可以进行一键分享社交圈,实时互动传播。

未来通过与AR技术结合,么么照针对用户对于照片效果美化的需求,还将加入“人脸关键点检测”萌颜+实时抠图功能,并通过美颜与滤镜赋予萌颜效果,不管是静态图片还是动态视频都能带给用户前所未有的视觉体验。

助力京东买家秀 用数据看懂你的美

么么照一方面可满足用户对照片美化处理的个性化需求,还将作为京东在买家秀上的重要基础工具来提供入口,消费者可通过么么照的处理对商品进行更个性化的评价展示,增强B端与C端的互动,提高转化率。同时么么照通过对用户穿衣风格的识别可不断积累用户对服装搭配,色彩偏向等数据,在与京东用户数据打通后,可围绕数据标签展开精准且具有针对性的营销活动,提供给用户更多个性化推荐,以及更适合的活动策略。

京东技术 ∣关注技术的公众号

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2018-04-19,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 京东技术 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
【AI产品】深扒美图秀秀中掳获万千少女芳心的“AI秘籍”
上一期我们一起体验了抖音里的各项黑科技,见证了抖音以短视频为载体,基于人脸关键点检测、图像语义分割、风格迁移、表情识别、图像分类等计算机视觉技术为用户提供了专业、新奇、搞怪的体验。
用户1508658
2019/07/25
7470
【AI产品】深扒美图秀秀中掳获万千少女芳心的“AI秘籍”
就离谱!这么强悍发丝级超精细抠图算法开源了!
你还在用P.S.等商业软件,划着鼠标,一点点勾勒图像边缘完成抠图嘛? 有些大神可能会说:我可以用蒙板、通道等等高端操作实现超快抠图! 但如果能有一个软件可以实现智能全自动抠图,完美保留发丝、树叶等精细边缘,还完全免费,甚至代码都是全部开源的,它不香嘛!!! 图1 Matting效果展示 这绝对不是画饼,近期一项被称为Matting的算法可算是火爆了AI界,它相比于单纯的图像分割技术,可以根据透明度更进一步的对图像的像素进行分类,如下图,不仅图像中的主体目标被精准抠出,连超精细的毛绒边缘和透明玻璃杯
昱良
2022/04/27
2.5K0
就离谱!这么强悍发丝级超精细抠图算法开源了!
谷歌最新抠图算法:让背景虚化细节到头发丝!有单反的感觉了...
本文经ai新媒体量子位(公众号 id:qbitai)授权转载,转载请联系出处本文约1200字,建议阅读7分钟用上轻量级网络+监督学习。 当真是买算法送手机! 这不,谷歌又给“亲儿子”Pixel 6塞福利了,让手机抠图也能细节到头发丝。看这效果,原本模糊的头发轮廓,咻地一下,就变成了纤毫毕现的样子! 连发丝之间的缝隙也能精准抠到。 这样一来,就避免了使用人像模式拍照时人物与虚化背景割裂的情况,让人物照片的纵深感更加逼真。 四舍五入一下,这不就是手握单反拍照?(手动狗头) Alpha遮罩+监督学习 在介绍最
数据派THU
2022/03/04
1K0
一毛抠图特效不忍直视,以假乱真才是设计界的最高追求!
曾经有人跟小巴说过这么一句话,剪辑设计吃苦受累,抠图抠到索然无味,提案提到让人崩溃。特别是对于设计公司、影视制作等需要视频剪辑的公司来说,相信很多人都为抠图、抠像这事心力交瘁过,网上抠图教程一大堆,辛苦学了一个月却什么都没学出来,只能对着屏幕长唉短叹。
云巴巴
2021/08/09
1.6K0
一毛抠图特效不忍直视,以假乱真才是设计界的最高追求!
人人皆可变身黄金圣斗士:微视用AI一键燃烧小宇宙,还有不同星座可选
机器之心原创 作者:蛋酱 那些年关于变身圣斗士的梦想,如今能在腾讯微视 App 就能实现。 「年轻的青铜圣斗士少年们啊,为了大地上的爱与和平,我们将逝去,献上全部的生命和灵魂,融为一体。就在此刻,燃烧吧,黄金的小宇宙!雅典娜啊,请赐予这黑暗的世界一线光明!」 就是这段话,没错,是我们小时候倒背如流的十二黄金圣斗士语录了。很多人也曾暗中想象,自己能成为这群黄金圣斗士的成员之一。现在,「变身」的机会来了! 在腾讯微视 App,黄金圣斗士铠甲的特效挂件已经正式上线。这是静态照片变身后的样子: 变身的操作方法
机器之心
2023/03/29
6130
人人皆可变身黄金圣斗士:微视用AI一键燃烧小宇宙,还有不同星座可选
CVPR 2025|视频抠图MatAnyone来了,一次指定全程追踪,发丝级还原
视频人物抠像技术在电影、游戏、短视频制作和实时视频通讯中具有广泛的应用价值,但面对复杂背景和多目标干扰时,如何实现一套兼顾发丝级细节精度及分割级语义稳定的视频抠图系统,始终是个挑战。
机器之心
2025/04/18
4970
CVPR 2025|视频抠图MatAnyone来了,一次指定全程追踪,发丝级还原
完美抠图王冰冰!字节实习生开发的AI,实现4K60帧视频实时抠图,连头发丝都根根分明
鱼羊 明敏 发自 凹非寺 量子位 报道 | 公众号 QbitAI 看这一头蓬松的秀发,加上帅气的动作,你以为是在绿幕前拍大片? No、No、No 这其实是AI拿来视频实时抠图后的效果。 没想到吧,实时视频抠图,现在能精细到每一根发丝。 换到alpha通道再看一眼,不用多说,德芙打钱吧(手动狗头)。 这就是来自字节跳动实习生小哥的最新研究:实时高分辨率视频抠图大法。 无需任何辅助输入,把视频丢给这个名为RVM的AI,它分分钟就能帮你把人像高精度抠出,将背景替换成可以任意二次加工的绿幕。 不信有这么丝滑
量子位
2023/03/01
7900
完美抠图王冰冰!字节实习生开发的AI,实现4K60帧视频实时抠图,连头发丝都根根分明
刷新纪录,揭秘漫画脸背后的AI技术
昨晚做了一个梦,梦里的我变成漫画里的人物,正在为参与选秀苦练舞蹈,期待着万众瞩目登上舞台的一天。
昱良
2021/02/08
8620
谷歌又买算法送手机了,最新方法让背景虚化细节到头发丝,真有单反的感觉了
明敏 发自 凹非寺 量子位 | 公众号 QbitAI 当真是买算法送手机! 这不,谷歌又给“亲儿子”Pixel 6塞福利了,让手机抠图也能细节到头发丝。 看这效果,原本模糊的头发轮廓,咻地一下,就变成了纤毫毕现的样子! 连发丝之间的缝隙也能精准抠到。 这样一来,就避免了使用人像模式拍照时人物与虚化背景割裂的情况,让人物照片的纵深感更加逼真。 四舍五入一下,这不就是手握单反拍照?(手动狗头) Alpha遮罩+监督学习 在介绍最新的方法之前,先来了解一下过去手机的人像模式拍照到底是怎么实现的。 传统方法是使
量子位
2022/03/04
6900
工程算法一体化平台架构实践
自2017年下半年,参与一些视觉算法应用尝试和落地的项目,到目前为止已经陆续有一些落地项目及应用,包括AI抠图软件么么照、服装搭配算法、AI互动营销三个方向。AI抠图软件么么照是一款高精度全自动抠图P图类工具,么么照以人像抠图为核心,可实时更换背景/贴纸,并支持全身效果合成,由来自京东硅谷研发中心的团队提供了领先的AI及AR技术,可创造出内容更加丰富的创意表达,极低的学习门槛可轻松上手进行创作。服装搭配算法目前已经在线下智能硬件Mirror+产品上落地,并与商城中台合作,会在商品详情页落地,实现以搭代购,提升购买的连带率。而AI互动营销方面,则通过抠图、换脸、人脸性别年龄等AI技术实现一些好玩的玩法提供给商城业务端进行一些营销活动玩法,另外也实现了自动化证件照、美颜&滤镜等一些视觉算法并应用到商城业务中。
京东技术
2019/05/05
3.4K0
工程算法一体化平台架构实践
硬核佩奇和圣诞鳌拜,没有抠图AI能同时闯过这两关
随着AI技术的发展,抠图业也步入了新的竞争格局中,老牌巨头、新兴APP、开源项目、论文实现齐上阵,要把头发丝都抠出来。
量子位
2019/04/24
8480
硬核佩奇和圣诞鳌拜,没有抠图AI能同时闯过这两关
超强实时人像抠图算法开源,随心所欲背景替换!
谈到人像抠图想必大家都不陌生。在影视剪辑、直播娱乐、线上教学、视频会议等场景中都有人像分割的身影,它可以帮助用户实时、精准地将人物和背景精准识别出来,实现更精细化的人物美颜、背景虚化替换、弹幕穿人等,进一步提升视觉应用体验。
CV君
2021/09/03
4.5K0
该卸载PhotoShop了!MIT用AI实现3分钟自动抠图,精细到头发丝
最近,MIT计算机科学与人工智能实验室(CSAIL)的研究人员开发了一种AI辅助的图像编辑工具,它可以自动抠图,替换任何图像的背景。
新智元
2018/09/25
8640
该卸载PhotoShop了!MIT用AI实现3分钟自动抠图,精细到头发丝
一键免费自动AI抠图,效果连PS大哥也点赞!
现在,抠图已经不再是专业设计师才会的技能,其应用的技术图像分割也不是一个新课题了,很早之前就有很多研究成果出现,按照是否使用深度学习的方法可分成传统方法(Blue Screen Matting、Poisson Matting、Bayes Matting、Closed form Matting 与 KNN Matting 等)和基于深度学习的方法(CNN、FCN 和 UNet)等,而深度学习方法的发展也大大提高了抠图的精度。
AI科技大本营
2019/03/08
2.3K0
工具 | 5 秒实现自动抠图?见过 remove.bg 这款神器
AI 科技评论按:是否为了简单的抠图功能,还在苦苦修炼 Photoshop 大法?即使修炼成功了,是否觉得在抠图这件事情上花费的时间依然太多?如今一个名叫 remove.bg 的工具可以免除你的这种烦恼,只要上传照片后点击确认,5 秒钟后即可获得一张透明无背景的主体照,而且在使用上完全免费。
AI科技评论
2018/12/29
2.1K0
工具 | 5 秒实现自动抠图?见过 remove.bg 这款神器
央视又双叒叕点赞京东黑科技:人工智能更懂你!
动动嘴就能买东西控制家电、“看到”心仪的家具在自己屋里的实际摆放情况、对着镜子就可以尝试究竟哪种口红最适合自己、哪些手袋和鞋更配自己刚刚挑选的衣服……这些未来感十足的消费体验背后,是京东叮咚Play、
京东技术
2018/06/20
9620
SOTA级发丝抠图模型PP-Matting重磅开源,支持多场景精细化分割!
你还在用P.S.等商业软件,滑着鼠标,一点点勾勒图像边缘完成抠图嘛?有些大神可能会说:我可以用蒙板、通道等等高端操作实现超快抠图!但如果能有一个软件可以实现智能全自动抠图,完美保留发丝、树叶等精细边缘,还完全免费,甚至代码全部开源——它不香嘛?
用户1386409
2022/08/31
8760
PS官方做了「PS相机」App,这是我见过特效最多的手机修图软件
当年啊,Photoshop,明明是一款专业的设计软件,却承担着帮网友P照片的重任。
量子位
2020/06/16
7580
【新玩法】互联网人五一出行指南!
以往想要达到足不出户就与各地美景合影留念的目的,只能用传统的软件P图,耗时耗力不说,效果也是因个人技术而定,很难掌握。人像分割技术能够帮你轻松解决以上问题。
腾讯云AI
2020/04/30
1.5K0
【新玩法】互联网人五一出行指南!
混元语音数字人模型,开源!
这一能力来自5月28日腾讯混元发布并开源的语音数字人模型HunyuanVideo-Avatar,由腾讯混元视频大模型(HunyuanVideo)及腾讯音乐天琴实验室MuseV技术联合研发,支持头肩、半身与全身景别,以及多风格、多物种与双人场景,面向视频创作者提供高一致性、高动态性的视频生成能力。
腾讯开源
2025/06/10
2020
混元语音数字人模型,开源!
推荐阅读
【AI产品】深扒美图秀秀中掳获万千少女芳心的“AI秘籍”
7470
就离谱!这么强悍发丝级超精细抠图算法开源了!
2.5K0
谷歌最新抠图算法:让背景虚化细节到头发丝!有单反的感觉了...
1K0
一毛抠图特效不忍直视,以假乱真才是设计界的最高追求!
1.6K0
人人皆可变身黄金圣斗士:微视用AI一键燃烧小宇宙,还有不同星座可选
6130
CVPR 2025|视频抠图MatAnyone来了,一次指定全程追踪,发丝级还原
4970
完美抠图王冰冰!字节实习生开发的AI,实现4K60帧视频实时抠图,连头发丝都根根分明
7900
刷新纪录,揭秘漫画脸背后的AI技术
8620
谷歌又买算法送手机了,最新方法让背景虚化细节到头发丝,真有单反的感觉了
6900
工程算法一体化平台架构实践
3.4K0
硬核佩奇和圣诞鳌拜,没有抠图AI能同时闯过这两关
8480
超强实时人像抠图算法开源,随心所欲背景替换!
4.5K0
该卸载PhotoShop了!MIT用AI实现3分钟自动抠图,精细到头发丝
8640
一键免费自动AI抠图,效果连PS大哥也点赞!
2.3K0
工具 | 5 秒实现自动抠图?见过 remove.bg 这款神器
2.1K0
央视又双叒叕点赞京东黑科技:人工智能更懂你!
9620
SOTA级发丝抠图模型PP-Matting重磅开源,支持多场景精细化分割!
8760
PS官方做了「PS相机」App,这是我见过特效最多的手机修图软件
7580
【新玩法】互联网人五一出行指南!
1.5K0
混元语音数字人模型,开源!
2020
相关推荐
【AI产品】深扒美图秀秀中掳获万千少女芳心的“AI秘籍”
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档