阿里云首推免费人脸识别SDK 让每个APP轻松拥有短视频AR特效

早在今年五月,阿里云已经推出了短视频解决方案。近日,阿里云再次率先颠覆行业,在业内首推免费的人脸识别SDK,结合其原有的短视频能力,大大降低了人脸识别+AR特效+短视频的入行门槛。

你所知道的人脸识别行业

提到人脸识别,大家会联想到商业支付、身份识别、广告投放、人机交互、系统公安等等众多生活场景。虽然这项技术的研究始于20世纪60年代,但是在近年这个课题才愈发活跃。以日常生活中比较常见的场景——社交互动为例,通过人脸识别、AR特效、动图元素的支持,可以帮助用户打破社交壁垒,更立体化、个性化、趣味化的表达自我和分享生活点滴。

市面上已经有的人脸识别SDK多数费用高昂,动辄几十万,而某些厂商号称免费,其实也是基于网络API的调用,并不适合在移动端录制短视频时使用,也就无法应用在社交场景之中。这让很多想在APP中添加短视频AR特效的团队望尘莫及。

阿里云联合手淘 推出人脸识别免费SDK

阿里云通过整合集团资源,将手淘团队自研的人脸识别SDK和阿里云短视频SDK深度融合,真正做到了不依赖于网络API的实时检测、识别、跟踪。

目前,官网上的专业版短视频SDK已经拥有了手淘自研的人脸识别功能,实现了人脸识别+AR动态贴纸的完整体验,结合原有的短视频采集、导入裁剪、编辑、合成、极速上传、媒资管理、视频转码、分发加速、播放等全链路能力,阿里云可以为创业者们提供一站式解决方案,让每个APP轻松实现短视频AR新玩法。

关键技术介绍及算法性能测速

我们来看看具体的应用场景和技术是怎样的,用户在客户端进入拍摄画面后,可以自行选择搭配动态贴纸等个性化素材,实现AR特效,使短视频打造出科幻、卖萌、恶搞等不同的效果。其中主要涉及到的是人脸检测、关键点定位、追踪等核心技术。

第一, 人脸的检测是用于定位视频中的人脸,同时检测多张人脸和处理多角度、部分遮挡人脸等复杂情况也在这一步妥善处理,从而快速、准确的找到人脸。

第二, 人脸的关键点定位,则是用于已知人脸所在位置的基础上,自动标注人脸的轮廓、五官位置,比如眼睛、鼻子、嘴巴、眉毛、耳朵等关键位置。阿里云提供人脸识别关键点个数多达68个,可以更准确的追踪五官,保证用户的体验。

第三, AR特效美化,根据已知的关键点位置,搭配上用户所选的动态贴纸,并根据捕捉不同的面部动作来变换AR特效,达到真实互动。

第四, 人脸追踪,视频是动态而非静止的,当用户脸部移动、转动时,阿里云SDK可以实现对关键点的追踪,可识别姿态范围为yaw±60°,pitch±45°,roll±45°,精准的捕捉动作,持续追踪动态贴纸和AR特效。

阿里云人脸识别SDK具有准确度高的特性,通过68个关键点检测和以上技术,实现平均错误率低于 5%,出现“对不上”这种尴尬场面的概率极低。据悉,阿里云未来也会推出商业版人脸识别的高级功能,满足更高级客户的需求。

在性能方面,阿里云人脸识别算法和其它厂商算法在测速上的区别如下:

注:以上测试480p的最小人脸尺寸为4848(px);720p的最小人脸尺寸为7272

从上表可以看出,本人脸识别算法在同样机型、同等测试对象的条件下,测速表现大幅优于业内友商。经过阿里云集团手淘亿级日活跃用户产品的考验,性能方面毋庸置疑。由于该算法也应用于手淘相关业务之中,所以后续的迭代、维护都会有强有力的保障。

阿里云人脸识别SDK的免费开放,给短视频行业带来了无限的可能性。基于阿里云,创业者和用户们都有了更多新鲜的玩法,创新机遇随之而来,希望整个行业能产生更多元、更深入的探索。

扫码体验DEMO

时间: 2024-10-03 19:37:13

阿里云首推免费人脸识别SDK 让每个APP轻松拥有短视频AR特效的相关文章

阿里云首推音乐变速短视频SDK,上线抖音 freestyle只需1步

2016年可谓是短视频行业风生水起的一年,2017年更是呈现市场井喷的态势.短视频玩家从从秒拍.美拍到今年刚刚入局的土豆,竞争可谓激烈.值得关注的还有快手这匹短视频APP黑马,在它的引领下短视频服务被资本和市场普遍看好,据说快手至今已经覆盖4亿用户,日活达6000万之高.最近短视频圈多了一个后起之秀--抖音,这个画风奇绝动感酷炫的短视频APP上线不到半年就迅速走红,它主打的混音和变速玩法让年轻人欲罢不能. 短视频好像拥有一种魔力,可以无限激发用户的创作和表达欲望.这恰恰又是以内容为王的互联网服务

突破媒体转码效率壁垒 阿里云首推倍速转码

互联网时代,大量的高清视频不断产生,如何将内容快速地转码.发布到互联网上,已经成为了普遍需求. 阿里云的媒体转码服务是基于阿里云云计算服务构建,以经济.弹性和高可扩展的音视频转换方法,将多媒体数据转码成适合在PC.TV以及移动终端上播放的格式.使用阿里云媒体转服务,即可通过高速.稳定的并行转码系统,使转码任务规模无缝扩展,并实现各种格式的媒体流之间的快速转换.同时,业内独有的窄带高清和画质重生编码器,使转码质量明显优于行业水平. 近日,阿里云媒体转码再添利器,首推了倍速转码功能,转码效率得到进一

华栖云与阿里云首推“云上电视台”,可实现内容云端一站式制作

5月23日,在云栖大会·成都峰会上,华栖云联合阿里云发布"云上电视台"解决方案,面向电视台新媒体部门,面向视频PGC/UGC,在公共云上.一站式提供从直播.点播.短视频的生产.制作.发布到用户数据存留分析.精准推送.视频内容的生命周期管理等全套的解决方案.   "云上电视台"让互联网用户能够随时随地通过不同终端看到想看的视频内容,让电视台的新媒体部门低门槛快速起步,弹性扩展生产平台,投入和传播效果强关联,让资源更有效益.既可以支持专业机构制作更精良的视频内容,也可以

云计算为安全行业注入创新,阿里云首推信用换防御能力!

信用到底有何用?芝麻信用认为信用等于财富,阿里云安全品牌云盾认为,信用等于更强大的安全防御能力. 2016年初,阿里云率先在业界发起安全信誉联盟计划,基于用户安全信誉数据,动态提升用户DDoS攻击防御能力以及降低黑洞时长的安全防护计划,为用户带来更好的安全防护体验.目前,登陆阿里云云盾控制台网络安全基础防护页面即可申请加入,并查看自己的安全信誉分. 宇宙有黑洞,在互联网上也有.当黑客发起的流量攻击超过云上企业的安全防御阀值,服务器所有访问就会被屏蔽,即"黑洞".显然,"黑洞&

搜狗明医独家首推“湿疹痱子识别”功能;青岛将人脸识别应用于啤酒节安保,抓获逃犯25名

8月29日,中南大学湘雅二医院与腾讯公司在长沙签署框架合作协议,双方将本着深化"互联网+应用创新"的原则,在代谢.精神心理等疾病领域.智慧医疗及人工智能研发等方面进行深度合作,共同打造"智慧医院"新标杆. 中南大学湘雅二医院党委书记周智广教授与腾讯移动互联网事业群副总裁.互联网+合作事业部总经理陈广域代表双方签约. 始建于1958年的中南大学湘雅二医院,拥有两个国家临床医学研究中心,综合实力居全国前列,年门急诊量.出院病人等服务量居湖南之首.而腾讯公司在互联网技术应

使用阿里云邮件推送服务架设自己邮件验证与推送体系

提示:阅读本文需提前了解的相关知识 1.电子邮件协议(http://baike.baidu.com/view/2367542.htm) 2.阿里云邮件推送(https://www.aliyun.com/product/directmail) 3.EDM(电子邮件营销)(http://baike.baidu.com/subview/1212416/8602812.htm) 4.SendCloud邮件服务(http://sendcloud.sohu.com/) 阅读目录结构 引: 一.需求分析 二.

阿里云再推CDN价格战 洗牌期倒计时了?

本文讲的是阿里云再推CDN价格战 洗牌期倒计时了?[IT168 评论]CDN作为互联网的基础设施,过去给大家的印象都是不温不火,市场被网宿.蓝汛.帝联等传统厂商垄断.但随着视频直播的崛起,需求发生了新变化,以阿里云.腾讯云等互联网云服务厂商巨头为首相继在CDN上发力,持续的价格战更是打破了原有市场份额态势.尤其是近期,阿里云在深圳云栖大会上再次宣布降价的消息,CDN降价降幅最高可达35%,流量单价最低只需0.17元/GB.此外,阿里云宣布完成对优酷CDN及视频云业务和团队的整合.合并后的阿里云C

阿里云邮件推送服务

提起邮件服务,最早之前一般自建邮件服务器,需要硬软件和运维的支持,稳定性也难保证,随着云服务的普及邮件推送功能的服务化是趋势,也省钱省事省心. 最早开始用过搜狐邮件服务,阿里云生态现在基本都出现了,我们来尝试一下阿里云的邮件推送服务: 一.阿里云控制台操作 首先在阿里云邮件推送控制台添加域名,然后在自己的dns服务器中添加如下的解析(根据控制台中的"配置"): 一个主机名为aliyundm的TXT记录,用于验证域名所有权 一个主机名为空.值为v=spf1 include:spf1.dm

Laravel 下结合阿里云邮件推送服务

最近在学习laravel做项目开发,遇到注册用户推送邮件的问题,之前用java做的时候是自己代码写的,也就是用ECS推送邮件,但是现在转php的laravel了就打算用php的邮件发送功能来推送邮件,但是开发的过程中发现其实阿里云在2015年11月推出了邮件推送服务,所以打算使用阿里云的邮件推送服务,之前也使用过阿里云的OSS感觉也还不错不过是java的SDK,这个搞完了,后面也要实现OSS的上传文件服务功能,这个暂且放下吧. 在实际项目开发过程中我发现遇到好多问题,比如,aliyun邮件推送服