星巴克AR技术小窥

Starbucks Roastery智慧门店AR项目是阿里巴巴和星巴克合作的一个重大的新零售探索项目。Starbucks Roastery店是星巴克在上海开设的一家两万平方米的大型咖啡文化休闲中心,经过双方地不懈努力,在店内利用AI、AR等技术实现了在线点餐、店内探索等功能。A.I. Labs 六次元团队提供了核心的算法引擎。

2017年12月5日星巴克开业剪彩时,阿里巴巴集团董事局主席马云,星巴克总裁霍华德·舒尔茨亲自体验了A.I. Labs AR 技术,赞扬了通过AR这种新互动形式打造技术与文化结合的好想法。可以说,AR技术成功地连接了线上与线下应用场景,实现了人、场和物的感知和互动,达到了技术整合对外赋能的目的,有效支撑了阿里巴巴新零售战略。

AI、AR这些新兴技术应用于原有大型的新零售领域,无论技术还是业务上都是大胆的尝试和突破。A.I. Labs自研了多种数据采集、标注、筛选、增强和评估工具,建立了从场景采集、标注、训练、预测和测试的一整套完整的图像识别平台,灵活地与第三方素材管理系统对接。其中利用自动化标注工具已申请国家发明专利,大大节省和加快了数据标注的流程,为后续推广类似星巴克这样的商业模式打下了坚实的基础。

星巴克场景大,识别种类多,光线环境复杂,例如大铜罐2米多高,识别角度近360度;冰粹(Cold brew)管和法压壶等器皿是透明的;虹吸管(Siphon)点火后不同的颜色变化,为此我们创造了多种增强方式来扩展训练数据样本提升识别准确率。由于采用深度学习方案,在识别数量增多的情况下,不会带来在线计算量的巨大变化,我们进行了MKL、XLA和JIT编译优化,减少RT时间,保证识别速度。离线训练时间会有所增加,GPU分布式训练策略会削弱带来的影响。环境变化对识别影响很大,我们通过多种对原始数据我们进行了旋转、尺度、对比度和颜色变换等多种手段进行数据预处理,提高识别的鲁棒性。在物体观察角度多和光线变化复杂的情况下,准确率在误识率为0.02%情况下达到97.3%以上,大铜罐的识别准确率达到98%以上。

A.I. Labs AR采用了端云结合的策略,终端算法执行速度快、模型轻、引擎小;云端算法高准确性,与客户端算法深度融合,结合高速传输策略,不仅提升了识别速度,而且保证了如此般柔滑的用户体验。为扶持生态,阿里方面表示,准备免费提供手机客户端采集工具以及自动化训练和精准识别服务,让这种创新的商业模式可复制,使得更多的商家和用户能够参与到AR平台的建设中。

时间: 2024-10-24 12:19:45

星巴克AR技术小窥的相关文章

阿里巴巴与星巴克合作 AR场景识别首次大规模商用

 12月5日上午消息,星巴克与阿里巴巴打造的星巴克臻选上海烘焙工坊亮相.从技术层面看,这是AR大型场景识别技术首次大规模商业应用. 阿里巴巴表示,建筑面积2700平米的上海烘焙工坊被认为是星巴克46年历史上最大的品牌投资和创新实践.消费者可以通过AR技术看到星巴克"从一颗咖啡生豆到一杯香醇咖啡"的故事,也可唤起"隐藏"的在线菜单查询功能,并通过AR技术直观了解咖啡吧台.冲煮器具等细节.消费者打卡指定工坊景点,即可获得虚拟徽章,并解锁工坊定制款拍照工具,体验成为星级咖

当“星爸爸”遇到“马爸爸” 阿里的AR技术售卖咖啡文化

从一颗咖啡生豆到一杯星巴克的香醇咖啡,需要经历哪几步? 在今天开业的星巴克上海烘焙工坊中,顾客打开手机淘宝"扫一扫"功能,便可观看到星巴克咖啡烘焙.生产及煮制的全过程,同时通过 AR 技术还能直观感受到 2 万平米里工坊中的每处细节. 在今天开业的星巴克上海烘焙工坊中,顾客打开手机淘宝"扫一扫"功能,便可观看到星巴克咖啡烘焙.生产及煮制的全过程,同时通过 AR 技术还能直观感受到 2 万平米里工坊中的每处细节. 星巴克表示希望通过 AR 这种新互动形式,让年轻人重新

星巴克正尝试运用网络技术让自己数字化

作为一家一手交钱,一手给你一杯咖啡的连锁餐饮公司,星巴克正尝试运用网络技术让自己数字化. 今年7月,星巴克的CEO霍华德·舒尔茨在美国西雅图的星巴克总部接待了来自硅谷的移动支付应用Square创始人杰克·多西.杰克·多西也是Twitter的联合创始人,他的产品围绕着移动支付领域,有刷卡器.支付应用和移动支付方案. 这是一次传统餐饮业与新兴移动互联网科技行业的碰面.杰克·多西此行目的是希望与星巴克进行合作,将伴随智能手机而兴起的Square带入星巴克在美国的6800家连锁门店中,让这家卖咖啡的公司

星巴克全球之最!和阿里一起为未来零售搞事情

作为中国潮流消费文化最前沿的上海,本周又多了一个新地标.12月5日,位于南京西路兴业太古汇的星巴克臻选上海烘焙工坊(下文简称上海烘焙工坊)正式亮相.这是它在海外的第一家.也是亚洲目前唯一一家烘培工坊,占地面积2700平方米,几乎是2014年在西雅图诞生的首个烘焙工坊店的两倍,主题吧台有五个之多. 上海的巨型"咖啡梦工厂"被视为星巴克46年历史上最大的品牌投资和创新实践,也是全球最大的星巴克智慧门店.通过携手阿里巴巴人工智能实验室(以下简称阿里AI Labs),这家全球最大的新零售智慧门

马云现身星巴克会老友,带火下一代零售店

刚刚入夜,上海南京西路兴业太古汇附近的星巴克臻选上海烘焙工坊已门庭若市,一场盛大的开幕典礼即将举行.出席的嘉宾,不仅有从美国赶过来的星巴克董事会主席霍华德·舒尔茨.星巴克全球高管团队,还有刚刚从乌镇世界互联网大会赶过来的阿里巴巴集团董事局主席马云. "这是全世界绝无仅有的零售体验," 舒尔茨在今晚的开幕晚会上表示,"我们要创造的不仅是咖啡产业内的东西,更是重塑咖啡零售的极致体验.星巴克最想做的是超越消费者的期待,带他们踏上一段神奇的咖啡之旅,就像过去几周人人都在说的那样,要创

支付宝/微信/Apple Pay 下次去星巴克你会用哪个?

本文讲的是支付宝/微信/Apple Pay 下次去星巴克你会用哪个,今日,支付宝官方微博表示,中国大陆2800多家星巴克门店,从今天起都可以支付宝了.此外,澳门地区.马来西亚.日本成田关西冲绳机场的门店也都可以. 据悉:10月15日前,用支付宝在大陆星巴克消费满50送5元礼券! 记得2016年去底,星巴克与腾讯达成合作,大陆地区的门店全面支持微信支付.时至今日,星巴克终于完成了对国内两大移动支付巨头的支持,对用户而言,消费会更方面了. "没有现金,不能用手机支付就不买了." 这是我们日

软件可扩展性:来自星巴克的经验

[编者按]本文作者 Weronika Łabaj 是Particular Software的开发人员.她专注于通过软件提供业务价值,探索新模式,应对挑战.在星巴克,她总是点中杯焦糖玛奇朵. 文章系国内 ITOM 管理平台 OneAPM 编译呈现,以下为正文: 星巴克通过扩展运营机制和劳动力,避免了较长的顾客等待时间.无独有偶,开发人员也可以这样做! 2004年,Gregor Hohpe发表了一篇很棒的文章--"Starbucks Does Not Use Two-Phase Commit.(星巴

美国餐饮企业社交化排行榜Top 10:星巴克居首

互联网作为一种先进的生产力,自20世纪http://www.aliyun.com/zixun/aggregation/16333.html">90年代兴起以来迅速地改变着越来越多的传统行业.餐饮行业与普通消费者的日常生活息息相关,近年来也加快了和互联网结合速度.品途咨询整体国外数据时发现,随着网络社交化时代的到来,部分美国餐饮企业通过积极参与,已经率先在社交媒体及社交网络上建立起了自己的品牌优势.美国餐饮新闻网(NRN)以美国主流的三大社交媒体及社交网络(Facebook,Twitter和

星巴克:大数据是零售业发展契机

       科技决定企业高度 现代社会,成功的企业都离不开高科技.例如星巴克,是领先的零售餐饮品牌,同时又非常重视ICT.根据星巴克官网的数据,目前,星巴克在大陆60多个城市运营超过1001家门店.中国已然是星巴克的"第二本土市场",到2015年,星巴克计划在中国大陆运营1,500家门店.专业人士都明白:要实现如此规模的门店标准化产品和服务,并非仅仅依靠人力和决心就可以达成.餐饮连锁企业的品牌扩张,离不开专业.安全.可靠的ICT解决方案.越来越多的企业已经意识到ICT的重要作用.仅以