0
（星广互动AR广告视频）
不少人看直播都喜欢给主播送个游艇、钻戒来博主播一笑，跟主播互动。
而现在，除了送礼，正如视频中所展示的，主播们还会时不时萌萌哒地利用AR技术做广告了。
这是AR营销公司星广互动发布的AR广告。据雷锋网了解，星广互动此前刚发布全球首家智能AR广告平台，提供基于AI技术的AR视频广告技术解决方案，期望打造UGC视频时代全新的广告形式及业务模式。
星广互动引起雷锋网注意的关键点在于，它是专注于计算机视觉和深度学习的AI领军企业商汤科技旗下公司。商汤科技为星广互动提供AI、AR以及大数据的相关技术支持。
雷锋网特意来到商汤科技位于清华科技园的办公室体验了他们的AR广告产品，对商汤科技CEO兼星广互动CEO徐立博士进行了深度采访。徐立详细解答了商汤科技为何要成立这样一家广告营销公司、商汤科技与星广互动将如何打造智能AR广告平台等问题。
（商汤科技&星广互动CEO 徐立）
星广互动工作人员首先让雷锋网编辑体验了直播中的AR广告demo。在直播时，主播做出相应的动作和手势，就能触发AR广告，这些动作包括张嘴、眨眼、挥手、比心、大拇指比赞等。雷锋网现场体验了大拇指比赞、伸出手掌等动作，都出现了对应的广告，软件反应速度很快，识别率高。
（图片为星广互动开发的技术演示视频截取）
这个直播AR广告用到的技术是商汤科技的面部手势识别技术，有很高的互动性，依靠主播的行为实时触发广告，这样的广告形式可以说是前所未有。
（图片为星广互动开发的技术演示视频截取）
直播场景里还有一个AR广告形式是以前背景分割技术来更换直播背景，能做到无需绿幕实时更换。同样是主播做出相应的手势，就能出现AR广告，并且替换掉背景，打造有环境感的背景广告。
以上两个技术主要是用在直播上面，在直播时用户也可以通过选择已经定制好的服装、表情、道具直接替主播穿戴，提升与主播的互动。同时，背景分割和手势交互AR广告也可以用在秒拍这样的短视频录制App上。
在今年，其实我们已经看到了很多AR用在美颜相机和短视频录制中的例子。国外社交公司snapchat在AR拍照上有很成功的尝试，iPhone X更是推出了一套原深度摄像头和神经网络算法来支持AR拍照。但是AR用在互动广告上却是很少。一般的AR特效只是识别人脸，但是商汤科技增加了手势识别和SLAM技术，这两项技术商汤目前都是行业领先。
据介绍，目前市面上大部分以人脸识别和AR技术实现的美颜美拍相机都是由商汤科技提供的技术，包括Face U、小咖秀、一直播、花椒、秒拍等。在为拥有秒拍、小咖秀和一直播的一下科技提供AR服务的过程中，商汤科技团队萌生出了要做互动AR广告的想法。徐立告诉雷锋网：“我们团队在一年多前就有了做AR广告的想法，现在市面上没有AR广告，只有后期编辑的特效效果。”
商汤科技、星广互动和一下科技便达成了在直播AR广告上的合作，前期共同探索多种基于直播的互动AR广告模式。除了上面介绍的实现方式以外，他们还有一套广告发布的机制：星广互动的AR广告平台会定制一系列AR广告任务，显示在直播软件界面的底部。主播领取AR广告任务，然后在规定的时间段以手势触发了广告之后，就可以获得该广告的费用。这样一来，算是为内容生产者提供了一种新的盈利模式。
除了直播的AR互动广告以外，星广互动也对视频的广告模式进行了革新。传统的视频广告大家都很熟悉，有视频播放前的贴片广告、视频暂停时的弹窗广告、视频播放过程中植入的贴片广告还有近来较火的创意小剧场广告。
徐立告诉雷锋网：“AI驱动的AR技术的价值在于在视频流里面（直播或者UGC视频）产生一些不一样的位置。”“我们有一句口号是视频会思考，广告更好看”。
商汤科技和星广互动以SLAM（即时定位与地图构建技术）来对视频内容进行深度理解，可以对各类视频场景的三维结构进行定位和重建，在视频中的桌面、地面、墙面等加入虚拟物品的AR效果。也就是说，已经录制好的短视频也能以AI技术后期添加广告。
（图片为星广互动开发的技术演示视频截取）
在这个例子中，软件识别到视频中有厨房、桌面就直接安放了一盒牛奶，由于物品经过三维建模，且根据视频场景放置，观众很难区分这个广告物品是拍摄时就有的还是后期加上去的。
星广互动这种广告位可以说是“无中生有”，徐立介绍到：“我们不是简单地出现一张贴片，而是用互动的形式来做广告，形成了新的广告位。”这种广告位不是漂浮在视频之上的，而是真正的融合到视频里了。
这种融合还特别节省人力成本。目前内容营销、原生广告正火，现在的大的影视剧、IP剧都有大量的植入广告，这些都是在视频制作的前期依靠人力来对剧本进行分析，联系广告合作商来进行创意策划。而徐立观察到目前互联网上UGC视频已经形成了一个长尾，这个长尾形成了巨大的市场和平台却没有公司能够有精力去变现。
徐立说到，“现在都是依靠人力去分析内容情节找买广告的买点。问题是我们现在处理的是大流量，是这么多的直播和UGC的视频，不是的单个的大IP剧，大电影。比如说快手上跳冰箱的视频，我就可以通过AI去理解到这个视频内容中有冰箱，利用SLAM技术把冰箱相关的广告放进去。”
以AI技术出发，星广互动要针对的领域是长尾的UGC视频领域，这些视频数量庞大，无法靠人力去精细化处理。以AI技术，他们能像投放贴片广告一样把AR广告投放在视频中，挖掘了新的广告模式和投放方式。
商汤这样一个百亿级别的AI公司，即使跨入广告营销领域，这也是其业务的九牛一毛。徐立说他们看上的是视频内容的平台价值和流量价值。“我们团队相信未来的视频一定是入口流量，现在搜索广告挣钱，以后的视频搜索会越来越多，那么对视频内容的理解能力就至关重要。”
2017年7月11日，商汤科技完成4.1亿美元的B轮融资，创下全球人工智能单轮融资最高纪录，商汤科技也成为全球融资额最高的人工智能独角兽企业。在商汤科技的办公室，雷锋网编辑体验了他们的人脸识别考勤系统、人脸识别迎宾签到系统、人体姿势动态实时追踪、人机交互广告机（可检测出消费者的年龄、性别、魅力值等）。商汤科技能在两年时间快速成长为大体量的AI企业，也在于他们一直寻求技术落地。
成立星广互动，创造智能AR广告平台是他们技术落地的一个方向，但垂直领域也有其门槛，更关键的问题在于他们如何从零开始打造一个智能AR广告平台。
新的技术必然会需要一个市场试验、反馈和调整的过程。星广互动目前与一下科技合作建立了深度合作关系。徐立告诉雷锋网，“早期你得有一个种子选手陪你一起把这个产品打磨，我们需要合作方来跟我们进行共同的探索。我首先在一些平台上证明我能带来收入增长，然后就会有大平台接入。”
当然，徐立也谈到，AR广告能否普及更多还是要看消费者是否喜欢这个广告模式，是否买账。还要看在具体的案例中AR广告的使用是否恰当。雷锋网了解到，他们的短视频中的AR广告植入可以依靠DSP程序化广告投放平台。徐立介绍到：“为了达到大流量效果，可以利用现有的DSP来做，每一个主播都有背景墙，我们的技术可以把所有的背景直接替换，这个AR广告位就可以放在DSP平台上去卖。这就很简单，并且程式化。”
星广互动目前有二十余人，大部分是技术人员。徐立出任星广互动的CEO也是出于公司早期发展的考虑。他告诉雷锋网，“目前来说星广互动的业务就是我自己在抓的，但是未来我觉得从公司成长角度来说，我们一定也会组建一个更好的领导班子，更懂广告，更懂产业的来做这件事。至于现在我现在主抓这个事情是因为星广互动是技术驱动，因为它是一个全新的模式，如何让背后技术达到红线，是这件事情的差异化点。”
新的技术对于广告营销有巨大的变革，而这些变革对传统的广告营销公司造成了巨大的挑战，传统4A公司也都在寻求互联网和新媒介技术的转型。星广互动要搭建这样一个全新的智能AR广告平台必然也会与传统广告营销公司、新型技术营销公司相竞争。
徐立告诉雷锋网：“核心差别在于对技术的把握能力。首先如果不是前期深入做深度学习、人工智能的企业，没有技术积淀的公司，在短时间之内追赶我们是不太可能的事情，除非找我们采购技术。第二个门槛在于大数据积累。背景分割这样一个简单应用，背后都是一个非常大量的数据的迭代的过程。我们大概花了近三年的时间搭完了这个底层框架，而且都是这个行业里面最顶尖的那批博士生完成的。这也是为什么商汤有这样的一个价值点。如果说别人要去做这个事情，他甚至要花超过三年的时间搭这个框架，才能够把原来的模块转化成纯数据的模块。这只是第一步，那第二步更关键的是说即使是这件事情可靠，效果做好了，你还得要形成一个适配各种手机端的方案，做手机加速。商汤这部分有一个专属团队，有60多人的HPC团队，整体把这部分的能力转化成一个所谓的手机能跑的方案，任何型号的手机，直播是一直开着的，但你不能让它烫手，所以对功耗的要求非常高。第三点是，就算这两部分做好了，你想做广告平台概念，需要背后搭一套业务系统，就需要一个流量方跟你长期配合来完成一个种子业务系统，这个是很难的。因为你要把这个流量流程打通，并且拥有大数据积累和处理能力。”
雷锋网编辑学习传播、广告营销多年，深刻感受到技术对传播方式和营销方式的变革。互联网时代，传统的4P、4C的营销模式式微，精准和实效的网络广告成为商家的选择。Google、百度、今日头条这些互联网企业取代4A国际广告公司成为最大的广告机构。以信息流模式重述移动互联网阅读方式的今日头条也是依靠广告赚得盆满钵满。
显然，目前AI和AR带来的新一轮的变革已经扑面而来。网络营销已经迈步到了智能营销，从精准的广告投放延伸为智能的理解沟通。这也是星广互动的AR广告带给雷锋网编辑的感受。
正如北京大学新闻与传播学院陈刚教授谈及的，目前是一个数据化和智能化的数字社会，广告营销的变革在于CMP（内容管理平台）、PCP（程序化创意）、DMP（数据管理平台）的发展。如何通过智能化的内容管理生产规模化、高质量的内容、企业如何找到有沟通能力的内容是智能营销的关键。
星广互动的智能AR广告平台创造了新的交互方式、以AI重新理解视频内容、以大数据管理内容，或许会激活内容的生产，同时AR在广告营销的应用也会促进AR行业的发展。
大众对于AR的认识或许还停留在PokemanGo, 但是2017年，随着苹果ARKit、谷歌ARCore、阿里AR开放平台，腾讯QAR等AR平台的发布，手机AR的应用正如火如荼的开展。淘宝搭建了AR buy+平台，京东也推出AR购物频道，推广AR试妆、AR实景展示。AR正迅速地改变整个广告营销领域，这也是AR黑科技最接近大众的垂直应用。
当然，智能AR广告平台还处于探索阶段，用户接受度、广告效果、技术是否真的能提升效率还有待考证。雷锋网将会继续关注。
4月19日 20:30-21:30 ，雷锋网旗下学术频道 AI 科技评论联合AI慕课学院、腾讯课堂邀请商汤科技联合创始人陈宇恒为大家带来一场直播分享！点击链接报名参与吧！！
课程主题：《人工智能的系统工程与系统工程中的人工智能应用》
报名链接：https://ke.qq.com/huodong/aiqzzty_pc/index.html#tuin=8f7939df
相关文章：
专访商汤科技徐立：那些说AI竞争技术同质化的人 其实不了解行业现状
从 20 篇ICCV 2017录用论文，看商汤科技四大攻坚领域｜ICCV 2017
雷峰网原创文章，未经授权禁止转载。详情见转载须知。
