国美在线陈坤:基于云的电商大数据应用
3月26日,在由思路网主办,首都在线协办的思路汇(北京站)——《企业电商云应用案例分享》中,国美在线大数据负责人陈坤发表了题为《基于云的电商大数据应用》的公开演讲。
以下是演讲实录:
(温馨提示:本文为速记初审稿,保证现场嘉宾原意,未经删节,或存纰漏,敬请谅解。)
陈坤: 非常高兴有机会跟大家一起分享国美在线大数据的一些情况。国美在线大数据我也是最近才接手这个部门。大数据我以前也问过一些人对大数据是怎么理解的,有些人认为大数据就是出报表的,变成一个统计工具了。我认为大数据和之前最主要的区别是它现在有能力去计算你每一个人,甚至每一个行为。像之前因为我们计算资源也好,技术水平也好,可能我们做不到去计算每一个人,每一个细节,每个人在页面上做了什么东西,甚至鼠标移动到哪儿,之前是不可想象的。以前我们只能说对这个数据做一个抽样,大概一千万一百万里面有多少人是干什么的,这个人是做什么,我们做不到很精确。现在我们有了这种技术,有了这种资源,我们可以对每一个人的行为去做一个分析,同时这也对我们现在的资源提出了很高的要求。我们需要很多的硬盘把这些数据存起来,我们需要很多CPU来做计算和存储。这些东西云特别适合来做这个。国美在线现在因为云服务器的关系,有部分,像HADUP部署在国内云平台,当然核心的还没有在上面。接下来分享一下国美在线大数据主要应用在什么地方,主要是营销,运营,决策,当然最常见的是推荐跟广告。下面每个项目跟大家一起分享一下。
这个是现在国美在线大数据总体架构情况。现在主要分几块,一块是行为监测。现在用户在国美这儿任何一个购买行为,点击行为,浏览行为,基本上全部都会被记录下来,做一些用户行为的分析。下面我们会把这个东西放在清晰仓库里面变成一个内部的DMP,基本上就是把用户行为做归类,打一些标签,给用户做一些行为上的分析,大概会分析出他是男是女,孩子多大,家住在哪儿的情况。这些方面一方面出报表,另外更多的还是用于营销和广告方面。这一块主要是决策方面的一些东西。我们现在跟大家说一下这块,因为现在有些大的公司已经上市了,他之前老是打价格战,现在不太轻易敢打价格战了。所以国美在线有很多价格确实比一线电商低很多。我们全网价格都清楚看到国美比友商的价格低多少,可以很清楚的看见。
下面这个是我们做的自动化运营,这块我们是做的针对用户的一些行为,做了一些文本的分析。最后一块是做的存储实时数据库,这些东西最后用于干什么?主要还是价格的自动调整,风险管控和库存的优化。还有一些供应链优化。针对现在实时的分析,基本上现在库存的这些量,决策到底库存该进多少,现在我们大部分都是通过大数据的这些数据来提供的。下面这一块做的数据营销,这是类似于数据标签,在内部我们把用户分成等级,他做什么购买行为,我们对他做评级,这块是综合标签出来的,每个用户购买力是多少,下次他再到我们网站上具体给他推什么东西,推荐还是广告,会有一部分参考用户的评级。这是全网的推荐。推荐系统基本上可以说是现在大数据应用的一个最直接的地方。像亚马逊现在公认的是业内做的比较好的,号称他推荐带来的订单能够到达率是40%。我们现在的推荐,除了页面的推荐还有一些站外的功能,但是我们没有像亚马逊那样首页推荐基本上占特别特别多的比重,像淘宝现在首页首屏基本上也是推荐出来的东西。我们现在的推荐没有做的这么明显,首页有一个推荐位,他的转换率,我们内部做了一些比较,可能比京东或者说苏宁,应该说做的跟他们水平差不多。然后我们做了短信和EDM推荐,EDM我们现在也是做的根据用户行为,比如说一个用户最近买了一个单反相机,他买了相机马上给他推荐一个邮件告诉他这个相机怎么用,也不是推荐给他,就是告诉他单反相机怎么用。过几天我们推荐给他一个文章,这个单反相机需要滤镜,或者是单反相机要能够玩得更好还可能再需要购买一块电池。我们是引导用户怎么去玩,再给他推荐这个东西。然后站外也做了一些推荐,但是主要还是通过DSP的广告。后面我们会介绍。推荐的结果,可能国美的情况跟别的电商有不太一样,国美主要还是卖那种大家电。一般用户来说,他如果买这种大家电,像洗衣机和冰箱这种东西,其实他是不经常买的。他如果说又买了洗衣机,又买了冰箱,又买了电视又买了家装用品的话,极有可能他是新家装修,或者是搬家。如果她急匆匆买这些东西,我们基本上通过这个系统计算出来他大概确实需要什么,他可能真的是采购新的家装。
这个是一个推荐的结果,我们现在是把站内的一些行为放到了站外的推荐位推广告,现在还主要是通过广告的形式来做。这个是国美现在的决策报表,这个基本上都是一些比较传统的报表相关的东西。大数据现在做报表,可以说是它最基础的一个功能吧。这块是做数据分析的,因为我们现在主要还是在分析这个用户运营情况,还有流量。这块可能太细就主要还是内部的一些决策的一些报表,跟一些决策的实时的信息。我们现在在做的就是实时手机的项目,包括到门店,甚至到业务,都可以通过手机实时地来看到他现在这个门店,或者说他负责的这个品类销售情况,根据这个销售情况会直接在手机上显示会推荐他做一些什么样的调整。
这个是现在我们对用户打标签的一些行为。现在基本上推荐可以说基本上都是基于用户标签来做的。我们现在的标签大概有两三百种,现在用户行为的标签还在慢慢做一些扩张。这是国美将来要做的一个广告平台,因为这个大数据最终的应用我觉得落地一个是推荐跟广告,这两个应该说落地最直接的东西。因为现在从广告来看,淘宝大概90%多的收入是来自广告,国美也可以做这样一个广告平台。这个是国美广告平台的规划。这一块其实跟云的关系会更近一些。因为我们现在如果要对接这些AD EXCHANGE,这块的服务器要求非常高,这一块响应基本上0.1秒之内响应回去,以国美现在机房和服务器的配置很难达到,这一块将来我们要做的话还是要通过云的方式去做。这是我们目前国美的广告移动云,现在已经上线的部分。我们现在做的基本上都是精准广告。就是大家可以看到在新浪,或者在浏览新闻的时候很多都会弹出京东的广告,也会弹出淘宝的广告。我们现在也在做站外的资源,加上买的一些资源,加上国美自己的广告平台,我们根据用户浏览习惯给用户推的精准广告。品类页,专题页,搜索类,现在这块卖给商家。商家也不是传统买个位置就行了,现在是按照人群分发来分给商家。比如商家可以筛选最近到过我店铺的人,或者买过我东西的人,通过这个年龄段都可以选。我们通过这种经过数据分析的一个广告系统。这一块主要就是在广告方面的一些应用。
后面就没有太多了,因为今天的主题其实是云,我觉得就是国美的大数据跟云到底有什么关系呢?可能国美的情况跟别的电商还是不太一样,就是国美在服务器上面投入的资源还是比较紧张一些,所以现在国美大部分的服务有一些还是在云上面,特别是对这种用户响应要求比较高的一些服务。像类似这种广告,还有就是对用户的响应速度。像现在国美的用户搜集系统,实际上用户在网页上每一次点击也是挂在云上面。后续,国美当然会做自己的云,但是我觉得更多的可能还是跟黄总他们一样,我觉得也应该是做一个混合性的云,因为国美也没有像阿里云一样做自己的云系统,因为国美还没有那个必要。我的分享就到这里。