提供技术分析和应用解决方案,明略数据要成为中国大数据分析应用解决方案的独角兽
许多人可能对Uber、小米以及Airbnb并不陌生,但提起“Palantir”可能许多人脑中会闪现“Palantir”是个什么鬼?能吃么?它不能吃,只是一个提供数据分析和技术服务的公司,在进入公众的视线之前,它主要为政府部门服务。目前,它也成为继Uber、小米以及Airbnb之后,全球估值第四高的公司,估值达200亿美金,已成为美国大数据领域中的独角兽。明略数据想成为中国的“Palantir”。
据IDG预测,到2016年中国大数据和数据分析市场之和有70亿RMB的规模,CCW和前瞻研究院预计到2016年有100亿RMB的规模。尽管不同机构的预测结果有些差距,但是这都说明了中国数据市场是一片待挖掘的蓝海。在还未呈现红海之势前,明略数据杀了进来。
明略数据成立于2014年4月,是一家基于关系挖掘的大数据分析应用解决方案提供商,依靠提供关系挖掘技术赚取服务费用。主要解决大数据市场上的四大痛点:海量的数据无法得到充分的利用和变现;IT建设费用越来越大,创新的业务却难以开展;业务报表不够灵活,生成的数据指标不够完整;企业业务应用产生的海量数据、互联网相关数据、三方数据之间脱靶。
目前,明略数据已开发了100多个数据业务挖掘模型,50多个并行化数据挖掘算法,能够达到秒级处理TB级别的数据,小时内部署百节点规模的大数据集群,并且支持主流SQL,NoSQL和NewSQL数据库,秒级同步百万条记录和兼容多终端的快速数据可视化展示。并开发了四款主要的大数据产品。
四款大数据产品
“真正的大数据公司应聚焦在数据技术的探索和应用。怎样填充收集数据和运用数据的鸿沟,是每家公司都需要思考的问题。大数据的本质与核心是:关系挖掘。”明略数据的董事长吴明辉说。
明略数据董事长 吴明辉
为了全方位的挖掘大数据之间的相关信息,明略数据发布了4款大数据产品。
产品一:SCOPA
SCOPA产品主要帮助客户将海量和多样的数据转化为统一的存储模型,并计算和挖掘数据间的关联,集成关联挖掘、全文检索、时空分析等综合分析工具,配套可视化展示和交互方式。
“SCOPA不再是简单分析数据,而是让数据自己说话,专为情报而生。它的核心有应用层、计算层、数据层三部分来对应相应的处理。且它将数据归一、关系挖掘以及交互,结合在SCOPA中。其可以应用于刑侦调查、金融诈骗等大数据分析领域。”明略数据技术合伙人兼SCOPA产品经理任鑫琦说。
也即是说,SCOPA可以找出各个数据之间的关系(简言之“找关系”),最终用简单的模型进行呈现。
产品二:MDP
基于Apache Hadoop的Mininglamp Data Platform (MDP)不仅为用户提供海量数据存储和多种高性能计算框架,还提供了完整的安全保障体系。MDP拥有独立的账户管理体系,提供细粒度的数据和服务功能的权限控制,以及对用户行为的安全审计。MDP 通过数据脱敏等手段来保障数据交易的安全。用户可通过全图形化的界面管理和使用MDP。
简言之,MDP主要功能是“数据脱敏”和“数据保护”,也即是保障用户数据安全,防止泄露。
产品三:Discovery产品
Discovery(也即BI引擎及可视化展现)产品能帮助用户建立统一数据视图,让深度的数据探查成为可能:从交易细节到业务汇总,10TB数据细节不需要等待便可呈现。
举个例子:企业可借助Discovery产品来为自己的客户进行画像(消费者的行为习惯在大数据中被称为“客户‘画像’”),为客户打上标签,比如判断一个用户是否为优质客户。
产品四:DataInsight产品
DataInsight是一款企业级的大数据挖掘平台产品。明略数据应用大数据技术,帮助企业实现在海量数据上的数据挖掘,获取隐藏在大数据下的知识,为企业创造新的业务价值。它专注于企业大数据挖掘的全过程。通过提供一体化、并行化的高效数据挖掘工具和模型应用平台,帮助企业提高大数据挖掘落地速度,降低大数据挖掘落地成本。
简单来说,DataInsight产品主要功能是:挖掘数据,可应用于:用户画像、识别商圈(通过商户的经纬度以及商户的其他信息,识别出商圈)、异常情况报警(比如石油企业中的火灾报警)以及未来趋势预测(根据历史数据对未来数据进行预测,比如电影票房预测等)和反作弊(比如虚假交易、虚假流量等)等场景。
用人才打造技术壁垒
想要在大数据技术服务领域中杀出一条血路,必须得具备一个重要的条件:人才!
明略数据集聚了清华、北大、中科大、北邮、北航以及卡内基梅隆大学的计算机、数学和信息等方面的人才。平台上共有85名大数据工程师,包括数据挖掘团队和数据工程师团队,其中有18名是明略数据的技术合伙人。
“我们的技术团队在两年里面写了超过80万行的代码。我们整个系统在过去历年累计处理的数据到达了上百个TB数据量”吴明辉说。
吴明辉是北京大学计算机硕士,云计算和大数据领域的专家,国家级的互联网广告监测专家。拥有超过15年的软件开发经验和11年的软件开发管理经验,曾负责和指导过多个大项目的研发管理和项目实施,包括网络数据监测分析、精准营销大数据平台、大数据挖掘分析平台、企业级大数据平台项目等。服务于宝洁、通用汽车、中国联通、中国邮政等世界500强企业,涵盖金融、电商、电信、汽车、快消等多个行业,于2006年创办了秒针系统,2014年担任明略数据董事长。
目前,明略数据合作伙伴横跨政商领域,已与银联、中国邮政储蓄银行、国美电器、苏宁易购、CCTV、中国联通以及国家统计局等进行合,并为其提供了数据服务。
以与银联商务的合作为例,明略数据通过业务接入层、基础设施层、数据接入层、基础能力层、开放层和展现层,运用明略数据的BDP产品模块和定制开发系统结合银商现有系统,明略数据为可做到为数十种人群画像;对接300多个城市商户,划定商圈;对持卡人消费行为预测的准确率达80%。
关于融资情况相关负责人表示不方便透露。