大数据平台架构

眼下自动驾驶尚未进入大规模发展时期，一直被称为“自动驾驶的机器语言”的高精度地图也面临着商业模式不够清晰的痛点。尽管如此，还是有越来越多的地图制造商瞄准了中国的自动驾驶市场，今年2月份与国内图商四维图新成立合资公司的HERE也是其中之一。HERE前身NAVTEQ成立于1985年，曾与宝马一起发布了全球第一个车载导航电子

 摘要：分析了与国家民生和安全密切相关的特定领域的大数据发展现状，介绍了大数据标准研究的相关工作。研究了特定领域大数据的特点和现实需求，给出了适合这些领域大数据建设的参考架构，结合大数据主流技术和基础平台，详细分析了特定领域大数据参考架构的不同部件。考虑大数据未来技术发展，梳理了面向特定领域大数据标准体系发展脉络，提出

作者：黄波随着人工神经网络算法的成熟、GPU计算能力的提升，深度学习在众多领域都取得了重大突破。本文介绍了微博引入深度学习和搭建深度学习平台的经验，特别是机器学习工作流、控制中心、深度学习模型训练集群、模型在线预测服务等核心部分的设计、架构经验。微博深度学习平台极大地提升了深度学习开发效率和业务迭代速度，提高了深度学习

作者：Yanjun基于PB级海量数据实现数据服务平台，需要从各个不同的角度去权衡，主要包括实践背景、技术选型、架构设计，我们基于这三个方面进行了架构实践，下面分别从这三个方面进行详细分析讨论：实践背景该数据服务平台架构设计之初，实践的背景可以从三个维度来进行说明：当前现状、业务需求、架构需求，分别如下所示：当前现状收集

作者：卢荣斌美图拥有十亿级用户，每天有数千万用户在使用美图的各个产品，从而积累了大量的用户数据。随着 APP 的不断迭代与用户的快速膨胀，产品、运营、市场等越来越依赖于数据来优化产品功能、跟踪运营效果，分析用户行为等，随之而来的有越来越多的数据统计、分析等需求。那么如何应对和满足不断膨胀的数据统计与分析需求?业务的不断

作者：陈迪豪定义云深度学习平台什么是云深度学习？随着机器学习的发展，单机运行的机器学习任务存在缺少资源隔离、无法动态伸缩等问题，因此要用到基于云计算的基础架构服务。云机器学习平台并不是一个全新的概念，Google、微软、亚马逊等都有相应的服务，这里列举几个比较典型的例子。定义云深度学习平台什么是云深度学习？随着机器学习

随着大数据越来越被重视，数据采集的挑战变的尤为突出。今天为大家介绍几款数据采集平台：Apache Flume Fluentd Logstash Chukwa Scribe Splunk Forwarder大数据平台与数据采集任何完整的大数据平台，一般包括以下的几个过程：数据采集–>数据存储–>数据处理–&g

近日，京东发布登月机器学习平台，并在京东云上线，正式对外提供人工智能服务。登月机器学习平台的上线代表着京东人工智能技术从应用级服务到基础算法的全面对外开放，实践着京东RaaS（零售即服务）的发展策略。今天我们邀请了AI与大数据部的工程师为大家深度解密京东登月平台基础架构。从2016年9月开始，京东AI基础平台部基于Ku

作者：张逸一、大数据平台 大数据在工作中的应用有三种： 与业务相关，比如用户画像、风险控制等； 与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范畴；与工程相关，如何实施、如何实现、解决什么业务问题，这是数据工程师的工作。数据工程师在业务和数据科学家之间搭建起实践的桥梁。本

作者：傅一平当前BAT基本公开了其大数据平台架构，从网上也能查询到一些资料，关于大数据平台的各类技术介绍也不少，但在那个机制、那个环境、那个人才、那个薪酬体系下，对于传统企业，可借鉴的东西也是有限的。技术最终为业务服务，没必要一定要追求先进性，各个企业应根据自己的实际情况去选择自己的技术路径。与传统的更多从技术的角度来