分布式框架

5月21日，腾讯总裁刘炽平在“腾讯全球数字生态大会”上提出了数字经济正在经历的三大演化：从开放生态到生态开放，从互联网产业到产业互联网，从数字全球化到全球数字化。无论是“生态开放”，还是“产业互联网”、“全球数字化”，金融业一直走在变革前列。正如腾讯云总裁邱跃鹏所说，在产业互联网走在最前面的就是金融业。 现阶段

雷锋网 AI 科技评论消息，继去年 11 月开源面向高维稀疏数据场景的深度优化工具 X-Deep Learning （截至发稿，GitHub Star 数已达到 1972）之后，阿里妈妈团队于今日正式开源大规模分布式图表征学习框架 Euler，这一框架具有四大特点： 大规模图的分布式学习支持图分割

雷锋网 AI 研习社按，日前，DeepMind 推出一种全新的分布式智能体训练框架 IMPALA，该框架具有高度可扩展性，将学习和执行过程分开，使用了一种名为 V-trace 的离策略（off-policy）修正算法，具有显著的加速性能，极高的效率。具体如何呢，雷锋网 (公众号：雷锋网) AI 研习社将

作者：王练百度近日开源了一套计算框架 Bigflow ， 致力于提供一套简单易用的接口来描述用户的计算任务，并使同一套代码可以运行在不同的执行引擎之上。Bigflow 的设计中有许多思想借鉴自 Google FlumeJava以及 Google Cloud Dataflow，另有部分接口设计借鉴自 Apache Spa

去年，Michael I. Jordan 实验室发表论文《CoCoA: A General Framework for Communication-Efficient Distributed Optimization》提出了一种用于机器学习的分布式优化的通用框架 CoCoA。机器之心技术顾问 Yanchen Wang 

温小东：香港比特币交易平台——币火网创始人，香港币火网（bihuo.top）区块链技术开发有限公司、香港绝对风投基金管理有限公司创始人，2013年开始接触比特币。曾经在2013年以8000元的最高价格抛售320枚比特币，至2016年时持有400多万枚莱特币。是著名股权投资专家，所组建的团队在区块链技术开发及其应用领域处

作者：岑文初其实参看Hadoop官方文档已经能够很容易配置分布式框架运行环境了，不过这里既然写了就再多写一点，同时有一些细节需要注意的也说明一下，其实也就是这些细节会让人摸索半天。Hadoop可以单机跑，也可以配置集群跑，单机跑就不需要多说了，只需要按照Demo的运行说明直接执行命令即可。这里主要重点说一下集群配置运行

作者：岑文初在SIP项目设计的过程中，对于它庞大的日志在开始时就考虑使用任务分解的多线程处理模式来分析统计，在我从前写的文章《Tiger Concurrent Practice —日志分析并行分解设计与实现》中有所提到。但是由于统计的内容暂时还是十分简单，所以就采用Memcache作为计数器，结合MySQL就完成了访问

 近日，雅虎 Big ML 团队宣布开源 TensorFlowOnSpark，用于在大数据集群上进行分布式深度学习。下面是该团队官方发布的开源说明。近几年，深度学习发展的非常迅速。在雅虎，我们发现，为了从海量数据中获得洞察力，需要部署分布式深度学习。现有的深度学习框架常常要求为深度学习单独设定集群，迫使我们要为一个机器