GridGain提供了无与伦比的高性能内存计算平台。 特性 Data Grid › High Performance Computing › Streaming Processing › Hadoop
Apache Storm 是当前业界广泛使用的两个分布式实时计算框架。其中 Apache Storm (以下简称“Storm”)在美团点评实时计算业务中已有较为成熟的运用(可参考 Storm 的可靠性保证测试
分解成映射与合并两种方式,然而通过映射进行分类与简化,从而产生部分归并结果,然后对同类结果进行归并计算; 由于 Hadoop 的中间结果需要依托于 hdfs ,从而需要经历硬盘及网络 io 的过程所以在实时性方面表现稍差;
Spark中用于图(e.g., Web-Graphs and Social Networks)和图并行计算(e.g., PageRank and Collaborative Filtering)的API,
dispy 是一个 Python 的分布式并行计算框架。可在单台机器上多个处理器进行并行处理,也可在多机集群环境下使用。 项目主页: http://www.open-open.com/li
libGlass 提供了一组可伸缩的组件用来执行分布式计算。应用程序在需要的情况下被当作是可重用的组件。该框架适合新的应用程序,同时对一些老应用也同样可用,而无需去改写。 Plugins: Synchronous
Hadoop 迭代式计算框架 Guagua 是 PayPal 的一个开源机器学习框架 Shifu 的子项目。Guagua 主要解决了模型训练的分布式问题。同时 Guagua 并没有将自己局限在分类模型,Guagua
DPark 是 Spark 的 Python 克隆,是一个Python实现的分布式计算框架,可以非常方便地实现大规模数据处理和迭代计算。 DPark 由豆瓣实现,目前豆瓣内部的绝大多数数据分析都使用DPark
GraphMapReduce: 基于MapReduce编程模型的图计算框架 (名词约束: 顶点Vertex-图中顶点;节点Process-计算单元节点),目录说明: 代码主要包含四个文件: gmr.cpp
x版本。。 新的功能和性能提升数据: 高达20倍比标准的Java序列化性能更好的。 3倍计算和数据配置更好的性能。 3倍改进的缓存锁定实现更好的查询索引。 高速缓存开销减少50%,并显着降低垃圾收集的开销。
(Bulk Synchronous Parallel)的计算框架,模仿了Google的Pregel。用来处理大规模的科学计算,特别是矩阵和图计算。集群环境中的系统架构由 BSPMaster/GroomServer(Computation
FourInOne(中文名字“四不像”)是一个四合一分布式计算框架,在写这个框架之前,我对分布式计算进行了长时间的思考,也看了老外写的其他开源框架,当我们把复杂的hadoop当作一门学科学习时,似乎忘记
Disco是一个基于MapReduce的分布式计算框架。Disco是一个开源项目,由诺基亚研究中心开发用来解决处理大数据时碰到的实际问题。 Disco采用Python开发,具有易于使用,强大的特点
MyRPC是个远程过程调用框架,设计用来方便地连接异构系统。它具有基于IDL的客户机/服务器存根生成,多平台支持,二进制协议(不需要转义二进制数据,更少的开销),支持各种数据类型(如字符串,二进制,符
相比原生的map-reduce模型,Dataflow有几个优点: 可以构建复杂的pipeline,在这不妨引用Google云平台的产品营销总监Brian Goldfarb的话 Cloud Dataflow可以用于处理批量
GridGain 3.6 发布, GridGain 是一个开源的网格计算框架,专著于提供平行计算能力,能够与JBoss和Spring相集成。 新版本主要新特性和改进如下: “Write From Behind
Casablanca 是微软公司用来支持基于云计算平台的客户端服务器通讯框架,使用先进的异步 C++ API 设计。 Casablanca 主要特点: 支持访问 REST 服务 提供 Visual
Crypton是一个框架来构建云应用程序密码安全。这样的应用程序提供有意义的隐私保证终端用户因为服务器运行应用程序无法读取数据由应用程序创建并存储。 使用Crypton,开发者可以很容易的首次构建
云计算背景下的数据丢失如何预防 根据Ponemon研究所去年4月份的报告显示,只有50%的企业知道其云计算服务提供商是如何为他们提供数据保护的,而只有略高于三分之一的企业正在进行或已经进行了尽职调查
亚马逊周三宣布,将从 4 月 1 日开始下调大部分云计算服务的价格。此前一天,谷歌已宣布将下调其云计算服务的价格。 亚马逊网络服务(AWS)高级副总裁安德鲁·杰西(Andrew Jessy)在旧金山的一次大会上表示,此次降价幅度为