分布式任务系统:cobweb 经验

r上分发任务,在其它多台服务器上部署Client程序,并执行相应的任务任务函数代码编辑后在Server上发布,会自动分发到各台Client服务器上,并重载函数模块,使用新的执行代码。 任务函数可选

jopen 2013-09-28   14408   0

分布式任务调度框架:task 经验

基于zookeeper的分布式任务调度框架,具有如下特性 1.分布式,解决单点故障 2.支持负载均衡 3.支持自动扩容 4.容错重试 5.任务基于SPI插件开发 项目主页:

jopen 2013-11-10   39215   0

Celery 实现分布式任务队列 经验

是 Distributed Task Queue,分布式任务队列,分布式决定了可以有多个 worker 的存在,队列表示其是异步操作,即存在一个产生任务提出需求的工头,和一群等着被分配工作的码农。 在

g2md 2015-09-02   56200   0

分布式任务调度平台:EasySchedule 经验

EasySchedule 是基于quartz的集群、分布式任务调度平台。广告技术部前端原有定时任务功能 相对比较简单,交互性差,任务部署效率低, 开发和维护成本高,不能很好满足各系统定时任务 的管理和控制; 大量Cront

jopen 2014-06-16   76173   0
P19

  云计算环境下资源分配与任务调度研究 文档

1. 云计算环境下资源分配与任务调度研究王静宇 btu_wjy@imust.edu.cn 内蒙古科技大学信息与网络中心 2. 目 录 研究背景1 相关研究2 本文模型与算法3 实验与结论4 3. 研究背景

chenkunopq 2012-04-23   6867   0
P10

  分布式计算(Map/Reduce) 文档

分布式计算(Map/Reduce) 分布式计算,同样是一个宽泛的概念,在这里,它狭义的指代,按Google Map/Reduce框架所设计的分布式框架。在Hadoop中,分布式文件系统,很大程度上

wanboy 2012-09-03   642   0
P10

  分布式计算(Map/Reduce) 文档

分布式计算(Map/Reduce) 分布式计算,同样是一个宽泛的概念,在这里,它狭义的指代,按Google Map/Reduce框架所设计的分布式框架。在Hadoop中,分布式文件系统,很大程度上

萧萧若水 2011-10-30   3954   0

分布式计算系统:Onyx 经验

Onyx 是一个无中心、支持云、容错的分布式计算系统 使用 Clojure 编写 支持批处理和流处理混合 提供信息模型用于描述和构建分布式工作流 竞争对手: Storm,

jopen 2015-02-19   18230   0
P40

  分布式计算系统简介 文档

1. 分布式计算系统 Distributed Computing Systems赵 洋 (zy.nust@gmail.com) 南京理工大学计算机学院 2010年秋季学期 本课件来源于Jennifer

zhimayu 2014-05-05   505   0

常见分布式计算框架特点 经验

这样的一种模式进行项目的实际开发与交互,将一个个任务分解成映射与合并两种方式,然而通过映射进行分类与简化,从而产生部分归并结果,然后对同类结果进行归并计算; 由于 Hadoop 的中间结果需要依托于

jopen 2015-07-08   17537   0

谈谈分布式计算的算子层 经验

本文是我对分布式计算的算子这层的一些认识和想法。因为最近自己的开发任务也是这方面相关的,公司内部有自研的类流式计算框架需要做一层算子层。我主要分析的是流式系统上实现算子这一点入手,对比现有计算框架和业界正在开展的项目,分析分析这件事的

jopen 2015-01-16   18290   0

Hadoop:分布式计算平台初探 经验

现开源软件框架,实现在大量计算机组成的集群中对海 量数据进行分布式计算。Hadoop框架中最核心设计就是:MapReduce和HDFS。MapReduce提供了对数据的计算,HDFS提供了海量数 据的存储。

jopen 2014-12-03   24277   0
P6

  使用 Linux 和 Hadoop 进行分布式计算 文档

使用Linux和Hadoop进行分布式计算 发表时间:2012-4-20 Ken.Mann M.Tim.Jones 来源:ibm 关键字:hadoop linux 分布式 人们每天都依赖搜索引擎以从 Internet

wwqu1020 2012-09-13   3132   0

分布式计算框架 libGlass 经验

libGlass 提供了一组可伸缩的组件用来执行分布式计算。应用程序在需要的情况下被当作是可重用的组件。该框架适合新的应用程序,同时对一些老应用也同样可用,而无需去改写。 Plugins: Synchronous

openkk 2012-06-09   18354   0

分布式计算原理(讲演集) 经验

分布式计算是现代计算和通信系统的基础。在大规模网络系统方面的一个例子是互联网,而在多处理器方面的一个例子则是新式多核笔记本电脑。下面的这些 讲演材料介绍了分布式计算的原理,重点围绕设计分布式系统和网络

jopen 2014-12-28   12861   0

Mesos和Docker分布式计算平台 经验

针对“互联网+”时代的业务增长、变化速度及大规模计算的需求,廉价的、高可扩展的分布式x86集群已成为标准解决方案,如Google已经在几千万台服务器上部署分布式系统。Docker及其相关技术的出现和发展,

BetBarnard 2016-08-18   17982   0

分布式计算方法 Swarm 经验

Swarm是一个Web应用程序开发框架,它允许程序分布在多台 计算机,从某种程度上让程序对程序员完全透明。Swarm将会观察程序的执行,并计算出如何在计算机之间分配计算量以达到效率最大化。Swarm采用 LGPL许可证,用Scala

openkk 2012-03-03   14391   0

分布式计算的架构 Apache River 经验

Apache River 是一个分布式计算的架构,基于原 Sun 的 JSK Starter Kit 源码,主要使用 Jini 规范。 项目主页: http://www.open-open

openkk 2012-06-09   17977   0

分布式计算平台 ICE 经验

ICE(Internet Communications Engine)是ZeroC提 供的一款高性能的分布式计算平台,支持 C++ , .NET , Java , Python , Objective-C ,

openkk 2012-06-09   27619   0

分布式的内存计算平台:Apache Ignite 经验

内存数组组织框架是一个高性能、集成和分布式的内存计算和事务平台,用于大规模的数据集处理。Ignite 为应用和不同的数据源之间提供一个高性能、分布式内存中数据组织管理的框架。 集群计算特性: 动态集群

jopen 2015-01-10   61534   0
1 2 3 4 5 6 7 8 9 10