VMware在DockerCon EU宣布开源“Photon Controller”基础设施控制器 资讯

来。这个虚拟化平台通过许多框架,例如 Kubernetes 、 Docker Swarm 或 Mesos ,提供了API优先的用户体验、可扩展的控制平面和原生容器支持。 VMware blog 声明,Photon

jopen 2015-12-02   15372   0

traefik v1.2.0-rc1 发布,一款开源的反向代理与负载均衡工具 资讯

务系统直接整合,可以实现自动化动态配置。目前支持Docker, Swarm, Mesos/Marathon, Mesos, Kubernetes, Consul, Etcd, Zookeeper, BoltDB

jopen 2017-02-07   12615   0

Spark 集群概述 经验

上的。Spark 只需要可以创建进程,并且和这些进程通信,无论是运行在什么样的集群上(eg. Mesos/YARN)都可以。 driver program必须在整个生命周期中可以从不同的executor接受连接。因此,driver

jopen 2015-10-22   10414   0

关于Spark的基本概念和特性简介 经验

Spark on Yarn (Spark在Yarn上) ○ Spark on Mesos (Spark在Mesos) 6、运行时的Spark Driver程序启动多个Worker,Worker

jopen 2015-06-25   53456   0

Apache Hama 现支持 Hadoop YARN 资讯

Parallel大容量同步并行)计算技术,主要 针对大规模科学的计算。 Apache Hama 现在不单单是支持 Mesos,还支持 Hadoop YARN,使用在 Samsung Electronics。 YARN

jopen 2015-03-05   9266   0

HAproxy 自动配置,Bamboo v0.2.15 发布 资讯

Bamboo 是一个 Web 守护进程可自动的配置 HAproxy 用于发布在 Apache Mesos 和 Marathon 的 Web 服务。 界面: 来自:

jopen 2015-11-14   6685   0
Bamboo  

HAproxy 自动配置:Bamboo 经验

Bamboo 是一个 Web 守护进程可自动的配置 HAproxy 用于发布在 Apache Mesos 和 Marathon 的 Web 服务。 它的特性: User interface for

jopen 2014-11-09   32172   0
Bamboo  

Apache Spark 1.5.0正式发布 资讯

和 SQL 后端执行:DataFrame 和 SQL 集成:数据源,Hive, Hadoop, Mesos 和集群管理 R 语言 机器学习和高级分析 Spark Streaming Deprecations

jopen 2015-09-09   22147   0

Docker 1.8:Toolbox 以及编排工具大更新 资讯

现在已经是稳定可靠的了。它包含了一些列内建调度器的优化以及 Mesos 驱动器的优化。现在你可以通过 Docker 工具来控制一个 Mesos 集群。更多细节可以参考 发布日志 或者通过 开始手册 来运行

jopen 2015-08-13   12131   0
Docker  

Apache Flink :回顾2015,展望2016 资讯

行了支持,利用库的形式可以实现很多诸如此类的操作。 对Apache Mesos以及动态资源YARN的支持:同时支持Mesos 以及 YARN,包括动态分配和资源释放,从而获得更多资源弹性(包括批处理和流式处理)。

jopen 2016-02-16   8882   0

分布式服务框架的4项特性 经验

的核及内存大小。 业界比较成熟的有Apache旗下的 Mesos 及 YARN 。 它们的特性有点类似,但是由不同的组织开发。Mesos主要功能是由C++来实现,可以支持docker contai

jopen 2014-11-01   43728   0
P19

  (1)Spark简介 文档

YARN,Apache Mesos和Spark自带的单独调度器。 如果你把Spark安装在了裸机上面,单独调度器能够提供简单的方式,让你开始Spark之旅。 如果你已经有了Hadoop Yarn或者Mesos集群,那

ngn6 2015-08-12   775   0

Docker 1.8: 可信镜像,Toolbox, Registry 以及编排工具的更新 资讯

现在已经是稳定可靠的了。它包含了一些列内建调度器的优化以及 Mesos 驱动器的优化。现在你可以通过 Docker 工具来控制一个 Mesos 集群。更多细节可以参考 发布日志 或者通过 开始手册 来运行

jopen 2015-08-12   13793   0
Docker  
P38

  spark 文档

text的程序Cluster ManagerSpark集群资源调度服务(standalone,mesos,yarn)Worker NodeSpark集群中的运行应用代码的节点Executorworker

516304276 2016-11-23   980   0
SQL   Basic  

梳理对Spark Standalone的理解 经验

源,包括cpu、内存、起起来的进程及其分布。在我看来,前三个过程是 面向资源 的调度过程,接在mesos、yarn上也可以,而第四个过程则是 面向摆放 的。App内的TaskScheduler和Sch

jopen 2015-02-12   13756   0

你所不知道的 EMC 开源的那些事 经验

Docker 存储容器实现了共享存储。 REX-Ray 是一个存储编排引擎,它为Docker、Mesos及其他容器运行环境提供了持久化存储访问。其设计旨在囊括通用存储、虚拟化和云平台,提供高级的存储功能。REX-Ray

爱达8023 2016-05-24   22693   0
开源  

开源大数据利器汇总 经验

Twitter Mesos http://mesos.apache.org/ Google Borg的翻版 Hadoop Yarn http://hadoop.apache.org/ 类似于Mesos 日志收集系统

dgy7 2015-05-21   56121   0

你所不知道的 EMC 开源的那些事 资讯

Docker 存储容器实现了共享存储。 REX-Ray 是一个存储编排引擎,它为Docker、Mesos及其他容器运行环境提供了持久化存储访问。其设计旨在囊括通用存储、虚拟化和云平台,提供高级的存储功能。REX-Ray

jopen 2016-05-24   12618   0
开源  

Bamboo 0.2.10 发布,HAProxy 自动配置 资讯

Bamboo 是一个 Web 守护进程可自动的配置 HAproxy 用于发布在 Apache Mesos 和 Marathon 的 Web 服务。 Bamboo 0.2.10 发布,此版本是个改进版本,包括大量的重构,主要是关于

cc68 2015-04-15   8412   0
Bamboo  

Docker,云时代的程序交付方式 经验

测试通过后将镜像打标签后push到私有镜像Registry ④ CI工具通知CD工具 ⑤ CD工具通过Mesos/Marathon等进行基于容器的部署 ⑥ 测试没有问题后进行容器的切换(即Blue-green切换)

jopen 2014-08-26   168743   0
Docker  
1 2 3 4 5 6 7 8 9 10