类Google MegaStore & F1的分布式关系数据库：Wasp

jopen 10年前

Wasp 是类Google MegaStore & F1的分布式关系数据库。

最近几年随之Bigtable和NoSQL的兴起，社区产品HBase逐步走向NoSQL系统的主流产品，优势明显然而缺点也明显，大数据平台下的业务由 SQL向NoSQL的迁移比较复杂而应用人员学习成本颇高，并且无法支持事务和多维索引，使得许多业务无法享用来自NoSQL系统中线性拓展能力。 Google内部MegaStore就作为Bigtable的一个补充而出现，在Bigtable的上层支持了SQL，事务、索引、跨机房灾备，并成为大 名鼎鼎的Gmail、APPEngine、Android Market的底层存储。近期Google在MegaStore的基础上升级了F1的系统，因此我们决定以MegaStore&F1为理论模型进 行探索如何在HBase系统上不牺牲线性拓展能力的同时又能提供跨行事务、索引、SQL的功能。通过简单的用户入口SQL，用户可以不需要关注hbase 的schema设计，极大的简化了用户的数据迁移和学习成本。理论设计详情见MegaStore及F1。

Wasp是分布式的、支持SQL的、事务型数据库：

  1. 支持索引类型：本地索引、全局索引

  2. 支持分区（分区可再分区、合并、移动部署），可线性拓展

  3. 支持数据类型：int64、int32、string、double、float、datetime

  4. SQL语法特性：select、update、delete、insert、create table、delete table、create index、drop index等

  5. 支持跨行事务，支持NoSQl之上的索引与实体的ACID

  6. 支持MVCC

  7. JDBC访问接口

  8. 易用的监控：Ganglia - metrics

未来的规划

  • SQL分析性统计型函数

  • 资源隔离

  • 权限

 

项目主页：http://www.open-open.com/lib/view/home/1403185078356