京东发布Presto-0.107-JD版本
wge7 9年前
Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。
刚刚,京东发布Presto-0.107-JD版本
Presto-0.107-Jd release
-
General Changes
- 支持Join条件中隐式转换(已合到presto的master版本中)
- 添加 system session 参数query_max_memory,动态设置query.max-memory参数值(已合到presto的master版本中)
- 可定制参与SINGLE stage的节点,并可配置这些节点是否参与FIXED、SOURCE stage 详细功能请点我
- Fix bug
4.1 Fix IndexOutOfBoundsException in NodeScheduler #2974
4.2 Fix exception during plan duplicate columns in order by clause #3018
4.3 Remove unused field #3017
4.4 Add missing the specified object prefix in PrioritizedSplitRunner.compareTo #2646
- Hive Changes
更改Hive的存储格式为ORC -
Kafka Changes
Fix bug : presto-0.100 could not fetch data from Kafka, error code is ‘6’ -
JDBC Changes
- 重构PDBO功能模块
- 将PDBO路由信息拆分为两个表
- 多节点读取一个表时,支持分批次从数据库中读取数据
- 支持Varchar、Date、TimeStamp类型字段的条件下推至数据库
- 从SQL Server数据库读取数据时,默认增加nolock属性
release note 请点击:
https://github.com/CHINA-JD/presto/wiki/Presto-0.107-JD-release
Github源码:
https://github.com/CHINA-JD/presto
更多的资料可查看Github wiki:
https://github.com/CHINA-JD/presto/wiki