京东发布Presto-0.107-JD版本

wge7 9年前

Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。

刚刚,京东发布Presto-0.107-JD版本


Presto-0.107-Jd release

  • General Changes

    1. 支持Join条件中隐式转换(已合到presto的master版本中)
    2. 添加 system session 参数query_max_memory,动态设置query.max-memory参数值(已合到presto的master版本中)
    3. 可定制参与SINGLE stage的节点,并可配置这些节点是否参与FIXED、SOURCE stage 详细功能请点我
    4. Fix bug
      4.1 Fix IndexOutOfBoundsException in NodeScheduler #2974
      4.2 Fix exception during plan duplicate columns in order by clause #3018
      4.3 Remove unused field #3017
      4.4 Add missing the specified object prefix in PrioritizedSplitRunner.compareTo #2646
  • Hive Changes
    更改Hive的存储格式为ORC
  • Kafka Changes
    Fix bug : presto-0.100 could not fetch data from Kafka, error code is ‘6’

  • JDBC Changes

    1. 重构PDBO功能模块
    2. 将PDBO路由信息拆分为两个表
    3. 多节点读取一个表时,支持分批次从数据库中读取数据
    4. 支持Varchar、Date、TimeStamp类型字段的条件下推至数据库
    5. 从SQL Server数据库读取数据时,默认增加nolock属性

release note 请点击:
https://github.com/CHINA-JD/presto/wiki/Presto-0.107-JD-release

Github源码:
https://github.com/CHINA-JD/presto

更多的资料可查看Github wiki:
https://github.com/CHINA-JD/presto/wiki