Apache Parquet MR 1.12.0 发布,列存储格式

栏目: 软件资讯 · 发布时间: 5年前

内容简介:Apache Parquet MR 1.12.0 已经发布。 Parquet 是支持嵌套数据的通用列文件格式,使用节省空间的编码和用于处理框架(如Hadoop)的压缩和可拆分结构。 主要更新内容 parquet-format-structures 加密 parquet-mr 代...

Apache Parquet MR 1.12.0 已经发布。 Parquet 是支持嵌套数据的通用列文件格式,使用节省空间的编码和用于处理框架(如Hadoop)的压缩和可拆分结构。

主要更新内容

  • parquet-format-structures 加密
  • parquet-mr 代码更改以支持加密
  • 添加空命令
  • [C++] 修复在 32 位结构上产生的损坏文件
  • 修复 Maven Protobuf 插件无法正常工作的问题
  • 修复升级 Scrooge 版本时出现编译错误的问题
  • 修复 API 后向兼容性问题导致主分支构建失败的问题
  • 修复在 ParquetInputSplit 中找不到 FilleInputSplit 的问题
  • 修复 ParquetMetadataConveter 在 Iceberg 单元测试中抛出 NPE 的问题
  • 添加加密密钥管理工具
  • 添加 BYTE_STREAM_SPLIT 编码
  • 添加 parquet 加密的属性驱动接口

详情请查看更新公告


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

编码

编码

[美] Charles Petzold / 左飞、薛佟佟 / 电子工业出版社 / 2010 / 55.00元

本书讲述的是计算机工作原理。作者用丰富的想象和清晰的笔墨将看似繁杂的理论阐述得通俗易懂,你丝毫不会感到枯燥和生硬。更重要的是,你会因此而获得对计算机工作原理较深刻的理解。这种理解不是抽象层面上的,而是具有一定深度的。一起来看看 《编码》 这本书的介绍吧!

在线进制转换器
在线进制转换器

各进制数互转换器

RGB CMYK 转换工具
RGB CMYK 转换工具

RGB CMYK 互转工具

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具