Parquet是一种面向列存存储的文件格式,Cloudera的大数据在线分析(OLAP)项目Impala中使用该格式作为列存储。 Apache Parquet 是一个列存储格式,主要用于 Hadoop 生态系统。对数据处理框架、数据模型和编程语言无关。 目前该项目加入了 Apache 基金会,正处于孵化阶段。 Parquet MR 是再 Apache Hadoop 运行 Parquet 面向列文件格式的 Java 库集合。此版本是 MR 的第一个版本,使用 com.twitter 文件名和包名。很快就会发布 1.7.0 版本,主要是从 com.twitter 到 org.apache.parquet 的重命名。 此版本现已提供在 https://www.apache.org/dyn/closer.cgi/incubator/parquet/parquet-mr-1.6.0-incubating/ Apache Parquet MR 1.6.0 (Incubating) 发布下载地址