Search Shortcut cmd + k | ctrl + k
- 安装
- Documentation
- 入门指南
- 连接
- 数据导入
- 客户端API
- 概述
- C
- C++
- CLI
- Dart
- Go
- Java
- Julia
- Node.js (Neo)
- Node.js
- Python
- 概览
- 数据摄取
- DuckDB 和 Python 之间的转换
- DB API
- 关系型API
- Function API
- Types API
- Expression API
- Spark API
- API 参考
- 已知的Python问题
- R
- Rust
- Swift
- Wasm
- ADBC
- ODBC
- SQL
- 介绍
- 语句
- 概览
- ANALYZE
- ALTER TABLE
- ALTER VIEW
- ATTACH 和 DETACH
- CALL
- CHECKPOINT
- COMMENT ON
- COPY
- CREATE INDEX
- CREATE MACRO
- CREATE SCHEMA
- CREATE SECRET
- CREATE SEQUENCE
- CREATE TABLE
- CREATE VIEW
- CREATE TYPE
- DELETE
- DESCRIBE
- DROP
- 导出和导入数据库
- INSERT
- LOAD / INSTALL
- PIVOT
- 性能分析
- SELECT
- SET / RESET
- SET VARIABLE
- SUMMARIZE
- 事务管理
- UNPIVOT
- UPDATE
- USE
- VACUUM
- 查询语法
- SELECT
- FROM 和 JOIN
- WHERE
- GROUP BY
- GROUPING SETS
- HAVING
- ORDER BY
- LIMIT 和 OFFSET
- SAMPLE
- 解嵌套
- WITH
- WINDOW
- QUALIFY
- VALUES
- FILTER
- 集合操作
- 预编译语句
- 数据类型
- 概览
- Array
- Bitstring
- Blob
- 布尔
- 日期
- Enum
- Interval
- 列表
- 字面量类型
- 映射
- NULL值
- Numeric
- Struct
- 文本
- Time
- 时间戳
- 时区
- Union
- 类型转换
- 表达式
- 函数
- 概览
- 聚合函数
- 数组函数
- 位串函数
- Blob 函数
- 日期格式化函数
- 日期函数
- 日期部分函数
- 枚举函数
- 间隔函数
- Lambda 函数
- 列表函数
- 映射函数
- 嵌套函数
- 数值函数
- 模式匹配
- 正则表达式
- Struct 函数
- 文本函数
- 时间函数
- 时间戳函数
- 带时区的时间戳函数
- 联合函数
- 实用函数
- 窗口函数
- 约束
- 索引
- Meta 查询
- DuckDB的SQL方言
- 示例
- 配置
- 扩展
- 概述
- 核心扩展
- 社区扩展
- 使用扩展
- 扩展的版本控制
- Arrow
- 自动完成
- AWS
- Azure
- Delta
- Excel
- 全文搜索
- httpfs (HTTP 和 S3)
- Iceberg
- ICU
- inet
- jemalloc
- MySQL
- PostgreSQL
- 空间
- SQLite
- Substrait
- TPC-DS
- TPC-H
- VSS
- 指南
- 概述
- 数据查看器
- 数据库集成
- 文件格式
- 网络和云存储
- 概览
- HTTP Parquet 导入
- S3 Parquet 导入
- S3 Parquet 导出
- S3 Iceberg 导入
- S3 Express One
- GCS 导入
- Cloudflare R2 导入
- 通过HTTPS / S3使用DuckDB
- Meta 查询
- ODBC
- 性能
- Python
- 安装
- 执行SQL
- Jupyter Notebooks
- SQL on Pandas
- 从Pandas导入
- 导出到 Pandas
- 从Numpy导入
- 导出到Numpy
- SQL on Arrow
- 从Arrow导入
- 导出到 Arrow
- Pandas上的关系API
- 多线程 Python
- 与Ibis的集成
- 与 Polars 的集成
- 使用 fsspec 文件系统
- SQL 编辑器
- SQL 功能
- 代码片段
- 术语表
- 离线浏览
- 操作手册
- 开发
- 内部结构
- Sitemap
- Why DuckDB
- Media
- FAQ
- Code of Conduct
- Live Demo
Documentation
/ Data Import
/ Parquet Files
Querying Parquet Metadata
Parquet 元数据
parquet_metadata
函数可用于查询 Parquet 文件中包含的元数据,这些元数据揭示了 Parquet 文件的各种内部细节,例如不同列的统计信息。这对于了解 Parquet 文件中可以跳过哪些内容非常有用,甚至可以快速了解不同列包含的内容:
SELECT *
FROM parquet_metadata('test.parquet');
以下是parquet_metadata
返回的列的表。
字段 | 类型 |
---|---|
文件名 | VARCHAR |
行组ID | BIGINT |
行组行数 | BIGINT |
行组列数 | BIGINT |
行组字节数 | BIGINT |
列标识 | BIGINT |
文件偏移量 | BIGINT |
num_values | BIGINT |
path_in_schema | VARCHAR |
类型 | VARCHAR |
stats_min | VARCHAR |
stats_max | VARCHAR |
stats_null_count | BIGINT |
stats_distinct_count | BIGINT |
stats_min_value | VARCHAR |
stats_max_value | VARCHAR |
压缩 | VARCHAR |
编码 | VARCHAR |
index_page_offset | BIGINT |
dictionary_page_offset | BIGINT |
data_page_offset | BIGINT |
total_compressed_size | BIGINT |
total_uncompressed_size | BIGINT |
key_value_metadata | MAP(BLOB, BLOB) |
Parquet 模式
parquet_schema
函数可用于查询 Parquet 文件中包含的内部模式。请注意,这是 Parquet 文件元数据中包含的模式。如果您想找出 Parquet 文件中包含的列名和类型,使用 DESCRIBE
会更方便。
获取列名和列类型:
DESCRIBE SELECT * FROM 'test.parquet';
获取Parquet文件的内部模式:
SELECT *
FROM parquet_schema('test.parquet');
以下是parquet_schema
返回的列的表。
Field | Type |
---|---|
file_name | VARCHAR |
名称 | VARCHAR |
type | VARCHAR |
type_length | VARCHAR |
repetition_type | VARCHAR |
num_children | BIGINT |
转换类型 | VARCHAR |
scale | BIGINT |
精度 | BIGINT |
field_id | BIGINT |
逻辑类型 | VARCHAR |
Parquet 文件元数据
parquet_file_metadata
函数可用于查询文件级别的元数据,例如格式版本和使用的加密算法:
SELECT *
FROM parquet_file_metadata('test.parquet');
以下是parquet_file_metadata
返回的列的表。
Field | Type |
---|---|
file_name | VARCHAR |
created_by | VARCHAR |
num_rows | BIGINT |
num_row_groups | BIGINT |
format_version | BIGINT |
加密算法 | VARCHAR |
footer_signing_key_metadata | VARCHAR |
Parquet 键值元数据
parquet_kv_metadata
函数可用于查询定义为键值对的自定义元数据:
SELECT *
FROM parquet_kv_metadata('test.parquet');
以下是parquet_kv_metadata
返回的列的表。
Field | Type |
---|---|
file_name | VARCHAR |
键 | BLOB |
值 | BLOB |