【Apache Paimon】-- Paimon Filesysterm Catalog 和 Hive Catalog 的适用场景
目录
1. Filesystem Catalog
概述
特点
适用场景
2. Hive Catalog
概述
特点
适用场景
Filesystem Catalog 与 Hive Catalog 的对比
总结
Apache Paimon 提供了多种 Catalog（元数据管理）方式，用于统一管理表的元数据，如表结构、存储位置、分区等。以下是 Filesystem Catalog 和 Hive Catalog 的特点及适用场景：
1. Filesystem Catalog
概述
Filesystem Catalog 是 Apache Paimon 的内置 Catalog，它将元数据直接存储在文件系统中（如 HDFS、S3、本地文件系统等）。元数据通过文件的形式（通常是 JSON 或其他结构化格式）组织，具备轻量化和简单易用的特点。
特点
- 轻量级：无需额外的元数据服务（如 Hive Metastore）。
- 简单易用：只需配置文件路径即可使用，适合开发和测试环境。
- 依赖性低：只依赖