当前位置: 首页 > article >正文

apache paimon简介(官翻)

介绍

在这里插入图片描述

如下架构所示:

读/写操作
Paimon 支持多样化的数据读写方式,并支持 OLAP 查询。

  • 读取

    • 支持从历史快照(批处理模式)中消费数据,
    • 从最新偏移量(流处理模式)中读取数据,
    • 或以混合方式读取增量快照。
  • 写入

    • 支持从数据库变更日志(CDC)进行流式同步,
    • 从离线数据中进行批量插入/覆盖操作。

生态系统
除了 Apache Flink,Paimon 还支持其他计算引擎读取数据,如 Apache Hive、Apache Spark 和 Trino。

内部机制

  • Paimon 底层将列式文件存储在文件系统或对象存储中。
  • 文件的元数据保存在清单文件中&

http://www.kler.cn/a/318935.html

相关文章:

  • JavaSecLab靶场搭建
  • 开源项目推荐——OpenDroneMap无人机影像数据处理
  • DIP switch是什么?
  • 【C语言】值传递和地址传递
  • Spring Boot实现文件上传与OSS集成:从基础到应用
  • SQL,力扣题目1127, 用户购买平台
  • 【第十三章:Sentosa_DSML社区版-机器学习之聚类】
  • 共享单车轨迹数据分析:以厦门市共享单车数据为例(六)
  • 《开题报告》基于SpringBoot的交通管理系统的设计与实现+学习文档+答辩讲解视频
  • 9.25今日错题解析(软考)
  • Error: one input ui-file must be specified(问题已解决)
  • Nature Communications|一种快速响应的智能可穿戴嗅觉接口(可穿戴电子/柔性电子/人机交互)
  • 直播平台美颜功能开发方案:基于视频美颜SDK的集成详解
  • vue3 + ts + vite 初始化 cesium
  • 携手SelectDB,观测云实现性能与成本的双重飞跃
  • STM32CubeIDE | 使用HAL库的ADC读取内部传感器温度
  • 基于springboot垃圾分类网站
  • 这样做PPT也太酷了吧,27.9kstar,适合开发者的ppt工具推荐
  • Spring Boot 点餐系统:提升您的餐饮体验
  • Cannot solve model: no CPLEX runtime found.【macOS系统下问题解决】
  • c# 将调试信息到VS输出窗口
  • 飞驰云联FTP替代方案:安全高效文件传输的新选择
  • 机器学习_神经网络_深度学习
  • 如何在银河麒麟操作系统中关闭IPv6
  • 解决mac下 Android Studio gradle 下载很慢,如何手动配置
  • linux安装solr