当前位置： 首页 > article >正文

最新Apache Hudi 1.0.1源码编译详细教程以及常见问题处理

article 2025/2/24 0:26:32

1.最新Apache Hudi 1.0.1源码编译

2.Flink、Spark、Hive集成Hudi 1.0.1

3.flink streaming写入hudi

目录

1. 版本介绍

2. 安装maven

2.1. 下载maven

2.2. 设置环境变量

2.3. 添加Maven镜像

3. 编译hudi

3.1. 下载hudi源码

3.2. 修改hudi源码

3.3. 修改hudi-1.0.1/pom.xml，注释或去掉410行内容

3.4. 安装confluent依赖

3.5. 解决jetty依赖冲突

3.6. 添加jsr305依赖

3.7. 编译hudi

4. 测试hudi

1. 版本介绍

maven：3.9.9

hudi：1.0.1

Spark：3.3.2

Flink：1.15.2

Hadoop：3.3.4

Hive：3.1.3

2. 安装maven


http://www.kler.cn/a/551355.html

相关文章：

  • RAC 主动关闭数据库及直接关闭集群之间的关闭区别
  • Ubuntu22.04配置cuda/cudnn/pytorch
  • 鸡兔同笼问题
  • 【nvidia】NCCL禁用P2P后果权衡
  • 软件测试技术之跨平台的移动端UI自动化测试（上）
  • 毕业设计—基于Spring Boot的社区居民健康管理平台的设计与实现
  • ubuntu 22.04 安装vsftpd服务
  • HarmonyOS组件之Tabs
  • Kafka偏移量管理全攻略：从基础概念到高级操作实战
  • uniapp PDF 预览和下载
  • 一.AI大模型开发-初识机器学习
  • vm vitualbox和主机ssh连接，使用net 和仅主机网卡连接
  • HarmonyOS开发 - 记事本实例二（关系型数据库数据存储）
  • Kubernetes实战教程：基于Vue前端与Java后端的应用部署
  • 数据结构：Map Set(一)
  • 蓝桥杯 Java B 组之简单数学问题（素数判断、最大公约数）
  • Golang并发编程最佳实践：协程与通道
  • jar命令解压jar包及更新jar的配置文件
  • 机器视觉--图像的运算（加法）
  • 管理WSL实例 以及安装 Ubuntu 作为 WSL 子系统 流程