当前位置: 首页 > article >正文

基于最新的ApacheStreamPark搭建指南

一、StreamPark 的介绍

官方文档:Apache StreamPark (incubating) | Apache StreamPark (incubating)

中文文档:Apache StreamPark (incubating) | Apache StreamPark (incubating)
Github地址:https://github.com/apache/incubator-streampark

Apache StreamPark™ 是一个流处理应用程序开发管理框架,旨在轻松构建和管理流处理应用程序,提供使用 Apache Flink® 和 Apache Spark™ 编写流处理应用的开发框架和一站式实时计算平台,核心能力包括不限于应用开发、部署、管理、运维、实时数仓等。

为什么要使用 StreamPark 呢?

它降低了学习成本和开发障碍,开发人员可以专注于业务逻辑。

另外,在部署阶段,企业可能很难在没有专业管理平台的情况下使用 Apache Flink 和 Apache Spark。StreamPark提供了一个专业的任务管理平台来满足这一需求.

二、体系架构

两个部分,streampark-corestreampark-console

1. streampark-core

streampark-core 定位是一个开发时框架,关注编码开发,规范了配置文件,按照约定优于配置的方式进行开发,提供了一个开发环境的 RuntimeContext 和一系列开箱即用的连接器,扩展了 DataStream 相关的方法,融合了 DataStreamFlink SQL API,简化繁琐的操作、聚焦业务本身,提高开发效率和开发体验。

2. streampark-console

streampark-console 是一个综合实时数据平台、低代码平台,可以较好的管理 Flink 任务,集成了项目编译、发布、参数配置、启动、保存点、火焰图、Flink SQL


http://www.kler.cn/a/429481.html

相关文章:

  • Mysql--实战篇--数据库设计(范式和反范式,数据表设计原则)
  • 基于CiteSpace的知网专利文献计量分析与可视化
  • HTML拖拽功能(纯html5+JS实现)
  • mac 安装docker
  • Java中的注解:如何自定义注解并实现功能
  • 【汇编】汇编编程中的指令传参方式
  • springboot+Loki+Loki4j+Grafana搭建轻量级日志系统
  • 进入 Dystopia:第九周游戏指南
  • CCF编程能力等级认证GESP—C++8级—20241207
  • Blender中使用BlenderGIS插件快速生成城市建筑模型
  • 关于csgo的游戏作弊与封禁
  • 使用 Magic-PDF 工具进行 PDF 文档解析与内容提取
  • 2024 一带一路暨金砖国家技能发展与技术创新大赛【网络安全防护治理实战技能赛项】样题(中职组)
  • 第十四周:支持向量机(SVM)
  • Map 那些事儿
  • 【Android】Compose初识
  • RPC设计--TcpConnection和TcpServer
  • 深入理解 NumPy 广播机制:从基础到应用
  • 统信系统(UOS)ARM64 nginx离线安装包(*.deb)
  • lspci简介
  • 十大排序算法C语言实现
  • 设计模式学习之——单例模式
  • 华为云云日志服务 HarmonyOS NEXT采集最佳实践
  • SpringMVC全局异常处理
  • 3D 生成重建017-StyleGaussian用文本或图像对你的3DGS内容进行风格迁移
  • 分布式定时任务解决方案(redis版)