当前位置: 首页 > article >正文

spark通过connector的方式读写starrocks

1,添加maven依赖

<!--starrocks的包-->
<dependency>
    <groupId>com.starrocks.connector</groupId>
    <artifactId>spark</artifactId>
    <version>1.0.0</version>
    <scope>system</scope>
    <systemPath>${project.basedir}/src/main/resources/starrocks-spark2_2.11-1.0.0.jar</systemPath>
</dependency>

 

然后在resources下面加上这个包 

上面的包可以在下面git里的resource里下载

参考官方github demo/SparkDemo/src/main/resources at master · StarRocks/demo · GitHub

2,导入官方github里的sparkdemo下的文件到自己的目录下,如下

代码链接demo/SparkDemo/src/main/scala/com/starrocks at master · StarRocks/demo · GitHub

 3,spark写数据到starrocks样例代码可以根据官方demo改

参考文档

 GitHub - StarRocks/demo

 spark/Flink 导入导出starrocks-阿里云开发者社区


http://www.kler.cn/a/5607.html

相关文章:

  • JOGL 从入门到精通:开启 Java 3D 图形编程之旅
  • 三维动画的常用“视觉特效”有哪些?
  • 追风赶月莫停留,平芜尽处是春山—记一次备考经历(下)
  • LeetCode:257. 二叉树的所有路径
  • PostgreSQL CRUD 操作指南
  • 【C++】模板与泛型编程(一):定义模板,控制实例化、效率与灵活性
  • Java连接SqlServer错误
  • 每日学术速递3.27
  • 学习node之——MySQL的安装和基本使用
  • 重构类关系-Extract Interface提炼接口八
  • 【华为】组播IGMP基本原理(5月份将再次更新,这是以前的笔记 还存在些许问题)
  • 异想天开!没有CPU的操作系统
  • c#第二次作业
  • 【Linux内存管理概述】
  • uni-app--》uni-app的生命周期讲解
  • 反向传播自动求微分【Pytorch】
  • 第06章_索引的数据结构
  • 2010年9月计算机二级JAVA笔试试题及答案
  • c语言实践——通讯录(1)(静态版)
  • 机器学习笔记:层次聚类
  • Leetcode.1641 统计字典序元音字符串的数目
  • 《雪国》像憧憬未曾见过的爱恋,美则美矣
  • TCP和UDP网络编程
  • 接收机中的非线性因素来源与模型
  • fastp软件介绍
  • ChatGPT自我分析