当前位置: 首页 > article >正文

200.Spark(七):SparkSQL项目实战

一、启动环境

需要启动mysql,hadoop,hive,spark。并且能让spark连接上hive(上一章有讲)

#启动mysql,并登录,密码123456
sudo systemctl start mysqld
mysql -uroot -p
 
#启动hive
cd /opt/module/
myhadoop.sh start
 
#查看启动情况
jpsall
 
#启动hive
cd /opt/module/hive/bin/
hiveservices.sh start
 
#查看启动状态
/opt/module/hive/bin/hiveservices.sh status

启动beeline: 

#启动thriftserver
cd /opt/module/spark-local/
sbin/start-thriftserver.sh
 
#通过spark的beeline连接
bin/beeline -u jdbc:hive2://hadoop102:10000 -n root

 创建数据库:

show databases;
create database atguigu;

二、数据准备

将三个txt文件放到datas目录下:


http://www.kler.cn/a/4765.html

相关文章:

  • 计科高可用服务器架构实训(防火墙、双机热备,VRRP、MSTP、DHCP、OSPF)
  • 做一个 简单的Django 《股票自选助手》显示 用akshare 库(A股数据获取)
  • PythonOpenCV图片识别
  • 如何看待Akamai 退出中国市场进行转型?
  • 【Rust自学】11.10. 集成测试
  • minimum edit distance
  • day10—编程题
  • 为了开放互联,明道云做了十件事
  • SM3哈希算法的FPGA实现 I
  • 【Unity 手写PBR】Build-in管线:实现间接光部分
  • 基于springboot实现家政服务管理平台【源码+论文】
  • 《Netty》从零开始学netty源码(十七)之AbstractUnsafe
  • 2023年湖北省建筑八大员(建设厅七大员)报考流程和拿证流程来咯!
  • 【redis】redis淘汰策略
  • 推荐一款自动生成财务报表分析的软件
  • 中介变量、调节变量与协变量
  • 人事文件签署单调、重复、繁重?君子签电子合同提升HR工作质效
  • Ajax:服务器的基本概念与初识Ajax
  • [水]与ChatGPT谈Java
  • 怎么将pdf压缩?pdf文件如何压缩?
  • 文心一言发布前一天,GPT-4震撼发布
  • 即时零售:不可逆的进化
  • 【WEB前端进阶之路】 HTML 全路线学习知识点梳理(下)
  • Air700E开发板|移芯EC618|4G Cat.1模组:概述及PinOut
  • vue3+SpringBoot+postgresql 项目前后端传参
  • 【为什么要用线程池】