当前位置: 首页 > article >正文

Hive Orc表数据导出和导入

导出到hdfs:hive执行
 

INSERT OVERWRITE DIRECTORY '/test/hdfs_dir' ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' STORED AS ORC SELECT * FROM hive_table;

HDFS导出到本地:shell执行

hdfs dfs -get /test/hdfs_dis/file_name /linux_dir/xxx

本地文件上传到HDFS:shell执行
 

hdfs dfs -put /linux_dir/xxx/file_name /hdfs/path

HDFS文件导入到Hive表:hive执行
 

LOAD DATA INPATH '/hdfs/path/file_name' INTO TABLE table_name;

设置分区最大数量:

SET hive.exec.max.dynamic.partitions.pernode=200;
SET hive.exec.max.dynamic.partitions = 200;


http://www.kler.cn/a/552293.html

相关文章:

  • Param ‘serviceName‘ is illegal, serviceName is blank
  • Rabbitmq的三个端口区分
  • python 的框架 dash 开发TodoList Web 应用
  • Spring Boot自动装配:约定大于配置的魔法解密
  • 组合模式详解(Java)
  • React 与 Vue 对比指南 - 上
  • 备战蓝桥杯 Day4 差分
  • 学习机器视觉halcon3D需要什么基础知识
  • 【工具类】 Hutool 中用于生成随机数的工具类
  • 【USRP】N210,X310,X410 如何优雅得接入 Vmware 虚拟机
  • Vue学习记录19
  • CPP集群聊天服务器开发实践(六):Redis发布订阅消息队列及服务器集群通信
  • JAVA过滤器(学习自用)
  • Vue.js 框架
  • 基于TCP与UDP协议的性能测试研究
  • 【AI】Pytorch基础与张量计算入门
  • C++ queue:数据结构的“排队哲学”与“先进先出法则
  • python爬虫系列课程3:解决爬虫过程中遇到的编码问题
  • Excel如何实现行分级,以及如何用Python 3实现Excel行分级
  • C++(23):unreachable