HDFS和HBase跨集群数据迁移 源码

hadoop distcp \
-pb \
hdfs://XX.14.36.205:8020/user/hive/warehouse/dp_fk_tmp.db/ph_cash_order \
hdfs://XX.18.32.21:8020/user/hive/warehouse/dp_fksx_mart.db/

/usr/local/fqlhadoop/hbase/bin/hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot \
-Dmapreduce.job.name=ExportSnapshot-portrait_info_fql_20241106 \
-Dmapreduce.job.queuename=lx_realtime \
-Dsnapshot.export.skip.tmp=true \
-Dmapreduce.map.memory.mb=4096 \
-Dmapreduce.map.java.opts=-Xmx3686m \
-overwrite \
-snapshot snapshot_portrait_info_fql_20241106 \
-copy-from hdfs://11.portraitszl.hbase.fql.com:8020/hbase \
-copy-to hdfs://1.compareportrait.hbase.fql.com:8020/hbase \
-mappers 150 \
-bandwidth 100

相关文章：

前端Python应用指南（三）Django vs Flask：哪种框架适合构建你的下一个Web应用？

使用 Python 创建多栏 Word 文档 – 详解

SDMTSP：粒子群优化算法PSO求解单仓库多旅行商问题，可以更改数据集和起点（MATLAB代码）

系统压力测试助手——stress-ng

在 Ubuntu 下使用 Tauri 打包 EXE 应用

C/C++基础知识复习（43）

【PGCCC】Postgresql slru 缓存和存储

基于 Vue3、Vite 和 TypeScript 实现开发环境下解决跨域问题，实现前后端数据传递

【人工智能】图神经网络（GNN）的原理与实现：Python与PyTorch Geometric在社交网络与化学分子建模中的应用

前端八股文(二)CSS 持续更新中。。。

C++：继承及其相关问题

国产MCU厂商第三季度取得亮眼成绩！

新能源汽车与公共充电桩布局

小华一级 代理商 HC32F005C6PA-TSSOP20 HC32F005系列

Neo4j 和 Python 初学者指南：如何使用可选关系匹配优化 Cypher 查询

摄影 4.8.7.2| 惊艳的摄影和修图软件，含教程和作品欣赏。

Node.js简介以及安装部署 （基础介绍 一）

JAVA基础【第四篇】

在docker中搭建redis哨兵环境

编译器优化乌龙——记一次死循环不进入问题

Elasticsearch Interval 查询：为什么它们是真正的位置查询，以及如何从 Span 转换

aitrader产品规划：数据自动下载，策略，因子挖掘，实盘对接，gui界面（源码+数据）

重构代码之移动方法

数据挖掘（六）

CentOS 9 Stream 上安装 Nginx

【c知道】Hadoop工作原理。