From ad58c6708bba79b6dcafc7c11bfead8691a7d221 Mon Sep 17 00:00:00 2001 From: Weijian Wen Date: Sat, 29 Jul 2023 09:47:18 +0800 Subject: [PATCH] update address --- .../flink.md" | 8 ++++---- .../hadoop.md" | 6 +++--- .../hbase.md" | 12 ++++++------ .../hive.md" | 6 +++--- .../spark.md" | 6 +++--- .../zookeeper.md" | 2 +- 6 files changed, 20 insertions(+), 20 deletions(-) diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/flink.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/flink.md" index 9f3f8b3..99f4db8 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/flink.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/flink.md" @@ -5,9 +5,9 @@ | 软件 | 说明 | 获取方法 | | ---------------- |---------------- |---------------- | |OpenJDK|1.8.0_342|yum安装或者官网获取| -|flink|1.13.0|官网获取，aarch64版本需移植，参考[flink移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/flink.md) -|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| -|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| +|flink|1.13.0|官网获取，aarch64版本需移植，参考[flink移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/flink.md) +|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| +|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| ##### 1.2硬件要求 ``` 最低配置：任意CPU、一根内存（大小不限）、一块硬盘（大小不限）。 @@ -57,7 +57,7 @@ java -version #### 3-flink部署 Flink的部署有3种模式，分别是local模式、Standalone模式、yarn模式。其中local就是单机模式，一般来说用于本地开发测试；Standalone跟yarn模式都可以支撑集群部署、实现HA，但是两者在任务分配机制、内存管理等内容上有比较大的差异。一般在处理计算数据量级非常大的生产环境，使用flink on yarn的模式更多一些。 -下载flink。 官网获取 或者 aarch64版本需移植，参考[flink移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/flink.md)。 +下载flink。 官网获取 或者 aarch64版本需移植，参考[flink移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/flink.md)。 ##### 3.1 本地模式 解压并直接执行 ./bin/start-cluster.sh 即可启动flink服务。 ##### 3.2 Standalone模式 diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hadoop.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hadoop.md" index 691c411..e0776c2 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hadoop.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hadoop.md" @@ -5,8 +5,8 @@ | 软件 | 说明 | 获取方法 | | ---------------- |---------------- |---------------- | |OpenJDK|1.8.0_342|yum安装或者官网获取| -|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| -|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| +|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| +|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| ##### 1.2硬件要求 ``` 最低配置：任意CPU、一根内存（大小不限）、一块硬盘（大小不限）。 @@ -55,7 +55,7 @@ java -version ``` #### 3-部署 ZooKeeper ##### 3.1 编译并解压 ZooKeeper -步骤1 参考ZooKeeper移植指南“[zookeeper移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)”编译出“zookeeper-3.8.1.tar.gz”部署包。 +步骤1 参考ZooKeeper移植指南“[zookeeper移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)”编译出“zookeeper-3.8.1.tar.gz”部署包。 ``` 步骤2 将zookeeper-3.8.1.tar.gz放置于agent1节点的“/usr/local”目录下，并解压。 mv zookeeper-3.8.1.tar.gz /usr/local diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hbase.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hbase.md" index 666122d..6528675 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hbase.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hbase.md" @@ -5,9 +5,9 @@ | 软件 | 说明 | 获取方法 | | ---------------- |---------------- |---------------- | |OpenJDK|1.8.0_342|yum安装或者官网获取| -|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| -|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| -|hbase|2.5.0|官网获取，aarch64版本需移植，参考[hbase移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hbase.md)| +|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| +|zookeeper|3.8.1|官网获取，aarch64版本需移植，参考[zookeeper移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/zookeeper.md)| +|hbase|2.5.0|官网获取，aarch64版本需移植，参考[hbase移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hbase.md)| ##### 1.2硬件要求 ``` 最低配置：任意CPU、一根内存（大小不限）、一块硬盘（大小不限）。 @@ -55,13 +55,13 @@ yum install -y java-1.8.0 java -version ``` #### 3-部署zookeeper -参考 [hadoop部署指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) +参考 [hadoop部署指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) #### 4-部署hadoop -参考 [hadoop部署指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) +参考 [hadoop部署指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) #### 5-部署hbase ##### 5.1 下载并解压 HBase 步骤1 下载HBase。 -官网获取 或者 aarch64版本需移植，参考[hbase移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hbase.md)| +官网获取 或者 aarch64版本需移植，参考[hbase移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hbase.md)| ``` 步骤2 将hbase-2.5.0-bin.tar.gz放置于server1节点的“/usr/local”目录，并解压。 mv hbase-2.5.0-bin.tar.gz /usr/local diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hive.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hive.md" index ca4db21..61b792a 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hive.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/hive.md" @@ -5,8 +5,8 @@ | 软件 | 说明 | 获取方法 | | ---------------- |---------------- |---------------- | |OpenJDK|1.8.0_342|yum安装或者官网获取| -|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| -|hive|3.1.3|官网获取，aarch64版本需移植，参考[hive移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hive.md)| +|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| +|hive|3.1.3|官网获取，aarch64版本需移植，参考[hive移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hive.md)| ##### 1.2硬件要求 ``` 最低配置：任意CPU、一根内存（大小不限）、一块硬盘（大小不限）。 @@ -54,7 +54,7 @@ yum install -y java-1.8.0 java -version ``` #### 3- 部署Hive -在部署Hive之前请先安装部署好Hadoop,参考[hadoop部署指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) +在部署Hive之前请先安装部署好Hadoop,参考[hadoop部署指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) ##### 3.1 配置Hive环境变量（下面hive的路径已经提前做了软连接的操作） ``` vim /etc/profile diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/spark.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/spark.md" index b625ab8..1f511ab 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/spark.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/spark.md" @@ -5,8 +5,8 @@ | 软件 | 说明 | 获取方法 | | ---------------- |---------------- |---------------- | |OpenJDK|1.8.0_342|yum安装或者官网获取| -|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| -|spark|3.3.0|官网获取，aarch64版本需移植，参考[spark移植指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/spark.md)| +|hadoop|3.3.4|官网获取，aarch64版本需移植，参考[hadoop移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/hadoop.md)| +|spark|3.3.0|官网获取，aarch64版本需移植，参考[spark移植指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E7%A7%BB%E6%A4%8D%E6%8C%87%E5%8D%97/spark.md)| ##### 1.2硬件要求 ``` 最低配置：任意CPU、一根内存（大小不限）、一块硬盘（大小不限）。 @@ -54,7 +54,7 @@ yum install -y java-1.8.0 java -version ``` #### 3- 部署Spark -在部署Hive之前请先安装部署好Hadoop,参考[hadoop部署指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) +在部署Hive之前请先安装部署好Hadoop,参考[hadoop部署指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) ##### 3.1 安装Scala ``` wget https://downloads.lightbend.com/scala/2.12.15/scala-2.12.15.tgz diff --git "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/zookeeper.md" "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/zookeeper.md" index fc525e5..4de77aa 100644 --- "a/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/zookeeper.md" +++ "b/Docs/\351\203\250\347\275\262\346\214\207\345\215\227/zookeeper.md" @@ -1,3 +1,3 @@ ### zookeeper-3.8.1部署指南 -详情参考hadoop部署指南 [hadoop部署指南](https://gitee.com/macchen1/bigdata/blob/change-bigdat/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) \ No newline at end of file +详情参考hadoop部署指南 [hadoop部署指南](https://gitee.com/openeuler/bigdata/blob/master/Docs/%E9%83%A8%E7%BD%B2%E6%8C%87%E5%8D%97/hadoop.md) -- Gitee