# 数仓项目-离线-实时 **Repository Path**: ployfox/warehouse ## Basic Information - **Project Name**: 数仓项目-离线-实时 - **Description**: No description available - **Primary Language**: Unknown - **License**: Apache-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 1 - **Created**: 2021-07-09 - **Last Updated**: 2021-07-09 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # 数仓项目-离线-实时 #### 介绍 数仓项目 实时 离线 #### 软件架构 软件架构说明 1. JDK-1.8 2. hadoop-3.1.3 3. flume-1.9.0 4. kafka_2.11-2.4.1 5. zookeeper-3.5.7 6. mysql-5.7 7. hive-3.1.2 8. sqoop-1.4.6 9. spark-3.0.0 10. kylin-3.0.2 11. hbase-2.0.5 12. azkaban-3.84.4 13. redis-3.2.5 14. nginx-1.12.2 15. elasticsearch-6.3.1 16. canal.deployer-1.1.2 #### 安装教程 1. xxxx 2. xxxx 3. xxxx #### 使用说明 集群脚本启动 1. zk.sh start =>启动zookeeper集群服务 2. start-dfs.sh =>启动HDFS集群服务 3. kafka.sh start =>启动kafka集群服务 4. start-hbase.sh =>启动Hbase集群服务 5. redis-server /opt/module/redis-3.2.5/redis.conf =>启动redis单机服务 6. home/-> ./log.sh start =>启动nginx服务和mock数据服务 7. canal/-> bin/startup.sh =>启动canal服务 8. phoenix/-> bin/sqlline.py =>启动phoenix客户端 9. home/-> ./es_kibana.sh =>启动ES集群服务和kibana客户端 #### 参与贡献 1. Fork 本仓库 2. 新建 Feat_xxx 分支 3. 提交代码 4. 新建 Pull Request #### 特技 1. 使用 Readme\_XXX.md 来支持不同的语言,例如 Readme\_en.md, Readme\_zh.md 2. Gitee 官方博客 [blog.gitee.com](https://blog.gitee.com) 3. 你可以 [https://gitee.com/explore](https://gitee.com/explore) 这个地址来了解 Gitee 上的优秀开源项目 4. [GVP](https://gitee.com/gvp) 全称是 Gitee 最有价值开源项目,是综合评定出的优秀开源项目 5. Gitee 官方提供的使用手册 [https://gitee.com/help](https://gitee.com/help) 6. Gitee 封面人物是一档用来展示 Gitee 会员风采的栏目 [https://gitee.com/gitee-stars/](https://gitee.com/gitee-stars/)