当前位置:网站首页>湖仓一体电商项目(二):项目使用技术及版本和基础环境准备
湖仓一体电商项目(二):项目使用技术及版本和基础环境准备
2022-07-25 09:33:00 【Lansonli】

文章目录
项目使用技术及版本和基础环境准备
一、项目使用技术及版本
下表列出项目中使用的大数据技术组件及各个组件的版本,如下:
使用技术 | 版本 |
zookeeper | 3.4.13 |
HDFS | 3.1.4/3.2.2 |
Hive | 3.1.2(MySQL 5.7.32) |
iceberg | 0.11.1 |
Hbase | 2.2.6 |
phoenix | 5.0.0 |
kafka | 0.11.0.3 |
redis | 2.8.18 |
flink | 1.11.6 |
flume | 1.9.0 |
maxwell | 1.28.2 |
clickhouse | 21.9.4.35 |
二、项目基础环境准备
这里我们使用5台节点来安装各个大数据组件,每台节点给了3G内存,4个core,并且每台节点已经关闭防火墙、配置主机名、设置yum源、各个节点时间同步、各个节点两两免密、安装JDK操作。5台节点信息如下:
节点IP | 节点名称 |
192.168.179.4 | node1 |
192.168.179.5 | node2 |
192.168.179.6 | node3 |
192.168.179.7 | node4 |
192.168.179.8 | node5 |
下篇一一进行基础技术组件搭建。
- 博客主页:https://lansonli.blog.csdn.net
- 欢迎点赞 收藏 留言 如有错误敬请指正!
- 本文由 Lansonli 原创,首发于 CSDN博客
- 停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活
边栏推荐
- Storage, computing, distributed storage (collection and sorting is suitable for Xiaobai)
- 1. Shell programming specifications and variables
- Small knowledge of common classes
- 10.expect免交互
- shortest-unsorted-continuous-subarray
- Upgrade glibc 2.29 checking LD_ LIBRARY_ Path variable... Contains current directory error solution
- When installing mysql, string the service installation failure > mysql80 startup failure
- 8. SHELL file processing Three Musketeers sed
- Configuration of OSPF protocol (take Huawei ENSP as an example)
- Strut2 form label
猜你喜欢
随机推荐
Pow(x,n)
6. Regular expression of shell
一、unittest框架和pytest框架的区别
2. Conditional statements of shell script
使用px2rem不生效
Number theory --- the greatest common divisor and the least common multiple
How to connect tdengine through open source database management tool dbeaver
存储、计算、分布式虚拟化篇(收集整理适合小白)
2021 Niuke written examination summary 02
Angr (V) - angr_ ctf
1、 The difference between unittest framework and pytest framework
When installing mysql, string the service installation failure > mysql80 startup failure
Add CONDA virtual environment env to the Jupiter kernel
MySQL solves the problem of not supporting Chinese
Array static initialization, traversal, maximum value
Differences between redis and mongodb
4、 Testfixture test fixture, or test firmware
Supervisor部署(离线部署需要提前下载部署包)
Angr(四)——angr_ctf
7. Shell practical gadget cut, etc







