当前位置:网站首页>Lake storehouse which electricity (2) of the project: project using technology and version and the environment
Lake storehouse which electricity (2) of the project: project using technology and version and the environment
2022-07-30 12:52:00 【Lanson】
文章目录
项目使用技术及版本和基础环境准备
一、项目使用技术及版本
下表列出项目中使用的大数据技术组件及各个组件的版本,如下:
使用技术 | 版本 |
|---|---|
zookeeper | 3.4.13 |
HDFS | 3.1.4/3.2.2 |
Hive | 3.1.2(MySQL 5.7.32) |
iceberg | 0.11.1 |
Hbase | 2.2.6 |
phoenix | 5.0.0 |
kafka | 0.11.0.3 |
redis | 2.8.18 |
flink | 1.11.6 |
flume | 1.9.0 |
maxwell | 1.28.2 |
clickhouse | 21.9.4.35 |
二、项目基础环境准备
这里我们使用5台节点来安装各个大数据组件,每台节点给了3G内存,4个core,并且每台节点已经关闭防火墙、配置主机名、设置yum源、各个节点时间同步、各个节点两两免密、安装JDK操作.5台节点信息如下:
节点IP | 节点名称 |
|---|---|
192.168.179.4 | node1 |
192.168.179.5 | node2 |
192.168.179.6 | node3 |
192.168.179.7 | node4 |
192.168.179.8 | node5 |
下篇一一进行基础技术组件搭建.
边栏推荐
- datax开启hana支持以及dolphinscheduler开启datax任务
- int a=8,a=a++,a? int b=8,b=b+1,b?
- 什么是驱动程序签名,驱动程序如何获取数字签名?
- Using Baidu EasyDL to realize the recognition of the chef's hat of the bright kitchen
- 忆联:激活数据要素价值潜能,释放SAS SSD创新红利
- 云主机上的MongoDB被威胁,开启AUTH认证
- 备战金九银十!2022面试必刷大厂架构面试真题汇总+阿里七面面经+架构师简历模板分享
- Greenplum 6.0有哪些不可错过的硬核升级与应用?
- Heshu Group: Make smart cities smarter and make real life better
- 什么是私有云?您应该知道的 6 个优势
猜你喜欢
![[SCTF2019]Flag Shop](/img/26/20e21ec873f41f2633703216453a44.png)
[SCTF2019]Flag Shop

什么是私有云?您应该知道的 6 个优势

备战金九银十!2022面试必刷大厂架构面试真题汇总+阿里七面面经+架构师简历模板分享

【Kaggle比赛常用trick】K折交叉验证、TTA

手慢无!阿里亿级流量高并发系统设计核心原理全彩笔记现实开源

漫谈金丝雀部署(Canary Deployment)

MySQL查询性能优化

ECCV 2022 | 新加坡国立大学提出:全新可恢复型模型遗忘框架LIRF!

概率论的学习和整理--番外4: 关于各种平均数:算术平均数,几何平均数,调和平均数,以及加权平均数和平方平均数 (未完成)

历时两月,终拿字节跳动offer,算法面试题分享「带答案」
随机推荐
Execution order of select, from, join, on where groupby, etc. in MySQL
C#调用explorer.exe打开指定目录
如何把Excel表格显示到邮件正文里?
什么是驱动程序签名,驱动程序如何获取数字签名?
湖仓一体电商项目(二):项目使用技术及版本和基础环境准备
Another blast!Ali's popular MySQL advanced collection is open source, reaching P7
常见的云计算安全问题以及如何解决
dolphinscheduler单机化改造
Dry Goods Sharing: Various Implementation Methods of Bean Management Factory with Great Use of Small Skills
JS事件参数对象event
崩了,该来的终究躲不掉
打破原则引入SQL,MongoDB到底想要干啥???
IO/multiplexing (select/poll/epoll)
物理服务器与虚拟机:主要区别和相似之处
为什么说Prometheus是足以取代Zabbix的监控神器?
PyQt5快速开发与实战 8.4 设置窗口背景 && 8.5 不规则窗口的显示
C# 时间戳与时间的互相转换
概率论得学习整理--番外3:二项式定理和 二项式系数
嵌入式环境下并发控制与线程安全
基于DoS攻击能量分级的ICPS综合安全控制与通信协同设计