当前位置:网站首页>Lake storehouse which electricity (2) of the project: project using technology and version and the environment
Lake storehouse which electricity (2) of the project: project using technology and version and the environment
2022-07-30 12:52:00 【Lanson】
文章目录
项目使用技术及版本和基础环境准备
一、项目使用技术及版本
下表列出项目中使用的大数据技术组件及各个组件的版本,如下:
使用技术 | 版本 |
|---|---|
zookeeper | 3.4.13 |
HDFS | 3.1.4/3.2.2 |
Hive | 3.1.2(MySQL 5.7.32) |
iceberg | 0.11.1 |
Hbase | 2.2.6 |
phoenix | 5.0.0 |
kafka | 0.11.0.3 |
redis | 2.8.18 |
flink | 1.11.6 |
flume | 1.9.0 |
maxwell | 1.28.2 |
clickhouse | 21.9.4.35 |
二、项目基础环境准备
这里我们使用5台节点来安装各个大数据组件,每台节点给了3G内存,4个core,并且每台节点已经关闭防火墙、配置主机名、设置yum源、各个节点时间同步、各个节点两两免密、安装JDK操作.5台节点信息如下:
节点IP | 节点名称 |
|---|---|
192.168.179.4 | node1 |
192.168.179.5 | node2 |
192.168.179.6 | node3 |
192.168.179.7 | node4 |
192.168.179.8 | node5 |
下篇一一进行基础技术组件搭建.
边栏推荐
- Js - 内置对象
- Dry Goods Sharing: Various Implementation Methods of Bean Management Factory with Great Use of Small Skills
- [PostgreSQL] - 存储结构及缓存shared_buffers
- Apifox generates interface documentation tutorial and operation steps
- 大手笔!两所“双一流”大学,获75亿元重点支持!
- Vivado安装后添加器件库
- C# 时间戳与时间的互相转换
- 并行化快速排序设想
- WinForm枚举容器中的控件,实现控件统一事件处理机制
- 监控界的最强王者,没有之一!
猜你喜欢

重建丢失的数据

【Kaggle比赛常用trick】K折交叉验证、TTA

IO/multiplexing (select/poll/epoll)

物理服务器与虚拟机:主要区别和相似之处

使用百度EasyDL实现明厨亮灶厨师帽识别

JD.com was brutally killed by middleware on two sides. After 30 days of learning this middleware booklet, it advanced to Ali.

Based on MySQL database, Redis cache, MQ message middleware, ES high availability scheme of search engine parsing

Kubernetes之本地存储

限时招募!淘宝无货源副业,800/天,不限经验,男女皆可,仅限前200名!

手慢无!阿里亿级流量高并发系统设计核心原理全彩笔记现实开源
随机推荐
多表联查的学习
物理服务器与虚拟机:主要区别和相似之处
PanGu-Coder: 函数级的代码生成模型
Matlab基础(3)——元胞与结构体
13-GuliMall Basics Summary
Js - 内置对象
数据湖(十八):Flink与Iceberg整合SQL API操作
Unity Beginner 6 - Simple UI production (blood bar production) and audio addition and NPC dialogue bubbles (2d)
OpenHarmony环境搭建报错: ImportError: cannot import name ‘VERSION‘ from ‘hb.__main__‘
限时招募!淘宝无货源副业,800/天,不限经验,男女皆可,仅限前200名!
如何把Excel表格显示到邮件正文里?
嵌入式环境下并发控制与线程安全
Go 事,Gopher 要学的数字类型,变量,常量,运算符 ,第2篇
Matlab基础(5)——符号运算
结合实战,浅析GB/T28181(三)——实况点播
云主机上的MongoDB被威胁,开启AUTH认证
【语音识别】基于GMM-HMM的语音识别系统
MySQL【多表查询】
如何将EasyCVR平台RTSP接入的设备数据迁移到EasyNVR中?
大手笔!两所“双一流”大学,获75亿元重点支持!