当前位置:网站首页>湖仓一体电商项目(二):项目使用技术及版本和基础环境准备
湖仓一体电商项目(二):项目使用技术及版本和基础环境准备
2022-07-30 12:16:00 【Lanson】
文章目录
项目使用技术及版本和基础环境准备
一、项目使用技术及版本
下表列出项目中使用的大数据技术组件及各个组件的版本,如下:
使用技术 | 版本 |
|---|---|
zookeeper | 3.4.13 |
HDFS | 3.1.4/3.2.2 |
Hive | 3.1.2(MySQL 5.7.32) |
iceberg | 0.11.1 |
Hbase | 2.2.6 |
phoenix | 5.0.0 |
kafka | 0.11.0.3 |
redis | 2.8.18 |
flink | 1.11.6 |
flume | 1.9.0 |
maxwell | 1.28.2 |
clickhouse | 21.9.4.35 |
二、项目基础环境准备
这里我们使用5台节点来安装各个大数据组件,每台节点给了3G内存,4个core,并且每台节点已经关闭防火墙、配置主机名、设置yum源、各个节点时间同步、各个节点两两免密、安装JDK操作。5台节点信息如下:
节点IP | 节点名称 |
|---|---|
192.168.179.4 | node1 |
192.168.179.5 | node2 |
192.168.179.6 | node3 |
192.168.179.7 | node4 |
192.168.179.8 | node5 |
下篇一一进行基础技术组件搭建。
边栏推荐
- 【Kaggle:UW-Madison GI Tract Image Segmentation】肠胃分割比赛:赛后复盘+数据再理解
- 结合实战,浅析GB/T28181(三)——实况点播
- CV-Model【2】:MobileNet v1
- Rust 从入门到精通02-安装
- 句柄与指针的简单理解
- IO/multiplexing (select/poll/epoll)
- Apifox generates interface documentation tutorial and operation steps
- Horizontal comparison of 5 commonly used registration centers, whether it is used for interviews or technical selection, is very helpful
- 【记一个kaggle划水比赛】PetFinder.my - Pawpularity Contest 宠物预测
- Verilog grammar basics HDL Bits training 08
猜你喜欢

即时通讯-改变社交与工作状态的新型软件

AlphaFold预测了几乎所有已知蛋白质!涵盖100万物种2.14亿结构,数据集开放免费用...

PyQt5快速开发与实战 8.2 绘图 && 8.3 QSS的UI美化

概率论得学习整理--番外3:二项式定理和 二项式系数

力扣——11.盛最多水的容器

电脑奔溃的时候,到底发生了什么?

漫谈金丝雀部署(Canary Deployment)

Another blast!Ali's popular MySQL advanced collection is open source, reaching P7

Reverse linked list - recursive inversion method

mapbox-gl开发教程(十四):画圆技巧
随机推荐
物理服务器与虚拟机:主要区别和相似之处
Add the device library after Vivado installation
[SCTF2019]Flag Shop
What happened when the computer crashed?
【Kaggle:UW-Madison GI Tract Image Segmentation】肠胃分割比赛:赛后复盘+数据再理解
无人艇轨迹跟踪的预设性能抗扰控制研究
从“校园贷”到“直播带货”,追风少年罗敏一直行走在风口浪尖
EXCEL解决问题:如何查找目标区域,是否包含指定字符串?
Digital input and output module DAM-5088
云主机上的MongoDB被威胁,开启AUTH认证
电流电压采集模块DAM-6160
【MySQL系列】-B+树索引和HASH索引有什么区别
基于空洞补全的动态SLAM方法
什么是驱动程序签名,驱动程序如何获取数字签名?
概率论的学习整理--番外1:可重复且无次序的计数公式C(n+k-1,k) 的例题 : 同时丢3个骰子,会有多少种情况?答案不是216而是56!
I built another wheel: GrpcGateway
备战金九银十!2022面试必刷大厂架构面试真题汇总+阿里七面面经+架构师简历模板分享
13-GuliMall 基础篇总结
Program environment and preprocessing (detailed)
Concepts of cloud-native applications and 15 characteristics of cloud-native applications