서버 6대를 활용하여 하둡 고가용성(HA)모드로 클러스터를 구축한다.
주요 스펙
호스트OS - windows10 home
게스트OS들 - centOS7
Hadoop - 3.1.0
Zookeeper - 3.4.10
jdk - 1.8.0_191
호스트OS는 공유기(WI-FI) 연결 환경
서버 6대를 활용한 하둡 HA 구성:
nn01: 액티브 네임노드, 저널노드 역할
rm01: 스탠바이 네임노드, 리소스 매니저, 저널노드 역할
jn01: 저널노드 역할
dn01: 데이터 노드 역할
dn02: 데이터 노드 역할
dn03: 데이터 노드 역할
하둡이란?
(하둡 기초) ep02_하둡에코시스템(Hadoop EcoSystem)
하둡의 역사에 대해 궁금하다면?! developer-woong.tistory.com/6 (하둡완벽설치!) ep01_하둡(Hadoop)의 역사, 등장 배경 데이터 시대 2013, 2014년 기준으로 뉴욕증권거래소에서는 하루 4.5테라바이트의 데이터
developer-woong.tistory.com
하둡 고가용성(HA:High Availability)이란?
developer-woong.tistory.com/12
(하둡 기초) ep07_하둡 고가용성(HA:High Availability)이란?
하둡이란?: developer-woong.tistory.com/7 (하둡 기초) ep02_하둡에코시스템(Hadoop EcoSystem) 하둡의 역사에 대해 궁금하다면?! developer-woong.tistory.com/6 (하둡완벽설치!) ep01_하둡(Hadoop)의 역사, 등..
developer-woong.tistory.com
● jdk 압축 파일 (본 가이드에서는 jdk-8u191-linux-x64.tar) https://www.oracle.com/kr/java/technologies/javase/javase8-archive-downloads.html
● centOS7 디스크 이미지 파일(* 최상단 kakao 혹은 naver가 빠름)
http://isoredirect.centos.org/centos/7/isos/x86_64/
● virtualbox 6.1 - https://www.virtualbox.org/wiki/Downloads (* Windows hosts 클릭, 다운로드 후 .exe 실행)
● MobaXterm 8.6 - https://mobaxterm.software.informer.com/8.6/ (* 다운로드 후 .exe 실행)
하둡 HA 클러스터 구축 시작!
감사합니다!!
developer-woong.tistory.com/14
(하둡 설치) ep01_가상머신 서버 생성 (Virtual Machine)
* 들어가기에 앞서 필요 파일들이 모두 설치되어있다는 가정하에 시작! 아래 링크 참조! 필자의 호스트OS는 windows10 home이다. 공유기(WI-FI)에 인터넷 연결이 되어있음을 가정 서버 6대: nn01: 액티브
developer-woong.tistory.com
'BigData > Hadoop' 카테고리의 다른 글
| (하둡 설치) ep02_가상 머신 서버 실행 (0) | 2021.02.20 |
|---|---|
| (하둡 설치) ep01_가상머신 서버 생성 (Virtual Machine, 네트워크 어댑터 설정) (0) | 2021.02.20 |
| (하둡 기초) ep07_하둡 고가용성(HA:High Availability)이란? (0) | 2021.02.04 |
| (하둡 기초) ep06_주키퍼(Zookeeper)란? (0) | 2021.02.04 |
| (하둡 기초) ep04_ MapReduce 맵리듀스란? (0) | 2021.02.04 |