Hadoop
-
우분투(Ubuntu) 하둡(Hadoop) 버추얼 박스 네트워크 설정 (Virtual Box Network)Hadoop 2019. 6. 5. 22:54
하둡은 분산 컴퓨팅을 통해 빅데이터를 처리할 수 있도록 돕는 프레임워크(?)이다. 실제 실습때 애먹었던 부분들 기록해두고자 포스팅. 우분투 기준으로 작성했고 버추얼박스, 우분투 ios 파일설치과정은 생략. 하둡은 리눅스 운영체제에서 사용하는 것이 특화되어 있다. 리눅스 관련 명령어, VI에 익숙하면 유리하다. 하둡은 다음 3가지 모드로 구성돼 있다. Local (Standalone) Mode 로컬(독립)모드 로컬 머신에서만 실행되는 모드. 다른 노드와 통신할 필요가 없기 때문에 HDFS(HaDoop File System)를 사용하지 않으며 다른 데몬들 도 실행시키지 않음 독립적으로 MapReduce 프로그램의 로직을 개발하고 디버깅하는데 주로 사용 Pseudo-Distributed Mode [가상분산 모..