본문 바로가기

OpenSource/Hadoop

Hadoop Install & Build

#1.Install


1) Hadoop 2.6.0 Install (ubuntu)


http://www.bogotobogo.com/Hadoop/BigData_hadoop_Install_on_ubuntu_single_node_cluster.php


(Hadoop 설치는 이거 보고 하면됨.)


https://wiki.apache.org/hadoop/GitAndHadoop (Compile)


http://wiki.apache.org/hadoop/ (Wiki)


jdk tools 1.8 경로 잡아주고


2) Linux 설치


 - http://studyforus.tistory.com/222


 - Linux 고정 IP 잡기


   http://klero.tistory.com/entry/%EC%9A%B0%EB%B6%84%ED%88%AC-%EA%B3%A0%EC%A0%95-%EC%95%84%EC%9D%B4%ED%94%BC-static-IP-%EC%84%A4%EC%A0%95%ED%95%98%EB%8A%94-%EB%B0%A9%EB%B2%95


3) ssh 설치


 - http://zetawiki.com/wiki/%EC%9A%B0%EB%B6%84%ED%88%AC_sshd_%EC%84%A4%EC%B9%98


antrun


http://stackoverflow.com/questions/16963847/execute-a-task-in-maven-before-packaging


maven 2.2

http://stackoverflow.com/questions/7602030/maven-resources-plugin-prior-to-2-4-is-not-supported-by-m2e


하나씩 고쳐가며 Maven -> Updateing Project 해줌

Source Code Analyze

http://play1490.tistory.com/m/post/4 (Linux)


http://hadoopguide.blogspot.kr/2014/01/install-hadoop-220-source-in-windows-7_25.html?m=1 (Window)


http://www.protechskills.com/big-data/hadoop/build-and-import-hadoop-2-4-0-source-on-eclipse-windows (2.4 Window)


Source Code Build

https://jaebfactory.wordpress.com/2013/12/14/hadoop-2-2-0-%EB%B9%8C%EB%93%9C%ED%95%98%EA%B8%B0/


해당 사이트 참조 (1.1, 2.0 버전 제대로 빌드 할 수 있음)


https://wiki.alliedmods.net/Compiling_libprotobuf (Windows 버전 빌드 이게 제일 최신 버전 2151217)


-> https://github.com/google/protobuf/releases?after=v2.6.1 (여기에 protobuf-2.5.0)


Install Problem

Missing jdk 1.6


1) 이거 정확한 lib.tools.jar를 잡아줘야함. (java/jdk.1.8.0/lib/tools.jar)


POM.xml 에러


1) Maven -> Error/Warnings 에서 LiefyCycle Ignore 처리

'OpenSource > Hadoop' 카테고리의 다른 글

Hadoop Problem  (0) 2016.06.03