Category Archives: Development

apache hcatalog 설치와 삽질기..

by apollo89 Posted on 2012년 8월 10일

  apache hcatalog 설치 홈페이지 : http://incubator.apache.org/hcatalog/ 설치환경 : Ubuntu 64bit hadoop-1.0.0, hive-0.8.1, mysql 5.1.63, zookeeper-3.3.4, hcatalog-0.4.0, hbase-0.92.1 hcatalog 설치 $ wget http://mirror.apache-kr.org/incubator/hcatalog/hcatalog-0.4.0-incubating/hcatalog-src-0.4.0-incubating.tar.gz $ tar xvzf hcatalog-src-0.4.0-incubating.tar.gz $ cd hcatalog-src-0.4.0-incubating $ ant -Dhcatalog.version=0.4.0 tar $ cp /home/hcatalog/hcatalog-src-0.4.0-incubating/build/hcatalog-0.4.0.tar.gz /home/hcatalog/ $ cd … Continue reading →

Posted in Bigdata/Hadoop | Tagged , , | 3 Comments

Apache Hadoop Ecosystem 소개

by apollo89 Posted on 2012년 7월 18일

Apache Hadoop Ecosystem은 HDFS를 비롯하여 여러 오픈소스 프로젝트로 구성되어 있다. 대표적인 프로젝트는 다음과 같다. <Big Data Analysis> * HDFS: Hadoop Distributed Filesystem (http://wiki.apache.org/hadoop/HDFS) <- 사용중 * Fuse-DFS: Mountable HDFS (http://wiki.apache.org/hadoop/MountableHDFS/) * HBase: NoSQL (http://hbase.apache.org/) <- 사용중 * HCatalog: 테이블 관리 … Continue reading →

Posted in Bigdata/Hadoop | Tagged , , | Leave a comment

redmine 의 roadmap 에 담당자 정보와 상태 정보가 보이도록 수정

by apollo89 Posted on 2012년 7월 3일

  redmine의 roadmap 으로 sprint review 를 하는데 담당자 정보가 안보여서 자꾸 헤메서 redmine 의 roadmap 에 담당자 정보 보이도록 수정했다. vi {redmine}/app/views/versions/index.html.erb …     <table class=”list related-issues”>     <caption><%= l(:label_related_issues) %></caption>     <% issues.each do |issue| … Continue reading →

Posted in Util/Tools | Tagged , , , , | Leave a comment

주목! 9가지 오픈소스 빅 데이터 기술

by apollo89 Posted on 2012년 7월 1일

  주목! 9가지 오픈소스 빅 데이터 기술 갈수록 많은 기업들이 더 많은 데이터를 축적하며 경쟁력 향상을 꾀하고 있다. 그리고 이와 같은 빅 데이터 열풍의 중심에는 오픈소스 기술이 자리 잡고 있다. 여기 독자 여러분이 주목해야 할 아홉 개의 오픈소스 빅 데이터 … Continue reading →

Posted in Bigdata/Hadoop, Scrap | Tagged , , , , , , , , , , | Leave a comment

Syslog-NG 설치 및 설정

by apollo89 Posted on 2012년 6월 28일

  목표 : 모든 서버의 SYSLOG를 로그 서버로 쏘게 하고, 로그서버에서는 HOST-yyyymmdd.log 를 만들어 관리하도록 설정. Syslog-NG(Syslog New Generation)는 보다 향상된 필터링 및 포워딩 기능 외에 메시지 무결성과 암호화 기능을 추가하여 syslog의 유연성을 증가시켰으며, TCP와 UDP 프로토콜을 통한 원격 Logging을 … Continue reading →

Posted in System | Tagged , , | Leave a comment

maven-dependency-plugin (goals “copy-dependencies”,”unpack”) is not supported by m2e 에러..

by apollo89 Posted on 2012년 6월 26일

  pom.xml 부분 jar를 작성하기 위해서는 maven-jar-plugin 이 필요하며, 의존성 jar 파일들을 제어하기 위해서는 maven-dependency-plugin이 필요하다. 그러나 maven-dependency-plugin 설정을 하여 m2eclipse로 package하게 되면 다음과 같은 메세지의 에러가 발생된다. maven-dependency-plugin (goals “copy-dependencies”,”unpack”) is not supported by m2e 이를 해결하기 위하여 구글링해보면, … Continue reading →

Posted in Java/JSP, Util/Tools | Tagged , , | Leave a comment