본문 바로가기

Dani's Stack145

날씨가 좋은 날에는 어제(2014년 11월 4일) 사진입니다.날씨가 좋은 날에는 사진을 막 찍고 싶어집니다.사진에는 안보이겠지만, 멀리 육지(?)도 보이는 것 같습니다.이렇게 좋은 환경에서 있다는 것에 다시 한번 감사하게 됩니다. :) 2014. 11. 5.
암호없이 ssh 로그인 설정하기 간단하게 다음의 과정을 통해서 암호없이 로그인 설정을 할 수 있다. 1. $ ssh-keygen -t rsa2. $ ssh-copy-id username@hostname 1의 과정은 public key를 생성하는 과정이고2의 과정은 public key를 복사하는 과정이다. * 주의사항- 1의 과정에서는 암호를 넣으라는 메시지에 암호를 넣지 않고 키를 생성해야 한다.- 2의 과정에서는 암호없이 접속할 서버(hostname)에서 hosts.allow에 현재 서버가 등록되어 있어야 한다. 2014. 10. 29.
console에서 stdout, stderr 저장하기 console을 사용하다보면, stdout 또는 stderr에 대한 출력을 저장해야 할 경우가 있다.stdout, stderr 출력을 함께 저장할 때도 있고, 각각 저장해야 할 경우도 있다.자주 사용하지만, 잘 잊어버리는 부분이라 정리한다. 1. 각각 저장할 때$ test.sh > stdout_log 2> stderr_log 2. 함께 저장할 때(이때 로그가 출력되는 순서가 유지되면서 저장된다.)$ test.sh > stdout_stderr_log 2>&1 또, 다른 사용법이 있지만 정리해야할 필요가 있을 때 정리할 예정이다.이상 끝. 2014. 10. 28.
hadoop distcp hdfs 간 파일을 복사하기 위해서는 distcp를 사용하면 된다.방법에 대해 정리해보면... 1. 실행은 destination hdfs에서 한다.2. destination의 모든 cluster에서는 source의 모든 cluster의 host name을 등록해야 한다.(/etc/hosts)3. hadoop distcp를 사용하여 복사한다.(디렉토리, 파일 지정) ex) hadoop distcp hdfs://source hdfs://destination (다른 버전간에 복사를 하려면, hadoop distcp hftp://source hdfs://destination) 간단하지만, 알고 있으면 할 수 있는 것이고, 모르면 잠시 삽질?!을 해야 하는 거라서 정리해놓는다. 참고 : http://hadoop... 2014. 10. 27.

티스토리툴바