Computer/Etc26 hadoop distcp hdfs 간 파일을 복사하기 위해서는 distcp를 사용하면 된다.방법에 대해 정리해보면... 1. 실행은 destination hdfs에서 한다.2. destination의 모든 cluster에서는 source의 모든 cluster의 host name을 등록해야 한다.(/etc/hosts)3. hadoop distcp를 사용하여 복사한다.(디렉토리, 파일 지정) ex) hadoop distcp hdfs://source hdfs://destination (다른 버전간에 복사를 하려면, hadoop distcp hftp://source hdfs://destination) 간단하지만, 알고 있으면 할 수 있는 것이고, 모르면 잠시 삽질?!을 해야 하는 거라서 정리해놓는다. 참고 : http://hadoop... 2014. 10. 27. Empirical Evaluation of Algorithms 알고리즘 스터디 중 기억하면 좋을 내용을 블로깅 해봅니다.실제 개발시에 complexity를 고려하는 tip 입니다.책은 Python algorithms(Magnus Lie Hetland) 입니다. Empirical Evaluation of Algorithms(Practical Tips)Tip1 : If possible, don't worry about it. 먼저 구현해보고, 알고리즘이 적당한지 확인해라.Tip2 : For timing things, use timeit.Python 2.7.5 (default, Mar 9 2014, 22:15:05)[GCC 4.2.1 Compatible Apple LLVM 5.0 (clang-500.0.68)] on darwinType "help", "copyright".. 2014. 8. 31. 이전 1 ··· 4 5 6 7 다음