HDSF 관리자 명령어로 안전모드 상태 변경
Big Data2012. 5. 23. 09:52HDSF 관리자 명령어로 안전모드 상태 변경

HDFS 안전모드 (safe mode) 상태로 변경했을 경우 dfsadmin 명령어로 다음과 같이 조치한다. /hadoop install~/bin/hadoop dfsadmin -safemode enter | leave | get | wait

HDFS 파일 특정 부분을 읽어와 로컬 디스크 파일 저장 코드
Big Data2012. 5. 23. 09:52HDFS 파일 특정 부분을 읽어와 로컬 디스크 파일 저장 코드

입력되는 argument 는 파일명, offset, length 이고 HDFS 에 있는 args[0] 파일에 접근해서 offset 위치에서부터 length 크기만큼의 데이터를 local 에 args[0] 파일명으로 저장하는 코드 public class file_hadoop { public static void main(String[] args) throws Exception { String uri = args[0]; int buf = 1024 * 1024 * 10; int fileNum = 0; byte bytearray[] = new byte[buf]; long offset = Long.parseLong(args[1]); long length = Long.parseLong(args[2]); int Re..

image