HDFS 썸네일형 리스트형 부록. HDFS Block HDFS 는 Distributed file system 이고, large scale 한 파일을 저장하기 위한 용도로 많이 쓰인다는 것을 알것이다. 그럼 수천 GB 혹은TB 파일이 저장 된다고 생각해보면 이 큰 파일을 하나의 물리 노드에 쓴다는건 말이 안된다. 그래서 HDFS 는 이걸 Block 단위의 파일로 나누게 된다. Default block size 는 128M 이다. ( 원래는 64MB 였는데 버전 2.x 부터 128MB 로 바뀌었다 .정확한 버전은 기억이 안나서 ^^;; ) 여튼 이렇게 파일이 쪼개져서 어떻게 저장되는지 보도록 하겠다. ㅁ 실습1~10,000,000 까지 seq 하게 증가하는 파일을 하나 준비한다.test.txt 1 2 3 4 ... ... ... 99999999 10000000.. 더보기 이전 1 다음