2019-01-28
閱讀量:
810
HDFS中的塊是如何設置的?
HDFS中的塊如何設置?
答:
塊的大小可以通過配置參數(shù)( dfs.blocksize)來規(guī)定,默認大小在hadoop2.x版本中是128M,老版本中是64M 。如果塊設置得足夠大,從磁盤傳輸數(shù)據(jù)的時間會明顯大于定位這個塊開始位置所需的時間。因而,傳輸一個由多個塊組成的文件的時間取決于磁盤傳輸速率。
如果尋址時間約為10ms,而傳輸速率為100MB/s,為了使尋址時間僅占傳輸時間的1%,我們要將塊大小設置約為100MB。默認的塊大小128MB。塊的大?。?0ms*100*100M/s = 100M 最合理






評論(0)


暫無數(shù)據(jù)
推薦帖子
0條評論
1條評論
0條評論