(1)HDFS的块设置太小,会增加寻址时间,程序一直在找块的开始位置;
(2)如果块设置的太大,从磁盘传输数据的时间会明显大于定位这个块开 始位置所需的时间。导致程序在处理这块数据时,会非常慢。
总结:HDFS块的大小设置主要取决于磁盘传输速率。
上一篇 kafka名字解释
下一篇 Flink自定义sink端SinkFunction的应用
版权所有 (c)2021-2022 MSHXW.COM
ICP备案号:晋ICP备2021003244-6号