HDFS文件块的大小为什么不能设置太小、也不能设置太大？

浅浅的花香味﹌ 2023-10-14 12:01 87阅读 0赞

把大的文件块切分成一个个小的文件块，有利于并发传输，所以传输速度快，文件块太大的话，不能并发传输，一个文件太大，所以传输速率很慢。（正常查找块的时间为传输块数据的1%）

普通的磁盘传输速率为100MB/S，好的磁盘传输速率为200-300MB/S，一般小公司用的100MB/s的磁盘，大公司用的200-300MB/S的磁盘，所以小公司会把文件块以128MB进行存储，大公司会把文件块以256MB进行存储。

发表评论取消回复

表情：

评论列表（有 0 条评论，87人围观）

还没有评论，来说两句吧...

相关阅读

相关 HDFS文件块的大小为什么不能设置太小、也不能设置太大？

![up-e6f952444555e5361346bfde8d30a931cd1.png][] 把大的文件块切分成一个个小的文件块，有利于并发传输，所以传输速度快，文件块太大

浅浅的花香味﹌/ 2023年10月14日 12:01/ 0 赞/ 88 阅读

相关【问题】HDFS中块（block）的大小为什么设置为128M？

一、为什么HDFS中块（block）不能设置太大，也不能设置太小？ 1. 如果块设置过大，一方面，从磁盘传输数据的时间会明显大于寻址时间，导致程序在

太过爱你忘了你带给我的痛/ 2023年10月04日 16:01/ 0 赞/ 73 阅读

相关 HDFS 块大小设置

减少硬盘寻道时间(disk seek time) 假如数据块设置过少，那需要读取的数据块就比较多，由于数据块在硬盘上非连续存储，所以随机寻址较慢，

╰半夏微凉°/ 2023年08月17日 15:19/ 0 赞/ 177 阅读

相关设置 HTML网页内容设置不能复制

Body 里面加上这个就不能复制了 <body οnmοusemοve=HideMenu() οncοntextmenu="return false" οndragsta

柔情只为你懂/ 2023年07月25日 14:09/ 0 赞/ 10 阅读

相关太大怎么变小_PDF文件太大怎么变小？如何调整PDF文件压缩的大小？

PDF文件太大怎么变小？一份优质的PDF文件中需要有完整的文字、精美的配图、准确的数据表格以及一些特殊内容。不过这样的PDF文件体积是比较大的，在传输之前需要将文件压缩变小。可

向右看齐/ 2023年01月06日 11:55/ 0 赞/ 232 阅读

相关设置数据项值不能为空

要是数据项为空置或者非空，需要在创建数据表的时候把数据表的字段创建的更加完善；字段就是数据项； mysql> CREATE TABLE tb2( \

雨点打透心脏的1/2处/ 2022年05月20日 08:56/ 0 赞/ 383 阅读

相关女人为什么不能太早结婚，以及为什么要坚持读书

这本书告诉了女人为什么不能太早结婚，以及为什么要坚持读书 2018-01-24 22:00[读书][Link 1]/[小说][Link 2]/[女性][Link 3]

曾经终败给现在/ 2022年05月19日 03:17/ 0 赞/ 250 阅读

相关设置input不能输入空格

<input class="common-text required" id="imageUrl" name="title" size="50" value=""

缺乏、安全感/ 2022年04月17日 03:13/ 0 赞/ 266 阅读

相关别太单纯，也别太不单纯

1、做一个寡言，却心有一片海的人。 2、若爱，请深爱；如弃，请彻底。暧昧，伤人伤己。 3、一个男人，若是不敢为他自己挺身而出，那么他永远保护不了别人。

╰+哭是因爲堅強的太久メ/ 2021年11月27日 07:48/ 0 赞/ 269 阅读

相关【大数据】——HDFS文件块大小设置原则

一、前言 HDFS 中的文件在物理上是分块存储（ block），块的大小可以通过配置参数( dfs.blocksize)来规定，默认大小在 hadoop2.x

我不是女神ヾ/ 2021年11月05日 03:31/ 0 赞/ 703 阅读