21ic电子技术开发论坛 › 综合技术交流 › 电子技术交流论坛 › 有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ...
返回列表 发新帖我要提问

有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?

[复制链接]
1245|1
 楼主| ssdandan 发表于 2022-10-24 11:28 | 显示全部楼层 |阅读模式
大数据
有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制？
回复

收藏 举报

相关帖子
szhlss123 发表于 2022-10-24 11:54 | 显示全部楼层

有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?

HDFS上在写入数据的时候，首先会对数据切块，然后从客户端到datanode形成一个管道，在至少将一个文件写入hdfs上后，表示文件写入成功，然后进行复制备份操作，所以是全部写完再复制。
学习可关注：人工智能技术与咨询，或到我司官网了解：https://www.chinaai.org.cn/。

回复

收藏 举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则

ssdandan

13

主题

13

帖子

0

粉丝
快速回复 在线客服 返回列表 返回顶部