对大家有帮助的问答会被标记为“推荐”,看完课程过来浏览一下别人提的问题,会帮你学得更全面
老师,请问一下,NameNode配置多目录有什么意义呢?宕机的时候再多的目录都会丢失,还不如配置多台NameNode,实现高可用?
在搭建Hadoop全分布式时,修改完4个配置文件后 进行hdfs格式化时 报一下错误麻烦讲一下哪里出了问题
/home/dong/hadoop/hadoop-2.7.1/bin/hadoop:行166: /root/home/dong/java/jdk1.8.0_171/bin/java: 没有那个文件或目录
hdf格式化都正常,为什么datanode起不来?
hdf格式化都正常,为什么datanode起不来?
rm -rf hadoop-2.6.5/share/doc 是在apps目录下执行的,实际上不会删除任何东西
老师提示没有权限怎么办,HADOOP_USER_NAME也配了
我的理解:
HDFS客户端一个大文件,将文件进行block分块(每块128M)写,然后再将每个划分为多个package包(每个包64KB),然后将每个包传入到数据队列中,进行数据写操作。
我的疑问:
我以上的理解是否正确?如果正确,那么在由于在DataNode中,数据是按块存储的,对于在存储过程中,是不是要把这些包先合并成每个大小为128MB的块,再把合并后的块存储到block池中呢?希望老师解答疑惑
各位在看的道友,如果企图从老师说开始讨论以后,听出点什么神魔的奥秘,建议直接从下一个视频的6分钟开始,什么也听不出来的