hadoop重新格式化HDFS步骤解析

 更新时间:2017年10月17日 11:23:33   作者:liuyazhuang  
这篇文章主要介绍了hadoop重新格式化HDFS步骤解析,由于此方法需要将HDFS中数据全部清除,用者需注意。

了解Hadoop的同学都知道,Hadoop有两个核心的组成部分,一个是HDFS,另一个则是MapReduce,HDFS作为Hadoop的数据存储方案,MapReduce则提供计算服务;同时,HDFS作为一种分布式文件系统,它的安装也是需要相应的格式化操作的,如果安装失败或者我们需要重新安装的时候,那我们就需要对HDFS重新进行格式化,这篇文章就和大家一起讨论下如何进行HDFS的重新格式化。

重新格式化hdfs系统的方法:

1、打开hdfs-site.xml

我们打开Hadoop的hdfs-site.xml,基本配置如下所示:

<property> 
  <name>dfs.name.dir</name> 
  <value>/usr/local/hadoop/hdfs/name</value> 
</property> 
<property> 
  <name>dfs.data.dir</name> 
  <value>/usr/local/hadoop/hdsf/data</value> 
</property> 

将 dfs.name.dir所指定的目录删除、dfs.data.dir所指定的目录删除,及我们需要删除hdfs-site.xml中配置的存储信息路径。

2、删除core-site.xml配置文件指定的相关目录

<property> 
  <name>hadoop.tmp.dir</name> 
  <value>/usr/local/hadoop/hadooptmp</value> 
</property> 

 将hadoop.tmp.dir所指定的目录删除,即删除Hadoop的临时文件路径。

3、重新执行命令:hadoop namenode -format

格式化完毕。

这种格式化HDFS的方式是需要把原来HDFS中的数据全部清空,然后再格式化并安装一个全新的HDFS。

注:这种格式化方式需要将HDFS中的数据全部清空,以后我们探讨不需删除数据即可重新格式化的方法。

总结

以上就是本文关于hadoop重新格式化HDFS步骤解析的全部内容,希望对大家有所帮助。感兴趣的朋友可以继续参阅:浅谈七种常见的Hadoop和Spark项目案例等以及本站其他相关专题,如有不足之处,欢迎留言指出。感谢朋友们对本站的支持!

相关文章

  • LSI SAS1068 RAID 阵列卡图文配置教程

    LSI SAS1068 RAID 阵列卡图文配置教程

    这篇文章主要介绍了LSI SAS1068 RAID 阵列卡图文配置教程,需要的朋友可以参考下
    2016-06-06
  • Git安装和使用图文教程(分享)

    Git安装和使用图文教程(分享)

    下面小编就为大家带来一篇Git安装和使用图文教程(分享)。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2017-07-07
  • nexus服务器搭建的详细步骤

    nexus服务器搭建的详细步骤

    这篇文章主要介绍了nexus服务器搭建的详细步骤,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2018-09-09
  • KB967723造成MySQL频繁无法连接

    KB967723造成MySQL频繁无法连接

    最近一个客户服务器的mysql频繁提示连接不上,修改了MYSQL的最大连接数还是这样,于是开始问万能的搜索引擎大人!终于在微软找到了解决方案!
    2009-11-11
  • Nexus使用Api进行操作

    Nexus使用Api进行操作

    今天小编就为大家分享一篇关于Nexus使用Api进行操作,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2018-12-12
  • 关于Centos安装fabric遇到的问题和解决方法

    关于Centos安装fabric遇到的问题和解决方法

    这篇文章给大家分享的是一个之前碰到的问题了,今天有空写出来,让遇到这个问题的朋友能尽快解决,下面来一起看看吧。
    2016-09-09
  • 图片要启用gzip压缩吗(绝对不要)

    图片要启用gzip压缩吗(绝对不要)

    这篇文章主要介绍了图片要启用gzip压缩吗?绝对不要!,需要的朋友可以参考下
    2016-04-04
  • Rsync 服务安全加固方法

    Rsync 服务安全加固方法

    Rsync 是一个通过检查文件的时间戳和大小,来跨计算机系统高效地传输和同步文件的工具,建议您在使用 Rsync 服务端时,参考本文对 Rsync 服务进行安全加固,保障数据安全
    2018-02-02
  • 为什么Nginx的性能要比Apache高很多

    为什么Nginx的性能要比Apache高很多

    这篇文章主要介绍了为什么Nginx的性能要比Apache高很多,需要的朋友可以参考下
    2016-03-03
  • Centos下IP与DNS设置方法详解

    Centos下IP与DNS设置方法详解

    这篇文章主要介绍了Centos下IP与DNS设置方法,较为详细的分析了CentOS服务器针对DNS、IP、网关等的相关设置技巧与注意事项,需要的朋友可以参考下
    2016-10-10

最新评论