脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 网站技巧 → 服务器 → 服务器其它 → hadoop重新格式化hdfs

hadoop重新格式化HDFS步骤解析

 更新时间：2017年10月17日 11:23:33   作者：liuyazhuang  
这篇文章主要介绍了hadoop重新格式化HDFS步骤解析，由于此方法需要将HDFS中数据全部清除，用者需注意。

了解Hadoop的同学都知道，Hadoop有两个核心的组成部分，一个是HDFS，另一个则是MapReduce，HDFS作为Hadoop的数据存储方案，MapReduce则提供计算服务；同时，HDFS作为一种分布式文件系统，它的安装也是需要相应的格式化操作的，如果安装失败或者我们需要重新安装的时候，那我们就需要对HDFS重新进行格式化，这篇文章就和大家一起讨论下如何进行HDFS的重新格式化。

重新格式化hdfs系统的方法：

1、打开hdfs-site.xml

我们打开Hadoop的hdfs-site.xml，基本配置如下所示：

<property> 
  <name>dfs.name.dir</name> 
  <value>/usr/local/hadoop/hdfs/name</value> 
</property> 
<property> 
  <name>dfs.data.dir</name> 
  <value>/usr/local/hadoop/hdsf/data</value> 
</property>

将 dfs.name.dir所指定的目录删除、dfs.data.dir所指定的目录删除，及我们需要删除hdfs-site.xml中配置的存储信息路径。

2、删除core-site.xml配置文件指定的相关目录

<property> 
  <name>hadoop.tmp.dir</name> 
  <value>/usr/local/hadoop/hadooptmp</value> 
</property>

 将hadoop.tmp.dir所指定的目录删除，即删除Hadoop的临时文件路径。

3、重新执行命令：hadoop namenode -format

格式化完毕。

这种格式化HDFS的方式是需要把原来HDFS中的数据全部清空，然后再格式化并安装一个全新的HDFS。

注：这种格式化方式需要将HDFS中的数据全部清空，以后我们探讨不需删除数据即可重新格式化的方法。

总结

以上就是本文关于hadoop重新格式化HDFS步骤解析的全部内容，希望对大家有所帮助。感兴趣的朋友可以继续参阅：浅谈七种常见的Hadoop和Spark项目案例等以及本站其他相关专题，如有不足之处，欢迎留言指出。感谢朋友们对本站的支持！

您可能感兴趣的文章:

相关文章

  • 伪静态URL中文乱码问题解决方法

    伪静态URL中文乱码问题解决方法

    ISAPI_Rewrite伪静态中文URL乱码的解决方案 细心有朋友会发现，在众多知名程序，比如ShopEx网店、Discuz论坛等系统的伪静态规则都存在中文编码问题
    2014-07-07
  • N点主机管理系统重置密码方法(在线修改密码)

    N点主机管理系统重置密码方法(在线修改密码)

    这篇文章主要介绍了N点主机管理系统重置密码方法(在线修改密码),需要的朋友可以参考下
    2015-10-10
  • 使用Npcap库开发简单的扫描功能

    使用Npcap库开发简单的扫描功能

    nmap（Network Mapper）是一款开源免费的针对大型网络的端口扫描工具,nmap可以检测目标主机是否在线、主机端口开放情况、检测主机运行的服务类型及版本信息、检测操作系统与设备类型等信息,本文主要介绍nmap工具安装和基本使用方法,
    2024-08-08
  • CentOS简单操作命令及node.js的安装方法

    CentOS简单操作命令及node.js的安装方法

    这篇文章主要介绍了CentOS简单操作命令及node.js的安装方法,列举了CentOS的常用查看命令及安装node.js的方法,需要的朋友可以参考下
    2016-05-05
  • https证书选择之DV型、OV型、EV型证书的主要区别

    https证书选择之DV型、OV型、EV型证书的主要区别

    这篇文章主要介绍了https证书选择之DV型、OV型、EV型证书的主要区别,需要的朋友可以参考下
    2017-09-09
  • 宝塔面板安装部署SSL证书的教程

    宝塔面板安装部署SSL证书的教程

    SSL证书是网站实现https加密访问的关键要素,它通常是安装部署在Web服务器上,本文主要介绍了宝塔面板安装部署SSL证书的教程,具有一定的参考价值,感兴趣的可以了解一下
    2023-08-08
  • 关于GitLabAPI的详细使用教程

    关于GitLabAPI的详细使用教程

    这篇文章主要介绍了关于GitLabAPI的详细使用教程,GitLab作为一个开源、强大的分布式版本控制系统,目前已经被广泛使用,还不会的朋友可以一起来看看
    2023-03-03
  • Tomcat目录结构详细介绍

    Tomcat目录结构详细介绍

    今天和大家一起聊聊关于Tomcat目录结构以及各个目录，相关文章的具体作用
    2018-10-10
  • 生产级K8S基础环境部署配置流程

    生产级K8S基础环境部署配置流程

    这篇文章主要为大家介绍了生产级K8S入门之基础环境的部署过程，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多
    2022-03-03
  • 如何从Steam社区屏蔽分析绕过方法及ASF安全部署

    如何从Steam社区屏蔽分析绕过方法及ASF安全部署

    这篇文章主要介绍了从Steam社区屏蔽分析绕过方法及ASF安全部署,本文主要记录在Ubuntu(Linux)服务器上的部署教程,但对于没有用过ASF并不熟悉Nginx的萌新来说,还是建议在Windows上调试成功后再转到云服务器上,需要的朋友可以参考下
    2024-05-05

最新评论