• 欢迎来到魔据教育大数据学院,专注大数据工程师培养!
    当前位置:首页 > 学习资料 > 讲师博文 > 问题datanode无法正常启动

    问题datanode无法正常启动

    时间:2017-10-23 09:17:03作者:[!--zuozhe--]

    hadoop的最基本的5个进程中datanode无法正常启动,进程在开启一?#38382;?#38388;后莫名其妙挂掉:

    原因分析: 
      datanode为hadoop集群?#23548;?#25968;据的存储,它的存活状况直接决定了数据能否读写,如果出现了上述问题,首先要查看一下集群内的所有节点的情况,看是不是每个节点都是只少了一个datanode,如果同时少了namenode和datanode,这种问题需要检查配置文件,一般都是配置信息由问题,或者网络不通等问题造成的。如果发现所有节点都是只少了一个datanode,这种问题一般都是由于重复的格式化,导致namenode和datanode的ID不一致。
    解决办法:
    针对解决这类问题有两种方法:
    1、 ?#28909;?#26159;有于ID不一致,那么找到两个ID的位置,把namenode和datanode的ID改为一样的。这个文件的位置是根据core-site.xml的配置决定的,我的配置如下目录在:
    问题datanode无法正常启动 
    所以我需要修改如下地址的文件
    /usr/hadoop/hadoop-2.6.0/tmp/dfs/data/current-------datanode 目录下面的文件VERSION,
    /usr/hadoop/hadoop-2.6.0/tmp/dfs/name/current------namenode目录下面也有VERSION,
    两个文件中都有一个clusterID的字段,把datanode的ID改成namenode的ID,
    下图为正常之后的集群服务项
    问题datanode无法正常启动 
    2、删除配置目录的tmp目录:
        Shell代码
    rm -rf /usr/hadoop/hadoop-2.6.0/tmp/dfs/data
    rm -rf /usr/hadoop/hadoop-2.6.0/tmp/dfs/name/
    然后重新格式化,使?#20040;?#26041;式会导致集群的数据丢失,不建议生产环境使用
    hadoop datanode -format
    下图为正常之后的集群服务项
    问题datanode无法正常启动

    更多大数据相关资讯敬请关注魔据教育,为您分享最及时的大数据资讯。
    学习大数据敬请关注魔据教育微信二维码。
    魔据教育微信二维码

    【版权与免责声明】如发现内容存在版权问题,烦请提供相关信息发?#22987;?#33267;[email protected],我们将及时沟通与处理。本站内容除非来源注明魔据教育,否则均为网友转载,涉及言论、版权与本站无关。

    全国咨询热线:18501996998,值班手机:18501996998(7*24小时)

    在线咨询:张老师QQ 320169340

    企业合作服务专线:010-82340234-821, 院校合作洽谈专线:010-82340234

    Copyright 2001-2019 魔据教育 - ?#26412;?#21326;育兴业科技有限公司 版权所?#26657;?#20140;ICP备17018991号-2

    安徽十一选五开奖号码