Hbase表中的不一致[区域未部署在任何区域服务器上]

问题描述 投票：2回答：2

在小型HBase群集中，所有从属节点都重新启动。当我启动HBase服务时，其中一个表（测试）变成inconsistent。

在HDFS中，缺少某些块（hbase块）。因此它处于安全模式。我给了safemode -leave命令。

然后，HBase表（测试）变得不一致。

我执行了以下提到的动作：

  1. 我执行了“ hbase hbck”多次。发现表“ test”的2个不一致。

    ERROR: Region { meta=>test,1m\x00\x03\x1B\x15,1393439284371.4c213a47bba83c47075f21fec7c6d862., hdfs => hdfs://master:9000/hbase/test/4c213a47bba83c47075f21fec7c6d862, deployed => } not deployed on any region server.

  2. hbase hbck -fixMeta -fixAssignments HBaseFsckRepair：区域仍在过渡中，等待其被分配：

    {NAME => 'test,1m\x00\x03\x1B\x15,1393439284371.4c213a47bba83c47075f21fec7c6d862.', STARTKEY => '1m\x00\x03\x1B\x15', ENDKEY => '', ENCODED => 4c213a47bba83c47075f21fec7c6d862,}

  3. hbase hbck -repair HBaseFsckRepair：区域仍在过渡中，等待其被分配：

    {NAME => 'test,1m\x00\x03\x1B\x15,1393439284371.4c213a47bba83c47075f21fec7c6d862.', STARTKEY => '1m\x00\x03\x1B\x15', ENDKEY => '', ENCODED => 4c213a47bba83c47075f21fec7c6d862,}

  4. 我已同时检查datanode日志。

    日志：

    org.apache.hadoop.hdfs.server.datanode.DataNode: opReadBlock BP-1015188871-192.168.1.11-1391187113543:blk_7616957984716737802_27846 received exception java.io.EOFException WARN org.apache.hadoop.hdfs.server.datanode.DataNode: DatanodeRegistration(192.168.1.12, storageID=DS-831971799-192.168.1.12-50010-1391193910800, infoPort=50075, ipcPort=50020, storageInfo=lv=-40;cid=CID-7f99a9de-258c-493c-9db0-46b9e84b4c12;nsid=1286773982;c=0):Got exception while serving BP-1015188871-192.168.1.11-1391187113543:blk_7616957984716737802_27846 to /192.168.1.12:36127

  5. 已检查Namenode日志

    ERROR org.apache.hadoop.security.UserGroupInformation: PriviledgedActionException as:ubuntu (auth:SIMPLE) cause:java.io.FileNotFoundException: File does not exist: /hbase/test/4c213a47bba83c47075f21fec7c6d862/C 2014-02-28 14:13:15,738 
INFO org.apache.hadoop.ipc.Server: IPC Server handler 6 on 9000, call org.apache.hadoop.hdfs.protocol.ClientProtocol.getBlockLocations from
10.10.242.31:42149: error: java.io.FileNotFoundException: File does not exist: /hbase/test/4c213a47bba83c47075f21fec7c6d862/C java.io.FileNotFoundException: File does not exist: /hbase/test/4c213a47bba83c47075f21fec7c6d862/C at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getBlockLocationsUpdateTimes(FSNamesystem.java:1301)

但是，我能够从HDFS浏览和下载文件。如何恢复数据？

如何使“测试”表保持一致？

java hadoop hbase cloudera
2个回答
4
投票

在HBase 2.0（可能还有以前的版本）中，“未部署在任何区域服务器上”通常是通过分配区域来解决的。

  1. 如果您在安全群集上，请进行身份验证。您位于安全集群上，不是吗？ ;）

    kinit [keytab] [principal]

  2. 运行HBase检查以查看具体未分配的区域

    hbase hbck -details

  3. 如果看到这样的错误：

    ERROR: Region { 
    meta => my.tablename,,1500001112222.abcdef123456789abcdef12345678912., 
    hdfs => hdfs://cluster/apps/hbase/data/data/default/my.tablename/abcdef123456789abcdef12345678912,
    deployed => ,
    replicaId => 0 
} not deployed on any region server.

    （密钥是“未部署在任何区域服务器上”），那么您应该分配区域。事实证明，这非常简单。继续执行步骤4。

  4. 打开hbase外壳

    hbase shell

  5. 通过将编码的区域名称传递给assign方法来分配区域。如帮助文档中所述，在没有事先尽职调查的情况下不应调用此命令（因为此命令将进行强制重新分配）。文档说，我告诫：仅供专家使用。hbase(main):001:0> assign 'abcdef123456789abcdef12345678912' 

  6. 通过对包含未分配区域的表运行hbase检查，再次检查您的工作。
    7. hbase hbck my.tablename 

    如果您正确执行了所有操作，并且没有潜在的HDFS问题，那么您应该在hbck输出的底部附近看到此消息：
    0 inconsistencies detected.
Status: OK


    

    
    
    

    

        

            

                

                    
0
投票

                    
                

            

        

        
在Hbase 2.0.2版本中，没有修复选项可以恢复不一致。

    

    


  

  

    
最新问题


  





  

    © www.soinside.com 2019 - 2024. All rights reserved.