hbase 相关问题

HBase是Hadoop数据库(columnar)。当您需要对大数据进行随机,实时读/写访问时,请使用它。该项目的目标是托管非常大的表 - 数十亿行X百万列 - 在商品硬件集群上。

过滤特定列中的特定字符串,否则过滤另一列中的另一个字符串

manufacturer_status 组织 年 目标 ABC 2012年 已达成 ABC 2014年 部分的 ABC 2015年 失败的 XYZ 2014年 部分的 XYZ 2015年 失败的 OPQ 2012年 失败的 我想要每个

回答 1 投票 0

SQL根据条件过滤行

我在实现根据 sql 中的条件获取特定行的用例方面面临挑战。我尝试了不同的选项,例如 where 或 LAG 函数。但无法打通。 表 -

回答 1 投票 0

活动 NameNode 崩溃

我需要一些帮助来解决根本原因。我怀疑这个问题可能与在 VMS 中运行的集群以及使用外部 Ceph 存储进行所有操作有关,但我需要确认。以下是...

回答 1 投票 0

如何避免Hbase刷新小文件

我们的 HBase 集群(版本 2.1.10)生成的 HFile 过小, 通常低于 10 MB,有时低至 2 KB。 尽管将 hbase.hregion.memstore.flush.size 配置为 256,但还是会发生这种情况...

回答 1 投票 0

通过Java代码与Docker中运行的HBase交互

我对 Hbase 和 Java 还很陌生。我成功地在 docker 中运行了 HBase 镜像,我可以使用 hbase shell 顺利地进行交互。我还可以访问用于监控 HBase 的 UI。然而,当我

回答 1 投票 0

如何使用Kafka Streams/Connect保持MySQL数据库与HBASE同步?

我想借助 Kafka Streams 或 Kafka Connect 根据 MySQL 生成的更新触发器同步 HBASE 数据库。关于其可能性以及如何可能的任何建议?

回答 1 投票 0

连接远程HBase实例时出现TableNotFoundException

我正在尝试连接到安装在 ubuntu 虚拟机上的远程 hbase-0.94.8。我遇到了 TableNotFoundException,这是我的 Java 代码: 配置config = HBaseConfiguration.create(); 配置.设置(“

回答 1 投票 0

HBase 未检测到.Meta 表

我使用 10 台 PC 的 HBase 集群已经有一段时间了。在我昨晚停止集群之前,一切都工作正常。但是当我今天早上启动集群时,我注意到 HBase

回答 2 投票 0

使用哪个数据库进行游戏分析?

我们正在构建一个包含许多游戏的应用程序。孩子们在玩这些游戏时会学习数学。所有用户个人资料数据、游戏数据和课程/问题数据都存储在...

回答 2 投票 0

如何存储大量小文本文件并快速访问?

我需要存储很多小文本文件(~30亿个,每天增长70m),大小从100B到几kB。我可以将它们分组,但组中的项目数量不可预测:从 1 到...

回答 1 投票 0

运行“import-hbase.sh”文件以从 hbase 提取元数据时出现问题

我正在使用以下容器运行 Docker 堆栈: 阿特拉斯(阿帕奇阿特拉斯) 风暴 卡桑德拉 雨云 卡夫卡 数据库 动物园管理员 Apache Atlas 服务正在运行,我可以访问用户界面...

回答 1 投票 0

如何在 Apache Atlas 中显示 HBase 数据沿袭?

我正在测试 Apache Atlas 数据治理工具来显示 NoSQL 数据库的数据沿袭。 据我所知,HBase 是目前唯一受支持的 NoSQL 数据库(输入元数据源)。 我已经看到...

回答 1 投票 0

`hbase:meta`区域不在线的问题

日志显示 hbase master 未初始化 2024-08-06 13:53:49,324 INFO [ProcExecTimeout] 分配。AssignmentManager:在失效服务器上发现 0 个开放区域,在未知的服务器上发现 240 个开放区域

回答 1 投票 0

使用 hbase-testing-utility 2.2.3 将 hadoop 升级到 3.1.2

目标 我想从 HDFS 切换到 s3a 客户端。为此,我需要从 Hadoop 2.8.5 至少升级到 3.1.2,因为我需要使用 AssumedRoleCredentialProvider 进行 AWS 访问。

回答 1 投票 0

java.lang.IllegalStateException:无法加载 SIMPLE、KERBEROS 和 DIGEST 身份验证提供程序。类路径不正常

我们使用 HBase Java 客户端向 GCP Dataproc 集群中运行的 HBase 服务读取和写入数据。最近我们更新了Java版本、HBase客户端版本和Spring boot版本。 Java 运行时版本...

回答 1 投票 0

Sqoop 导入 HBase - SQL 数据库

我想将我的数据从SQL数据库迁移到HBase。我的问题之一是我的 SQL 表没有主键,因此要克服这个问题。我在 Sqoop 查询中使用复合键。我已经成功了

回答 1 投票 0

主启动无法进行,保持模式直到区域上线

我已经设置了一个具有两个节点的 Hbase 集群,并且我注意到警告“AssignmentManager:STUCK Region-In-Transition”,该警告不允许主节点启动。 节点 1:observepreserve.corp.com (

回答 2 投票 0

检查 Hbase 本机扩展收到 WARN [main] lz4.Lz4Compressor: java.lang.UnsatisfiedLinkError

我正在运行 hbase 和 hadoop hdfs 集群(3 个节点,同时运行 hadoop 和 hbase)。它们是hadoop-3.2.2和hbase-2.3.6和jdk 11.0.14,并且不稳定。升级到hadoop-3.3.3后...

回答 1 投票 0

从kafka读取数据并写入hadoop/hbase/hive/spark堆栈批量处理

我有一个技术堆栈,其中 Hadoop 作为原始数据的分布式存储,HBase 作为在 Hadoop 和 HDFS 之上运行的 NoSQL 数据库,Hive 作为 Hive 之上的 RDBMS 数据仓库,用于应用程序...

回答 1 投票 0

为什么HBase可以快速点查询,而ClickHouse不适合

基于“ClickHouse点查询昂贵的关键原因是其主MergeTree表引擎系列的稀疏主索引”,ClickHouse并不擅长点

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.