Hadoop是一个Apache开源项目，为可靠和可扩展的分布式计算提供软件。核心由分布式文件系统（HDFS）和资源管理器（YARN）组成。各种其他开源项目，例如Apache Hive，使用Apache Hadoop作为持久层。
我是使用镶木地板文件的新手，我想开发一个 mapreduce 作业，它使用以下 shcema 读取许多输入的镶木地板文件： { 可选的 int96 dropoff_datetime； 可选浮动
是否可以在没有表名前缀的Hive中打印标题？我做了：设置hive.cli.print.header = true;然后：从品牌限制3中选择*;结果是：brands.id brands.name品牌....
我是hadoop mapreduce的新用户。我想测试mapreduce任务失败。谁能给我链接“测试mapreduce任务失败”的示例代码？
我是Hadoop的新手，并一直在网上寻找建立多节点集群的参考。在提到一些不同的网站和官方文档后（这太复杂了......
我想根据条件列出hadoop中的文件，并将输出附加到文本文件。下面是我使用的命令hadoop fs -ls / path / | grep'xxx'| awk'{print $ 8}'>> / ...
我使用8个地图任务和1个减少任务。尽管已成功完成所有映射任务尝试，但map reduce作业失败。我的示例代码来自Hadoop初学者指南（Garry Turkington），它是......
我正在处理超过1000000条json文件的记录我正在逐行读取文件并提取所需的键值（json是混合结构不能修复。所以我正在解析并生成需要的json ...
我正在通过Roberto在下面的帖子中给出答案。在Hive中分区和分区表有什么区别？它看起来像是按日期划分数据（如果...
汤姆怀特第4版“Hadoop”一书中讨论过jar文件的目的？
我下载了git repo并制作了jar文件，但无法找到他们的目的以及如何使用它们？
Hadoop MapReduce访问减速器中的映射器输出编号
我有一个映射器输出一个句子中的每个字母，这是键，数字1作为其值。例如，我的映射器输出'你好吗'为H 1 o 1 w 1 a 1 r 1 e 1 y 1 o 1 u 1我...
在我们的环境中，我们无法直接查询Hive元存储。我需要动态生成一组表的tablename，columnname对。我试图实现......
Hadoop pig连接错误 - historyserver无法启动
基本上有一个问题出现了：例如，这里描述了同样的问题。如果我尝试使用猪脚本，我会收到连接错误。调查一下，历史服务器确实不是......
我有两个文件，我试图在模式匹配的基础上加入这两个文件。 File1：weather.bbc.co.uk，112 ads.facebook.com，113 ads.amazon.co.uk，114 www.sky.com，115 news.bbc.co.uk，116 pics ....
我正在从s3读取csv文件并将其作为orc写入hive表。在写作时，它写的是很多小文件。我需要合并所有这些文件。我有以下属性集：spark.sql（“SET ...
我一直在CentOS上玩Hadoop安装一段时间，但今天当我转移到RHEL时，我在尝试启动伪分布式集群时遇到了令人讨厌的密码提示。之后......
假设我们有这样的工作：class MRjob（JobTask）：def output（self）：return ... def requires（self）：return ... def mapper（self，line）：＃some line process yield key，（.. ....
我的Hive表是ORC格式，当where子句中的列被排序时，其中的查询运行得最快。但就我而言，目前还没有。在查询之前对列进行排序的语法是什么。
我在thrift服务器模式下运行配置单元。我在一个jar文件中有一个UDF，我试图通过运行add jar来使用它 创建临时函数func_name为'com.test.udf.UDF_CLASS'...
我正在尝试执行简单的Hadoop Mapreduce Wordcount示例。我按照本指南运行程序。其中一个步骤是在hdfs文件系统上创建输入和输出文件夹。 ...
我正试图在蜂巢中导入以下json [{“时间”：1521115600，“纬度”：44.3959，“经度”：26.1025，“海拔”：53，“pm1”：21.70905，“pm25”：16.5，“ PM10 “：14.60085，” GAS1 “：0，” 气2 “：0.12，” GAS3 “：0，” ...