Hadoop - 前端之家

频道导航

Hadoop 以下是为您整理出来关于Hadoop合集内容，如果觉得还不错，请帮忙转发推荐。

java – 在Hadoop Map-Reduce中,任何类在排序之后和分区之前是否会看到整个键列表？

我正在使用Hadoop来分析非常不均匀的数据分布.有些键有数千个值,但大多数只有一个.例如,与...

作者：前端之家时间：2020-01-22

java – Hadoop mapreduce：用于在MapReduce作业中链接映射器的驱动程序

我有mapreduce工作：我的代码Map类： public static class MapClass extends Mapper<T...

作者：前端之家时间：2020-02-02

java – 在多个CPU核心上运行独立的Hadoop应用程序

我的团队使用Hadoop库构建了一个 Java应用程序,将一堆输入文件转换为有用的输出. 考虑到当...

作者：前端之家时间：2020-02-02

java – 无头环境中的MapReduce作业由于容器启动的AM容器异常而失败了N次

在MacOSX中运行地图减少无头环境中的作业时(例如,当作为特定用户ssh时运行作业时),我得到以...

作者：前端之家时间：2020-02-03

java – 自定义MapReduce输入格式 – 找不到构造函数

我正在为Hadoop 0.20.2编写一个自定义的InputFormat,并且遇到NoSuchMethodException我无法...

作者：前端之家时间：2020-03-30

java – Amazon EMR：使用S3的输入和输出运行Custom Jar

我正在尝试运行具有自定义jar步骤的EMR集群.程序从S3获取输入并输出到S3(或者至少这是我想...

作者：前端之家时间：2020-04-07

java – hadoop map reduce程序中的InstantiationException

我是Hadoop框架的新手.我试图编写一个从hdfs读取 XML文件的程序,使用JDOM解析它并将其发送...

作者：前端之家时间：2020-04-26

由于java.io.NotSerializableException：org.apache.spark.SparkContext,Spark作业失败

当我尝试在RDD [(Int,ArrayBuffer [(Int,Double)])]输入上应用方法(ComputeDwt)时,我面临异...

作者：前端之家时间：2020-03-10

java – 错误的密钥类：文本不是IntWritable

这可能看起来像一个愚蠢的问题,但我没有在我的mapreduce代码中看到我的类型中的问题为hado...

作者：前端之家时间：2020-03-05

java – Apache Hadoop setXIncludeAware UnsupportedOperationException

我试图让Apache Hadoop 1.21运行,但是我得到这个例外： Failed to set setXIncludeAware(t...

作者：前端之家时间：2020-02-27

java – 不推荐使用HTable(config,tablename)类型.有什么用？

我可以用什么代替HTable(config,tablename)？此方法已弃用.在每个例子中,我可以发现他们使...

作者：前端之家时间：2020-02-24

Java – Hadoop中的流式或定制Jar

我在Hadoop(亚马逊的EMR)上运行流媒体作业,并使用 Python编写的mapper和reducer.我想知道如...

作者：前端之家时间：2019-08-19

java – Hadoop – mapper的构造函数args

有没有办法在Hadoop中为Mapper提供构造函数args？可能通过一些包装创造就业的图书馆？这是...

作者：前端之家时间：2019-08-19

java – 由于任务尝试无法报告状态600秒而导致reduce失败.杀！解？

作业的减少阶段失败了：失败的Reduce任务超出了允许的限制. 每个任务失败的原因是：任务...

作者：前端之家时间：2019-07-19

java – 在处理信息检索中面向行和面向列的数据库之间的区别

最近,我开始研究HBase(一个面向列的数据库).在通过源代码的时候,一个问题不断涌现在我的脑...

作者：前端之家时间：2019-07-14

当尝试从Java中读取HDFS中的文件时,“错误的FS …期望：file：///”

我无法使用 Java从HDFS读取文件： String hdfsUrl = "hdfs://<ip>:<port>...

作者：前端之家时间：2019-07-13

java – 从集群获取现有的mapreduce作业(作业可以运行或完成)

以前,我正在使用org.apache.hadoop.mapred.JobClient#getJob(org.apache.hadoop.mapred.Jo...

作者：前端之家时间：2019-07-02

上一页 4 5 6 7 8 91011 12 下一页

编程分类

PHP Java Java SE Python C#C&C++Ruby VB asp.Net Go Perl netty Django Delphi Jsp .NET Core Spring Flask Springboot SpringMVC Lua Laravel Mybatis Asp Groovy ThinkPHP Yii swoole

最新文章