java编写MapReduce

很多朋友不清楚如何用java来编写MapReduce,今天小编整理了科多大数据马老师提供的相关资料,希望大家有帮助
首先,创建一个类为WordMap需要继承org.apache.hadoop.mapreduce.Mapper类,该类有四个泛型(in key类型,in value类型,outkey类型,out value类型)
Long(偏移量)一般不会使用
in value类型,表示是一行的内容(string)
out key类型,String
out value类型int
如果使用以下类型,在处理时会报错
public class WordMap extends Mapper<Long,String,String,Integer>
LongWritable 对应long
Text对应String
IntWritable 对应Integer
1、map类中需要进

猜你喜欢

转载自blog.csdn.net/weixin_41852491/article/details/80482774