千家信息网

mapreduce中wordcount的java实现是怎样的

发表于:2025-12-02 作者:千家信息网编辑
千家信息网最后更新 2025年12月02日,mapreduce中wordcount的java实现是怎样的,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。用java模拟
千家信息网最后更新 2025年12月02日mapreduce中wordcount的java实现是怎样的

mapreduce中wordcount的java实现是怎样的,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。

用java模拟词频统计。

有3个文件:text1: hello world

text2:hello hadoop

text3:hello mapreduce

对上面的文件进行词频统计:结果应该是:hello:3; hadoop:1; world:1; mapreduce:1

代码实现如下:

package count;import java.util.Hashtable;import java.util.Iterator;import java.util.StringTokenizer;public class Count {    public static void main(String[] args) {        String [] text = new String[]{"hello world", "hello hadoop", "hello mapreduce"};        Hashtable ht = new Hashtable();        for(int i=0; i<3; i++){            StringTokenizer st = new StringTokenizer(text[i]);            while(st.hasMoreTokens()){                String word = st.nextToken();                if(!ht.containsKey(word))                    ht.put(word, new Integer(1));                else{                    int wc = ((Integer)ht.get(word)).intValue() + 1;                    ht.put(word, new Integer(wc));                }            }                    }        for(Iterator itr = ht.keySet().iterator(); itr.hasNext();){            String word = (String)itr.next();            System.out.print(word + ":" + (Integer)ht.get(word)+"; ");        }                }}

看完上述内容是否对您有帮助呢?如果还想对相关知识有进一步的了解或阅读更多相关文章,请关注行业资讯频道,感谢您对的支持。

0