mapreduce中wordcount的java實(shí)現(xiàn)是怎樣的

mapreduce中wordcount的java實(shí)現(xiàn)是怎樣的，很多新手對(duì)此不是很清楚，為了幫助大家解決這個(gè)難題，下面小編將為大家詳細(xì)講解，有這方面需求的人可以來(lái)學(xué)習(xí)下，希望你能有所收獲。

用java模擬詞頻統(tǒng)計(jì)。

有3個(gè)文件：text1: hello world

                    text2:hello hadoop

                    text3:hello mapreduce

對(duì)上面的文件進(jìn)行詞頻統(tǒng)計(jì)：結(jié)果應(yīng)該是：hello:3;    hadoop:1;    world:1;    mapreduce:1

代碼實(shí)現(xiàn)如下：

package count;

import java.util.Hashtable;
import java.util.Iterator;
import java.util.StringTokenizer;

public class Count {

    public static void main(String[] args) {
        String [] text = new String[]{"hello world", "hello hadoop", "hello mapreduce"};
        Hashtable ht = new Hashtable();
        for(int i=0; i<3; i++){
            StringTokenizer st = new StringTokenizer(text[i]);
            while(st.hasMoreTokens()){
                String word = st.nextToken();
                if(!ht.containsKey(word))
                    ht.put(word, new Integer(1));
                else{
                    int wc = ((Integer)ht.get(word)).intValue() + 1;
                    ht.put(word, new Integer(wc));
                }
            }
            
        }
        for(Iterator itr = ht.keySet().iterator(); itr.hasNext();){
            String word = (String)itr.next();
            System.out.print(word + ":" + (Integer)ht.get(word)+"; ");
        }
            
    }

}

看完上述內(nèi)容是否對(duì)您有幫助呢？如果還想對(duì)相關(guān)知識(shí)有進(jìn)一步的了解或閱讀更多相關(guān)文章，請(qǐng)關(guān)注億速云行業(yè)資訊頻道，感謝您對(duì)億速云的支持。