Hive執(zhí)行hive> select count(*) from tablename時(shí)出現(xiàn)異常怎么解決

本篇內(nèi)容主要講解“Hive執(zhí)行hive> select count(*) from tablename時(shí)出現(xiàn)異常怎么解決”，感興趣的朋友不妨來(lái)看看。本文介紹的方法操作簡(jiǎn)單快捷，實(shí)用性強(qiáng)。下面就讓小編來(lái)帶大家學(xué)習(xí)“Hive執(zhí)行hive> select count(*) from tablename時(shí)出現(xiàn)異常怎么解決”吧!

版本說(shuō)明

Hadoop 1.0.3  

HBase 0.94.1

Hive 0.9.0

執(zhí)行操作

hive> select count(*) from tablename;

異常提示

Exception in thread "Thread-54" java.lang.RuntimeException: Error while reading from task log url

        at org.apache.hadoop.hive.ql.exec.errors.TaskLogProcessor.getStackTraces(TaskLogProcessor.java:240)

        at org.apache.hadoop.hive.ql.exec.JobDebugger.showJobFailDebugInfo(JobDebugger.java:227)

        at org.apache.hadoop.hive.ql.exec.JobDebugger.run(JobDebugger.java:92)

        at java.lang.Thread.run(Thread.java:662)

Caused by: java.io.IOException: Server returned HTTP response code: 400 for URL:     http://slave3:50060/tasklog?taskid=attempt_201212192008_0014_m_000000_3&start=-8193

        at sun.net.www.protocol.http.HttpURLConnection.getInputStream(HttpURLConnection.java:1436)

        at java.net.URL.openStream(URL.java:1010)

        at org.apache.hadoop.hive.ql.exec.errors.TaskLogProcessor.getStackTraces(TaskLogProcessor.java:192)

        ... 3 more

解決步驟

1.異常中的路徑(根據(jù)自己的異常URL地址)

  http://slave3:50060/tasklog?taskid=attempt_201212192008_0014_m_000000_3&start=-8193

  修改為：

 http://slave3:50060/tasklog?attemptid=attempt_201212192008_0014_m_000000_3&start=-8193

  進(jìn)行訪問(wèn)

2.頁(yè)面中有異常具體記錄，我這點(diǎn)的異常提示是：

  java.lang.NoClassDefFoundError: com/google/protobuf/Message

  明顯是缺少某個(gè)jar,這個(gè)jar可以在HBase的jar中找到protobuf-java-2.4.0a.jar

3.將jar放入Hive的lib目錄下，修改配置文件conf/hive-site.xml

 （如果前面整合過(guò)Hadoop,HBase，Hive的就知道，這里是加載Hive默認(rèn)沒(méi)有加載的jar）

  <property>

    <name>hive.aux.jars.path</name>

    <value>file:///usr/java/hive-0.9.0/lib/protobuf-java-2.4.0a.jar</value>

  </property>

 4.再次執(zhí)行Hive的統(tǒng)計(jì)命令，可能還會(huì)有異常，因?yàn)槲业腗apReduce前面使用過(guò)，在Hadoop中已經(jīng)    加入過(guò)protobuf-java-2.4.0a.jar這個(gè)jar,如果以前你沒(méi)有在Hadoop的lib下加入這個(gè)jar可能也    會(huì)有異常，如果出現(xiàn)異常依然可以根據(jù)第一步驟的方法來(lái)查看具體的異常。

  5.特別提示：如果Hadoop以前沒(méi)有加入這個(gè)jar,請(qǐng)將集群所有的機(jī)器都加入這個(gè)jar,并重啟         Hadoop或者單獨(dú)重啟MapReduce,重啟MapReduce命令如下：

    stop-mapred.sh

    start-mapred.sh

到此，相信大家對(duì)“Hive執(zhí)行hive> select count(*) from tablename時(shí)出現(xiàn)異常怎么解決”有了更深的了解，不妨來(lái)實(shí)際操作一番吧！這里是億速云網(wǎng)站，更多相關(guān)內(nèi)容可以進(jìn)入相關(guān)頻道進(jìn)行查詢，關(guān)注我們，繼續(xù)學(xué)習(xí)！