集算器協(xié)助MongoDB計(jì)算之交叉匯總

MongoDB實(shí)現(xiàn)交叉匯總比較困難，如果將數(shù)據(jù)取出，用Java等高級(jí)語言來匯總的話，也相當(dāng)復(fù)雜。因此，可以考慮用集算器esProc輔助MongoDB完成交叉匯總。下面我們通過一個(gè)例子來看一下具體做法。

  Student集合如下：

db.student.insert  ( {school:'school1', sname : 'Sean' , sub1:4, sub2 :5 })

db.student.insert  ( {school:'school1', sname : 'chris' , sub1:4, sub2 :3 })

db.student.insert  ( {school:'school1', sname : 'becky' , sub1:5, sub2 :4 })

db.student.insert  ( {school:'school1', sname : 'sam' , sub1: 5,sub2 :4 })

db.student.insert  ( {school:'school2', sname : 'dustin' , sub1:2, sub2 :2 })

db.student.insert  ( {school:'school2', sname : 'greg' , sub1:3, sub2 :4 })

db.student.insert  ( {school:'school2', sname : 'peter' , sub1:5, sub2 :1 })

db.student.insert  ( {school:'school2', sname : 'brad' , sub1:2, sub2 :2 })

db.student.insert  ( {school:'school2', sname : 'liz' , sub1: 3,sub2 :null })

  希望能夠統(tǒng)計(jì)出如下的交叉表：每行一個(gè)學(xué)校，第一列是sub1成績(jī)?yōu)?/span>5的人數(shù)，第二例是sub1成績(jī)?yōu)?/span>4的人數(shù)，以此類推。

集算器的腳本如下：

  A1: 連接MongoDB數(shù)據(jù)庫，ip和端口號(hào)是localhost:27017，數(shù)據(jù)庫是test，用戶名和密碼都是test。

  A2: 使用find函數(shù)從MongoDB中取出集合student，形成游標(biāo)。esProc在find函數(shù)中采用了和mongdb的find語句一樣的參數(shù)格式。esProc的游標(biāo)是分批讀取和處理數(shù)據(jù)，可以避免數(shù)據(jù)量過大，內(nèi)存出現(xiàn)溢出的情況。這里數(shù)據(jù)量不大，所以用fetch函數(shù)一次取出。

  A3：首先按照學(xué)校分組。

  A4：學(xué)校分組之后，每組內(nèi)部按照[1,2,3,4,5]的序列對(duì)齊分組，再求每一個(gè)對(duì)齊分組的長度。

  A5：對(duì)A4的長度數(shù)按照需求放入相應(yīng)的位置，生成結(jié)果排列。

  結(jié)果如下：

需要說明的是：集算器esProc并不包含MongoDB的java驅(qū)動(dòng)包。用esProc來訪問MongoDB，必須提前將MongoDB的java驅(qū)動(dòng)包（要求2.12.2或以上版，如mongo-java-driver-2.12.2.jar）放到[esProc安裝目錄]\common\jdbc中。

集算器esProc協(xié)助MongoDB計(jì)算的腳本很容易集成到java中，只要增加一行，寫成resultA5即可向java輸出resultset形式的結(jié)果，具體的代碼參考esProc教程。同樣，用java調(diào)用esProc訪問MongoDB也必須將mongdb的java驅(qū)動(dòng)包放到java程序的classpath中。