當(dāng)大數(shù)據(jù)遇見應(yīng)用性能管理（概念篇①）

  云智慧（北京）科技有限公司 陸興海

 
1、2014年的他（大數(shù)據(jù)） 
2013年被稱為中國大數(shù)據(jù)的元年，經(jīng)過近兩年的持續(xù)發(fā)酵，到2014年底，伴隨著媒體的宣傳、學(xué)者的研究、廠商的推廣以及企業(yè)的不斷深入探索實踐，大數(shù)據(jù)在各個行業(yè)都已經(jīng)不少的應(yīng)用與發(fā)展。 
舉個例子，目前在微信中有600個左右關(guān)于大數(shù)據(jù)的公眾號，每天產(chǎn)生近2000條譯文或原創(chuàng)文章，這些文章每天將會產(chǎn)生大致200億的閱讀量，全年下來相當(dāng)于一個人總共看2400億遍張愛玲的《傾城之戀》。（注：真是大數(shù)據(jù)~）

正是由于全民的大數(shù)據(jù)熱潮，推動了各個行業(yè)及垂直領(lǐng)域?qū)Υ髷?shù)據(jù)的投融資，如下表所示2014年初到目前（15年2月）全球市場主要的大數(shù)據(jù)融資咨詢（不完全統(tǒng)計數(shù)據(jù)來源：36氪）。 
1 用大數(shù)據(jù)分析幫銷售團隊找到潛在價值顧客，Infer融資1000萬美元 
2 Twitter收購大數(shù)據(jù)分析及可視化公司Lucky Sort，用于Twitter自己的文本挖掘 
3 實時大數(shù)據(jù)平臺初創(chuàng)企業(yè)Splice Machine獲1500萬美元融資 
4 基于地理位置大數(shù)據(jù)分析的移動廣告初創(chuàng)公司PlaceIQ，獲C輪1500萬美元融資 
5 Google Ventures 1.3億美元領(lǐng)投用大數(shù)據(jù)服務(wù)腫瘤醫(yī)療行業(yè)的Flatiron Health 
6 大數(shù)據(jù)銷售管理服務(wù)提供商InsideSales獲得1億美元C輪融資，估值近10億美元 
6 拍拍貸獲光速安振領(lǐng)投數(shù)千萬美元B輪，所融資金將投入大數(shù)據(jù)征信系統(tǒng)研發(fā) 
8 為企業(yè)級市場提供大數(shù)據(jù)系統(tǒng)處理的創(chuàng)業(yè)公司Cloudera融資9億美元，英特爾投資7.4億美元 
9 讓團隊和客戶的交往更聰明，大數(shù)據(jù)智能關(guān)系管理RelateIQ再獲4000萬美元融資 
10 把大數(shù)據(jù)帶到任意一家企業(yè), Cloudera剛獲得一輪1.6億美元的投資 
11 將大數(shù)據(jù)處理搬到云端，以色列初創(chuàng)公司SiSence獲3000萬美元融資 
12 大數(shù)據(jù)初創(chuàng)企業(yè)Concurrent獲千萬美元融資 
13 打通大數(shù)據(jù)技術(shù)的底層與頂層，Trifacta宣布已完成C輪2500萬美元融資 
14 由前Google與Facebook高管創(chuàng)辦的大數(shù)據(jù)初創(chuàng)企業(yè)Metanautix攜700萬美元融資現(xiàn)身 
15 大數(shù)據(jù)服務(wù)商“百分點”獲C輪2500萬美元融資，發(fā)布“踐行大數(shù)據(jù)”戰(zhàn)略 
16 大數(shù)據(jù)分析服務(wù)公司Hortonworks完成5000萬美元融資，乃名門雅虎之后 
17 Salesforce以3.9億美元收購大數(shù)據(jù)智能關(guān)系管理初創(chuàng)企業(yè)RelateIQ 
18 用大數(shù)據(jù)分析為酒店做定價管理的SaaS，Duetto獲得2100萬美元B輪融資 
19 大數(shù)據(jù)分析云服務(wù)GoodData獲Intel Capital領(lǐng)投E輪融資2750萬美金 
20 國內(nèi)第一家大數(shù)據(jù)信用評估公司 Wecash 獲 IDG A 輪融資4000萬元 
21 EverString大數(shù)據(jù)用戶預(yù)測分析引擎獲光速資本領(lǐng)投一千兩百萬美元 A 輪融資 
22 幫助企業(yè)更好的理解數(shù)據(jù)，大數(shù)據(jù)初創(chuàng)公司Adatao完成1300萬美元A輪融資，由a16z領(lǐng)投 
23 “逸橙科技”獲得千萬美元A輪融資，利用職場大數(shù)據(jù)提高HR工作效率 
24 高盛押注亞洲大數(shù)據(jù)市場，新加坡大數(shù)據(jù)公司Antuit獲得5600萬美元新融資 
25 大數(shù)據(jù)分析公司Rubikloud獲700萬美元A輪融資，投資方多來自中國 
26 用自助型BI推動企業(yè)產(chǎn)品消費化，大數(shù)據(jù)可視化公司永洪科技完成五千萬元A+輪融資 
27 大數(shù)據(jù)＋機器學(xué)習(xí)＋平臺，所以Dato拿了1850萬美元B輪融資 
締元信網(wǎng)絡(luò)數(shù)據(jù)CEO秦雯在回顧整個大數(shù)據(jù)行業(yè)的發(fā)展?fàn)顟B(tài)時提到，2014年最大的變化是從“說大數(shù)據(jù)”轉(zhuǎn)變到“用大數(shù)據(jù)”。這點深有同感，資本的不斷關(guān)注帶來的是大數(shù)據(jù)在各行業(yè)的不斷實際深入應(yīng)用。比如當(dāng)當(dāng)網(wǎng)引入了以Ranking Model為代表的消費者行為分析作為推薦系統(tǒng)，透過消費者的點擊行為分析，揭示點擊率高低與消費者身份和商品之間的隱隱聯(lián)系，促使銷售額增加1億元。交行通過對海量語音信息進行處理使歷史語音檢索調(diào)聽花費的時間 從3～5個工作日縮短為5分鐘，檢索反饋時效低于100毫秒，調(diào)聽反饋時效低于1秒。前幾天網(wǎng)絡(luò)上的一則新聞，信用卡“套利者”鉆銀行漏洞年賺近千萬，最終也是通過銀行的實施大數(shù)據(jù)防詐騙監(jiān)控平臺，通過設(shè)定相應(yīng)的指標(biāo)來監(jiān)測每張信用卡，進而實現(xiàn)報警來發(fā)現(xiàn)的。 
以上僅僅是幾個例子，實際上在2014年各行業(yè)都有不少積極的探索及應(yīng)用，在應(yīng)用性能管理領(lǐng)域亦是如此。至于究竟什么是應(yīng)用性能管理？它與大數(shù)據(jù)相遇能夠摩擦出什么樣的火花，在接下來的章節(jié)中與大家探討。 
2、2014年的她（應(yīng)用性能管理） 
應(yīng)用性能管理的英文簡稱為APM，全稱為Application Performance Management。到底是APM？我們首先來一個官方的定義，在wikipedia.org網(wǎng)站上其解釋如下：應(yīng)用性能管理是指對軟件程序可用性以及性能的監(jiān)測與管理，應(yīng)用性能為確保一定程度的服務(wù)等級需要關(guān)注應(yīng)用系統(tǒng)問題的檢測與診斷，它是鏈接復(fù)雜IT數(shù)據(jù)與業(yè)務(wù)價值實現(xiàn)之間的橋梁。 
為什么說是2014年的應(yīng)用性能管理呢？實際上應(yīng)用性能管理的概念在多年前就有提及，但是新一代的APM在中國發(fā)展，可謂說2014年是其元年，正是因為國外相關(guān)理念與產(chǎn)品不斷成熟演進、國內(nèi)互聯(lián)網(wǎng)行業(yè)的急迫需求才使得這個老概念又有了新的內(nèi)涵與技術(shù)特征。要形象化解釋APM的概念，我們需要溫習(xí)兩個概念。 
其一：業(yè)務(wù)，更白話一些來說，就是各行業(yè)中需要處理的事務(wù)，業(yè)務(wù)是任何一家企業(yè)生存的基礎(chǔ)，因為業(yè)務(wù)意味著收益，企業(yè)經(jīng)營的最終目標(biāo)是通過良性的業(yè)務(wù)運轉(zhuǎn)帶來合理利潤。 

其二：用戶體驗，在互聯(lián)網(wǎng)時代產(chǎn)品能否獲得成功，用戶體驗越來越成為關(guān)鍵，當(dāng)用戶使用產(chǎn)品的時候，體驗之旅才真正開始，而這個過程是否愉快，將直接影響到產(chǎn)品的口碑，影響到銷售。從企業(yè)產(chǎn)品與服務(wù)的層面來講，用戶體驗分為三類，如下圖所示。 
 
在無電子不商務(wù)的今天，產(chǎn)品與服務(wù)的用戶體驗問題已得到幾乎所有人的認(rèn)同，性能體驗作為非?；A(chǔ)的一環(huán)其重要性不言而喻?！皯?yīng)用性能質(zhì)量好壞”與“業(yè)務(wù)增長與否”這兩個概念基本上被認(rèn)作同義詞。期待企業(yè)的業(yè)務(wù)增長，必然要求從用戶的體驗狀況出發(fā)，不斷提高關(guān)鍵應(yīng)用的性能和穩(wěn)定性。 
互聯(lián)網(wǎng)，尤其是近年來移動互聯(lián)網(wǎng)在各個行業(yè)的應(yīng)用迅猛發(fā)展，在給企業(yè)帶來巨大商機的同時，也帶來了新一輪的技術(shù)挑戰(zhàn)。新技術(shù)帶來的網(wǎng)絡(luò)結(jié)構(gòu)變化以及網(wǎng)絡(luò)環(huán)境和網(wǎng)絡(luò)應(yīng)用不斷發(fā)展帶來的不確定性，極大沖擊了性能的穩(wěn)定，不斷加深的網(wǎng)絡(luò)復(fù)雜性使其處于失控的邊緣。在移動互聯(lián)網(wǎng)領(lǐng)域，接入方式的多樣化和移動用戶持有的終端設(shè)備的多樣化、網(wǎng)絡(luò)層次和結(jié)構(gòu)的復(fù)雜化給移動網(wǎng)絡(luò)業(yè)務(wù)帶來更為嚴(yán)峻的問題，同時隨著移動用戶的增多和成熟，他們對移動互聯(lián)網(wǎng)性能的要求也越來越高，人們更加注重整個使用過程的感官與體驗，延遲就意味著故障，這對商家業(yè)務(wù)影響巨大。 
最近的一項消費者調(diào)查顯示，60%的用戶會對加載時間超過 3 秒鐘的應(yīng)用（網(wǎng)站或 App）失去興趣。74%的受調(diào)查者表示等待時間不會超過 5 秒鐘，當(dāng)遇到一個性能表現(xiàn)很差的應(yīng)用時，1/3 的受訪者表示將轉(zhuǎn)向競爭對手。在用戶體驗要求如此苛刻的競爭壓力下，購物者的受挫經(jīng)歷對企業(yè)不僅意味著業(yè)務(wù)的損失，同時也是品牌聲譽的損害。綜上所述，應(yīng)用系統(tǒng)的性能已經(jīng)成為制約公司業(yè)務(wù)發(fā)展的瓶頸，很難想象一個響應(yīng)很慢，體驗很差的系統(tǒng)能夠留住更多的用戶。同時現(xiàn)代應(yīng)用的復(fù)雜度空前增大，影響系統(tǒng)性能因素繁多，給問題發(fā)現(xiàn)與定位帶來巨大的挑戰(zhàn)。