大咖齊聚SACC：共論分布式存儲(chǔ)的演進(jìn)之道

　　 10月17日到19日，由IT168旗下ITPUB企業(yè)社區(qū)平臺(tái)主辦的第十屆中國(guó)系統(tǒng)架構(gòu)師大會(huì)(SACC 2018)在北京隆重舉行。本屆大會(huì)主題為“十年架構(gòu)，成長(zhǎng)之路”，聚集了上千名CTO、研發(fā)總監(jiān)、高級(jí)系統(tǒng)架構(gòu)師、開發(fā)工程師和IT經(jīng)理等技術(shù)人，共同展開IT技術(shù)領(lǐng)域的深度分享與問(wèn)題探討。

　　在17日下午的“主線1：分布式存儲(chǔ)與中間件設(shè)計(jì)”分論壇上，多位來(lái)自知名廠商及互聯(lián)網(wǎng)公司的IT負(fù)責(zé)人、技術(shù)專家現(xiàn)身說(shuō)法，分享了各自在分布式存儲(chǔ)方面的技術(shù)實(shí)踐經(jīng)驗(yàn)，并現(xiàn)場(chǎng)為大家答疑解惑，探討技術(shù)問(wèn)題。

　　滴滴出行正為數(shù)億名用戶提供著包括快車、專車、出租車在內(nèi)的多種出行和運(yùn)輸服務(wù)，日訂單已達(dá)3000萬(wàn)。在這樣一個(gè)龐大的業(yè)務(wù)規(guī)模下，存儲(chǔ)自然成為一個(gè)重大的問(wèn)題。滴滴對(duì)象存儲(chǔ)系統(tǒng)當(dāng)前已存儲(chǔ)百億級(jí)文件，PB級(jí)數(shù)據(jù)。

滴滴出行高級(jí)技術(shù)專家汪黎

　　在論壇上，滴滴出行高級(jí)技術(shù)專家、滴滴云存儲(chǔ)研發(fā)負(fù)責(zé)人汪黎進(jìn)行了《滴滴對(duì)象存儲(chǔ)系統(tǒng)的架構(gòu)演進(jìn)實(shí)踐》主題演講，介紹了滴滴對(duì)象存儲(chǔ)系統(tǒng)隨著業(yè)務(wù)規(guī)模的增大，業(yè)務(wù)需求的改變，其架構(gòu)的演進(jìn)過(guò)程和設(shè)計(jì)考慮。

　　第二位進(jìn)行分享的是京東商城在線存儲(chǔ)部負(fù)責(zé)人丁俊，介紹了京東K-V存儲(chǔ)產(chǎn)品從內(nèi)存存儲(chǔ)到持久化存儲(chǔ)，從持久化存儲(chǔ)到基于K-V持久化存儲(chǔ)開發(fā)的分布式鎖、配置分發(fā)產(chǎn)品。據(jù)介紹K-V存儲(chǔ)體系下包含內(nèi)存存儲(chǔ)-jimdb、持久化存儲(chǔ)-sharkstore以及混合存儲(chǔ)三大部分。

京東商城在線存儲(chǔ)部負(fù)責(zé)人丁俊

　　三大部分具有各自不同的特性，內(nèi)存存儲(chǔ)主要表現(xiàn)為高吞吐、低延遲，擁有在線伸縮、自動(dòng)故障恢復(fù)以及廣域復(fù)制等功能;持久化存儲(chǔ)具有分布式強(qiáng)一致，支持在線分裂、自動(dòng)故障恢復(fù)，支持schema、海量數(shù)據(jù)，支持范圍查詢、單表操作等核心特性;混合存儲(chǔ)可實(shí)現(xiàn)冷熱數(shù)據(jù)存儲(chǔ)分離，提供內(nèi)存級(jí)別的性能體驗(yàn)，磁盤級(jí)別的存儲(chǔ)容量。

　　在把大量原始數(shù)據(jù)轉(zhuǎn)化為有用信息和行動(dòng)的所用時(shí)間減少到零的需求驅(qū)動(dòng)下，流媒體技術(shù)開始變得流行起來(lái):在數(shù)據(jù)到達(dá)時(shí)，即時(shí)地、連續(xù)地、無(wú)限地處理數(shù)據(jù)。從工業(yè)物聯(lián)網(wǎng)到聯(lián)網(wǎng)汽車，再到實(shí)時(shí)欺詐檢測(cè)等等，需要快速響應(yīng)用戶行為的應(yīng)用程序越來(lái)越廣泛。但我們目前使用的組件并不是為這些應(yīng)用設(shè)計(jì)的，而且其作用機(jī)制不會(huì)實(shí)現(xiàn)從小到大的擴(kuò)展，基本系統(tǒng)設(shè)計(jì)的不匹配帶來(lái)了更高的復(fù)雜度。

Streamlio聯(lián)合創(chuàng)始人郭斯杰

　　流是難以擴(kuò)展的，因?yàn)樗俣嗽S多破壞性的系統(tǒng)功能，例如將數(shù)據(jù)視為連續(xù)的和無(wú)限的，而不是有限的和靜態(tài)的，通過(guò)動(dòng)態(tài)擴(kuò)展服務(wù)、存儲(chǔ)和計(jì)算能力，以協(xié)調(diào)到達(dá)的數(shù)據(jù)量，交付一致的快速結(jié)果的能力。那么，對(duì)于流媒體，我們到底需要什么分布式存儲(chǔ)呢?Streamlio聯(lián)合創(chuàng)始人郭斯杰在論壇上帶來(lái)了《從文件存儲(chǔ)，對(duì)象存儲(chǔ)到流存儲(chǔ) - 重新思考流計(jì)算時(shí)代的分布式存儲(chǔ)》主題演講，探討了用例驅(qū)動(dòng)下的分布式存儲(chǔ)系統(tǒng)的演變，以及流媒體世界對(duì)分布式存儲(chǔ)的需求。此外，郭斯杰老師還使用Apache Pulsar/BookKeeper作為示例，討論了如何設(shè)計(jì)此類系統(tǒng)應(yīng)對(duì)挑戰(zhàn)。

　　最后一位進(jìn)行技術(shù)分享的是來(lái)自阿里云的資深技術(shù)專家徐立，他是阿里云文件存儲(chǔ)的產(chǎn)品和研發(fā)負(fù)責(zé)人，擁有近十年的阿里云飛天分布式存儲(chǔ)系統(tǒng)的架構(gòu)和研發(fā)經(jīng)驗(yàn)。徐立的演講主題為《新一代Cloud Native文件存儲(chǔ)的分布式架構(gòu)演進(jìn)之路》，他從協(xié)議多樣性、安全可靠、高性能和共享、彈性易用、企業(yè)級(jí)特性、生態(tài)創(chuàng)新6個(gè)維度介紹了當(dāng)下新一代文件存儲(chǔ)技術(shù)架構(gòu)演進(jìn)變革之路。

阿里云資深技術(shù)專家徐立

　　據(jù)徐立介紹，新一代Cloud Native文件存儲(chǔ)的主要特性包括：簡(jiǎn)單易用——完全托管，即開即用，只需掛載標(biāo)準(zhǔn)的文件協(xié)議;彈性使用——按需使用，無(wú)縫擴(kuò)容;高可擴(kuò)展——容量、性能水平擴(kuò)展，面向互聯(lián)網(wǎng)分布式架構(gòu);高性能——性能和容量線性相關(guān)，低延時(shí)、高IOPS、高吞吐。阿里云文件存儲(chǔ)，可提供簡(jiǎn)單、快速、高效的數(shù)據(jù)遷移能力，擁有多種數(shù)據(jù)接入方式以及最佳掛載方式，通過(guò)訪問(wèn)行為可視化的云監(jiān)控功能和簡(jiǎn)單易用、完全托管、可靠安全的備份功能，幫助用戶完成端到端的最佳實(shí)踐。