2018年1月21日，運營商世界網(wǎng)在北京國際飯店舉行了“TMT行業(yè)領秀榜盛典”，本次領秀榜設立了包括“年度優(yōu)秀運營商和鐵塔公司”、 “年度優(yōu)秀人物”、“年度優(yōu)秀手機產(chǎn)品“、“年度優(yōu)秀家電產(chǎn)品”、、“年度最佳互聯(lián)網(wǎng)APP”、“年度互聯(lián)網(wǎng)企業(yè)創(chuàng)新獎”、“年度優(yōu)秀IT數(shù)碼產(chǎn)品“、”年度優(yōu)秀通信設備商“、”年度物聯(lián)網(wǎng)五強“、”年度云市場十強“、”年度優(yōu)秀芯片及操作系統(tǒng)“、””年度十大公關公司“、年度優(yōu)秀自媒體賬號及自媒體人“等多項大獎，由運營商世界網(wǎng)牽頭組建的”中國主流科技媒體聯(lián)盟“也在會上掛牌成立。

國內(nèi)三大運營商集團公司和中國鐵塔公司、數(shù)十家運營商、鐵塔省公司及地市分公司、100多家手機企業(yè)、互聯(lián)網(wǎng)公司、家電企業(yè)、IT數(shù)碼企業(yè)、通信設備商、芯片企業(yè)、國內(nèi)知名高校、科技業(yè)主流公關公司以及上百名媒體和自媒體人參加了此次頒獎盛典。

此外，此次盛典還發(fā)布了《2017年通信業(yè)研究報告（含云和物聯(lián)網(wǎng)）》、《2017年三大運營商新聞及品牌傳播力報告》、《2017年手機行業(yè)在網(wǎng)報告》、《2017年家電行業(yè)研究報告四大行業(yè)研究報告》，會后還將陸續(xù)發(fā)布《2017年互聯(lián)網(wǎng)行業(yè)研究報告》和《2017年IT數(shù)碼行業(yè)研究報告》，運營商世界網(wǎng)會在近期進行多角度的系列解讀。

以下是中國聯(lián)通研究院大數(shù)據(jù)研究中心主任魏進武深入講解《新一代大數(shù)據(jù)開源技術(shù)與產(chǎn)業(yè)發(fā)展白皮書》演講實錄。    

各位領導、各位來賓，下午好！下面由我代表編委會小組匯報一下白皮書的主要內(nèi)容。

大數(shù)據(jù)經(jīng)過了十多年的發(fā)展，主要的助推力量技術(shù)是開源技術(shù)大數(shù)據(jù)的開源技術(shù)包含了四個方面：一個是數(shù)據(jù)本身的處理技術(shù)。第二承載大數(shù)據(jù)發(fā)展的算法的人工智能技術(shù)。第三大數(shù)據(jù)軟件的容器技術(shù)。第四類承載大數(shù)據(jù)發(fā)展的算力、調(diào)度的基礎，資源管理技術(shù)，就是DC/OS技術(shù)。

隨著國家“互聯(lián)網(wǎng)+”戰(zhàn)略的推進，產(chǎn)業(yè)互聯(lián)網(wǎng)已經(jīng)提供了很大的商業(yè)市場的藍海，而云、大、物、移，及AI代表的ABC類的開源技術(shù)無疑提供了一個產(chǎn)業(yè)發(fā)展的技術(shù)上的堅實推動力。而且開源技術(shù)，技術(shù)的開源化帶來了整個技術(shù)軟件技術(shù)產(chǎn)業(yè)化發(fā)展的方式上的轉(zhuǎn)變，傳統(tǒng)來講，軟件技術(shù)發(fā)展是由技術(shù)試驗和標準化再到商業(yè)化的軟件產(chǎn)品的路線，隨著開源生態(tài)的建立，軟件的發(fā)展已經(jīng)由新技術(shù)實驗到迭代化開發(fā)、產(chǎn)品化，以應用為導向的路線發(fā)展，省去了中間標準化的階段和過程。

開源生態(tài)圈里有幾個特點：

第一，開源項目數(shù)量巨大。

第二，開源項目里的規(guī)模化上，各個項目規(guī)模化不一樣。

第三，參與開源的企業(yè)很多。

第四，全球從事開源技術(shù)的人員貢獻和應用極其龐大。

我們主要還是依托國外主導的開源技術(shù)，我們重點以應用為主。逐步這幾年來也在不斷加強開源方面的技術(shù)貢獻，整體來看國內(nèi)在開源技術(shù)貢獻方面相對比較低，另外一個更嚴重的情況是國內(nèi)在開源方面的原創(chuàng)幾乎沒有。

從大數(shù)據(jù)來講，開源技術(shù)從2005年Hadoop經(jīng)歷了大數(shù)據(jù)批儲量技術(shù)和大數(shù)據(jù)流處理技術(shù)，到現(xiàn)在批處理和流處理相融合的技術(shù)發(fā)展路線。這9個有代表性的大數(shù)據(jù)代表性處理技術(shù)，從剛開始的大數(shù)據(jù)技術(shù)處理發(fā)展活躍十年，到現(xiàn)在一項新的技術(shù)發(fā)展起來只能活躍五年，就有新技術(shù)代替的步驟在迭代。

從大數(shù)據(jù)處理技術(shù)時間軸上來看，不同的技術(shù)都在向后兼容，試圖統(tǒng)一化、一體化。同時，當前已經(jīng)大數(shù)據(jù)發(fā)展到了流處理和批量處理融合處理的階段，同時，也在把計算引擎和數(shù)據(jù)存儲朝分離化的方向發(fā)展。

第二類，就是承載大數(shù)據(jù)處理算法的，以AI處理為技術(shù)的第二類開源技術(shù)，主要有五類代表性的框架。第二隨著大數(shù)據(jù)項商業(yè)化價值發(fā)揮，也在一些新的硬件方面發(fā)展，AI處理里面三個主要的基石：一個是數(shù)據(jù)處理本身。一個算法的引擎，目前主要代表的有五類，開源AI處理的算法框架。第三類算力，包括新硬件，另外一個對于大量計算能力有效的部署和調(diào)度的軟件框架。

在AI這塊，從應用形態(tài)上來講可能有各種各樣的，有人機交互、后臺、平臺處理的，下一步將會對電信、金融行業(yè)等會有根本的影響。AI處理技術(shù)來說發(fā)展速度很快，發(fā)展速度加快導致產(chǎn)業(yè)規(guī)?；l(fā)展會放大300倍，影響力會放得更大，是這樣的態(tài)勢在發(fā)展。

第三類，軟件的服務化封裝，也就是容器技術(shù)。容器技術(shù)將會是下一代云計算的升級版，上一代云計算技術(shù)主要是在對于基礎資源向下的整合，實現(xiàn)由設備變成資源的這一步。而下一代云計算主要技術(shù)會向上服務，對應用有效的能力化的分裝服務。這主要的是開源技術(shù)，容器技術(shù)為代表的這類技術(shù)，目前發(fā)展速度來講是以谷歌的Kubernetes為代表。

容器技術(shù)將會成為下一代面向應用服務的升級版的云計算技術(shù)。同時，容器技術(shù)也會有助于應用，或者說應用的分享，應用的服務化的再分享的發(fā)展。

第四類就是算力有效調(diào)度。openstack實現(xiàn)了設備向資源的，由設備向計算資源的轉(zhuǎn)化，但是對于資源的調(diào)度能力十分有限的。隨著技術(shù)的發(fā)展，現(xiàn)在出現(xiàn)了DC/OS技術(shù)，能夠?qū)崿F(xiàn)對算力有效調(diào)度，有效調(diào)度基礎上也會實現(xiàn)敏捷快速、快速部署、彈性伸縮、高可用的特點。

這是我們認為的四類能夠進一步促進大數(shù)據(jù)產(chǎn)業(yè)有效發(fā)展的開源技術(shù)的發(fā)展情況。

那么從整個大數(shù)據(jù)發(fā)展來看，技術(shù)上逐漸在應用開源、走向開源、擁抱開源，標準上也在逐步推動國家級大數(shù)據(jù)數(shù)據(jù)接口和數(shù)據(jù)類型和數(shù)據(jù)一致性等等的標準，相信在數(shù)據(jù)的開源，數(shù)據(jù)標準化兩重有力推動下，大數(shù)據(jù)產(chǎn)業(yè)會走向另外一個更高的高度。

這是此次發(fā)布的《新一代大數(shù)據(jù)開源技術(shù)與產(chǎn)業(yè)發(fā)展的白皮書》，希望這個白皮書能夠?qū)τ诋a(chǎn)業(yè)的發(fā)展和各位領導下一步的決策起到一定的參考作用。