報告服務(wù)熱線400-068-7188

那些被大數(shù)據(jù)時代拋棄的人

分享到:
20 衣公子的劍 ? 2020-03-26 11:11:32  來源:衣公子的劍 E8041G0

作者|衣公子 來源|衣公子的劍(ID:yigongzidejian)

2000年,微軟如日中天。有人問比爾蓋茨(Bill Gates)對于IT行業(yè)的看法。

蓋茨說,挺好的,就是有點(diǎn)noise。

noise,本意是噪音。但是五個字母又分別指代五家公司:Netscape, Oracle, IBM, Sun, EMC。

這一語雙關(guān)可謂騷出了天際。今天的第一杯,就為這個故事干一個吧。

不過,和蓋茨的很多傳奇故事一樣,這個傳聞目前只流傳于中文世界。蓋茨到底有沒有說過那么囂張又霸氣的話,暫時無處考證。

傳言如此深入人心,有一個重要的原因。這一問一答準(zhǔn)確又形象地概括了一個舊時代:以微軟為絕對統(tǒng)帥,加上NOISE這5家軟件公司,IT企業(yè)賣軟件,一手交錢,一手交貨。

科技圈的天,變得比臭男人的心還快。以Google為代表的新貴舉著“免費(fèi)“的旗號,已經(jīng)打到了家門口。搜索既然不收費(fèi),那Google怎么賺錢呢?

常言道,天下沒有免費(fèi)的下午茶。當(dāng)你用的產(chǎn)品不要錢,那么很可能作為用戶的你就是產(chǎn)品本身。

Google聚攏用戶,再打包賣給廣告商的商業(yè)模式,被杰弗里·哈默巴赫爾(Jeffrey Hammerbacher) 形象地批評為:我們這一代最聰明的頭腦,都在思考如何讓人們點(diǎn)擊廣告。

“哇,原來你不過只是一家廣告公司!”同業(yè)的戲謔,讓Google羞紅了臉,說起了類似”你怎么這樣憑空污人清白……竊書不能算偷……竊書!……讀書人的事,能算偷么?“之類的話。

科技圈充滿了快活的空氣。

為了捍衛(wèi)自己科技公司的質(zhì)感,Google連發(fā)三篇論文。圍繞一個主題:怎么處理數(shù)據(jù)。

隨著上網(wǎng)人數(shù)和信息量的爆炸,Internet的海洋越來越寬廣,Google每天收到30億條搜索指令。僅僅1天處理的數(shù)據(jù)量,就是美國國家圖書館所有紙質(zhì)出版物的上千倍??墒潜M管如此,每當(dāng)我們按下回車鍵,搜索結(jié)果卻能即時地展現(xiàn)出來。這背后有什么魔法?

Google的三篇論文,篇篇佶屈聱牙,又字字力透紙背,分別介紹了三個技術(shù):Google File System, MapReduce, BigTable。千言萬語匯成一句話:用分布式的體系,搭建一套數(shù)據(jù)存儲、分析的系統(tǒng)。

希臘神話里,普羅米修斯將火種帶給人類?;?,極大地提高了人的生產(chǎn)力。希臘人惜墨,沒介紹普羅米修斯的長相。

現(xiàn)實(shí)里,Google的程序員就像普羅米修斯,那三篇介紹怎么突破數(shù)據(jù)處理能力的文章,被后人譽(yù)為“三駕馬車“,拉著人類進(jìn)入了——大數(shù)據(jù)時代。

不用專業(yè)詞匯嚇跑你,我們邊喝邊聊,把技術(shù)說的簡單點(diǎn)。

傳統(tǒng)技術(shù),是集中式單點(diǎn)架構(gòu)。打個比方,你有一個助理,小明,什么事都集中交給他。忙的時候小明天天睡公司,閑的時候上班玩手機(jī)。

Google“三駕馬車”提出分布式架構(gòu)。還是那個比方,你的事業(yè)越做越大,如今小明就算一天工作24個小時也完成不了。于是就分布式地招3個助理,小A,小B,小C,各司其職。

原理是簡單的,而現(xiàn)實(shí)極復(fù)雜,尤其考慮到現(xiàn)實(shí)互聯(lián)網(wǎng)面臨大規(guī)模、高并發(fā)、實(shí)時在線等新的需求。

信息怎么分發(fā)給ABC?以什么標(biāo)準(zhǔn)?這可不能亂分,回頭自己都忘了“幫我在四季開個房“是交給了小B辦還是小C。如果問錯了人,不僅效率慢,關(guān)鍵會搞得人盡皆知。還有啊,進(jìn)一步延伸,以什么標(biāo)準(zhǔn)招聘ABC,哪些招名校,哪些招實(shí)干派,是不是必須能喝酒,上班的裙子可以接受多短?物盡其用,不可造次。

所以,每有技術(shù)變革,第一件事一定是路線之爭、行業(yè)標(biāo)準(zhǔn)之爭。

Doug Cutting是個編程天才,從Google亦步亦趨的追隨者,終于成長為了備受重視的對手。Google做搜索,Cutting跟著開發(fā)了Lucene/Nutch搜索。Google的三駕馬車,提出以MapReduce算法應(yīng)對海量數(shù)據(jù),Cutting就寫出了Hadoop。

Hadoop降生那一天,Cutting是雅虎的雇員,背景是Google、微軟、雅虎的搜索引擎大戰(zhàn),硝煙彌漫。Google的“三駕馬車“破解了海量數(shù)據(jù)的難題,保證了Google搜索成為技術(shù)上的第一高峰。同樣,Cutting和Hadoop算是為雅虎的搜索業(yè)務(wù)鞠躬盡瘁,死而后已。

幾年后,馬云要處理和雅虎的分分合合。有些地方扭捏,有些地方為難。但是對于雅虎搜索,還是相當(dāng)“饞她的身子的“。簡單的說,淘寶終于做起來了,需要一款優(yōu)質(zhì)的搜索引擎服務(wù)用戶搜索商品。更深一點(diǎn)地說,這場交易涉及所有互聯(lián)網(wǎng)企業(yè)的一個深沉幽嘆:哎!這該死的,磨人的,溫柔的小妖精­——數(shù)據(jù)。

冥冥之中,都是天意。暫且按下不表。

且說,Hadoop一降生,一群科技巨頭就聚到旗下抱團(tuán)。原因很簡單,Google這廝,在數(shù)據(jù)處理技術(shù)上已經(jīng)領(lǐng)先得太多,各位諸侯必須群策群力,把開源的Hadoop發(fā)展好。來它個十八路諸侯討董卓。

科技圈是有愛恨情仇的。開源的Linux挑戰(zhàn)微軟閉環(huán)的Windows/Office。開源的Android圍攻蘋果閉環(huán)的iOS/iPhone。Google的三駕馬車對面,以Hadoop為旗號,聚攏起雅虎(Yahoo)、亞馬遜(Amazon)、IBM、Facebook、阿里巴巴、華為……

哪有什么新的東西,都是歷史的重復(fù)。

光看這些眼花繚亂的專業(yè)詞匯,就能明白,大數(shù)據(jù)這玩意,技術(shù)門檻不低。但是每個市場參與者,都想積累數(shù)據(jù),了解數(shù)據(jù),挖掘數(shù)據(jù),把自己在商業(yè)搏殺中的贏面提高哪怕一點(diǎn)點(diǎn)。于是,市場分工發(fā)揮了作用,專門有些公司:我來買服務(wù)器,我來搭架構(gòu),你需要存儲和處理數(shù)據(jù)?好,我賣個服務(wù)給你。

鐺鐺鐺鐺——一個新的行業(yè),云計算——誕生了。

2006年,互聯(lián)網(wǎng)時代才剛剛開始,萬物沒有名字,提到的時候尚需用手指指點(diǎn)點(diǎn)。江湖里的機(jī)會遍地都是,游戲、視頻、O2O,軟件、媒體、金融、垂直電商……

混沌之中,亞馬遜,是對于大數(shù)據(jù)/云計算擁抱最堅決的一位。

收集數(shù)據(jù)→處理數(shù)據(jù)→分析數(shù)據(jù)→向用戶推薦商品,這套模式讓電商巨頭亞馬遜嘗到甜頭。當(dāng)時亞馬遜網(wǎng)站上已經(jīng)有第三方店家,亞馬遜的初衷是讓這群第三方商家也享受到數(shù)字化福利。這項被命名為AWS(Amazon Web Services)的服務(wù),就是云計算行業(yè)的濫觴。

貝佐斯(Jeff Bezos),少年謝頂,索性剃了光頭。此生要做硬漢,打天下的時候,和幾個手下說過這樣一句話:表面上,我像一只雞那么膽小,但是內(nèi)心卻很強(qiáng)大。

2

二十年里,亞馬遜電商越做越大。但是,一直不賺錢,收入飛到了太空,但是利潤始終在地上爬。錢去哪了?被貝佐斯砸向了研發(fā),砸向了未來。

3

利潤不增長,股價就逡巡不前,華爾街總是不憚以最壞的惡意數(shù)落貝佐斯。直到2018年,AWS業(yè)務(wù)的利潤爆發(fā)。亞馬遜的股價終于水漲船高,不但坐穩(wěn)了云計算市場當(dāng)之無愧的老大,貝佐斯也接過了比爾蓋茨世界首富的位子。

2008年7月,北京奧運(yùn)會,馬上就要開幕。

一則新聞登上中國各大媒體的版面。比爾·蓋茨為了看北京奧運(yùn)會,在距離水立方不到180米的盤古大觀,租下一個700平米的四合院,花費(fèi)1個億。

事情傳到了比爾·蓋茨耳朵里,蓋茨回了兩個字:假的。

能用這種新聞賣房子,也足見這個樓盤的老板真是野路子。果然,2017年他就把自己的名字徹底混成了閔敢的詞語,非常閔敢的那種。

至今還有很多人相信這個假新聞。

我身邊的朋友都知道,借助最近美股的走勢,衣公子憑借冷靜的操作,把自己和貝佐斯、比爾·蓋茨等人的財富差距,縮小了幾十億美元。這給我極大的信心。于是,斗膽計算了一下新聞里的數(shù)據(jù),四合院面積700平米,租金每年1個億,那就是平均14萬/平米??墒沁@個樓盤當(dāng)時的售價明明才5萬啊。。。

數(shù)據(jù)真好。可惜,我們這群傻→B在“小數(shù)據(jù)”的年代都那么好騙,又要怎么在“大數(shù)據(jù)”時代茍活?

蓋茨花1億租四合院的假新聞滿天飛的同一時間,杭州城西的阿里巴巴遇到了麻煩。

簡單點(diǎn)說,隨著業(yè)務(wù)的擴(kuò)張,阿里巴巴對于數(shù)據(jù)的處理能力已經(jīng)到達(dá)極限。

如果說大數(shù)據(jù)是新時代,那么在“舊社會”,人類是怎么處理數(shù)據(jù)的呢?可以用一個單詞概括,IOE —— IBM的服務(wù)器+Oracle的數(shù)據(jù)庫+EMC的存儲。

I、O、E在各自的領(lǐng)域都強(qiáng)得無法替代。事實(shí)證明,好的東西就只有一個缺點(diǎn)——貴。

“去IOE”很早就成為企業(yè)的心聲。出于經(jīng)濟(jì)成本和“支持國產(chǎn)”的考慮,外加正趕上一次技術(shù)迭代(Linux的X86服務(wù)器挑戰(zhàn)傳統(tǒng)的Unix小型機(jī)服務(wù)器),中國企業(yè)開始了“去IOE”的征程。

簡單來說,這次“去IOE”失敗了。大家很快發(fā)現(xiàn),自己離不開IOE??傮w上,無非是邊邊角角砍砍成本,放得開的,也不過是買買聯(lián)想的PC,買買華為或者浪潮的服務(wù)器。歸根到底,市場并沒有一個可以替換IOE的好方案。

不是說了嗎,好的東西就只有一個缺點(diǎn)——貴。相較之下,數(shù)據(jù)的準(zhǔn)確、時效,可開不得玩笑。尤其是金融企業(yè)。想象一下,當(dāng)你的衣公子卑微地用六位數(shù)的密碼打開自己四位數(shù)的賬戶,但是ATM機(jī)上取了錢,卡里的余額卻沒有即時地減少……這種畫面你敢想?

所以,擱到今天還是讓我覺得神奇,去IOE這件事,最終竟然是讓阿里巴巴這廝扛了大旗。

淘寶算力的制約怎么突破的?阿里選的路線是:去IOE,做阿里云。

步驟大約為:曾經(jīng)完全依賴Oracle→采用Hadoop集群→建成單個機(jī)群節(jié)點(diǎn)數(shù)最多的Hadoop機(jī)群→用自主研發(fā)的飛天平臺上的ODPS(Open Data Processing Service,開放數(shù)據(jù)處理服務(wù))

阿里云歷經(jīng)千帆,絕處逢生的故事,大家已經(jīng)聽過很多遍。

不過,我倒認(rèn)為沒必要太渲染阿里云的苦情。的確,飛天和ODPS都是自研,但是亞馬遜和微軟擁抱開源,也很成功,不是嗎?

另一方面,恰恰是因為固守自研,在很長一段時間項目上一批又一批的程序員不堪重負(fù),人才紛紛出走。另外,自研技術(shù)對內(nèi)是有優(yōu)勢,但是對外呢?會不會構(gòu)成一種推廣障礙?比如潛在客戶考慮采購阿里云的服務(wù),但是IT部門一想到還要特意學(xué)一套系統(tǒng),于是嘴上說不要,身體竟然也不要。

不過,得失自在人心,寶劍留在江湖。這也是本文最終要引向的那個價值:相信競爭,讓市場說話。

無論如何,阿里云的誕生為看似熱鬧實(shí)則沉悶的中國科技界帶來很多新的東西。

一般認(rèn)為,阿里是在2012年底,初步完成了去IOE。

四年前,阿里云的計劃剛剛破土,那是2008年,大學(xué)畢業(yè)生如果可以拿到甲骨文(Oracle)的offer,誰會去土氣橫秋的BAT?

可是,歷史不就是這樣嗎——一些不甘現(xiàn)狀的人,奮力吹響號角,奏響的,正是此時此刻自鳴得意的另一群人,最后的挽歌。

阿里當(dāng)時是Oracle在亞太地區(qū)最大的客戶,擁有20個節(jié)點(diǎn),比亞馬遜美國的17個節(jié)點(diǎn),還要多。想來多少也有點(diǎn)唏噓,你最深愛的兩位客戶,竟然先后殺入你所在的行業(yè)。Oracle倒下的經(jīng)典瞬間是去年中國研發(fā)中心的關(guān)閉和裁員,昔日令人欣羨的高級白領(lǐng),如今舉著中英文夾雜的橫幅,站在北京城的獵獵風(fēng)中。

當(dāng)中很多人,十年之前明明比入職BAT的同學(xué)更優(yōu)秀。像極了那首詩。

少年聽雨歌樓上,紅燭昏羅帳。壯年聽雨客舟中,江闊云低,斷雁叫西風(fēng)。

Larry Ellison是當(dāng)之無愧的硅谷傳奇,32歲創(chuàng)立Oracle,數(shù)據(jù)庫領(lǐng)域的國王一當(dāng)就是30年。2012年,接受采訪,聊到云計算,Larry Ellison嗤之以鼻,舉手投足間都是對貝佐斯的鄙夷, 料定AWS沒前途,自己一口口水就能淹了它。2015年,Oracle終于砸錢猛做云計算了。

你看啊,國王的手里還握著劍,但是江山哪里還是十年前的樣子。

IOE里的IBM也好不到拿去,PC業(yè)務(wù)賣給了聯(lián)想,揚(yáng)言專注企業(yè)服務(wù),光榮地創(chuàng)下了連續(xù)22個季度營收同比下滑的尷尬記錄。22個季度,這個數(shù)字不準(zhǔn)確?噢,別怪我,我只關(guān)注到第22個月,后來誰還跟IBM啊。

停住。衣公子說這些真不是為了落井下石。時代一直都是這樣,舞臺中央的角兒,你方唱罷我登場,人來人往。但是能讓技術(shù)走出聚光燈之外,在普通百姓、普通商業(yè)主體身上開花結(jié)果,才是善莫大焉。

Larry Ellison是NBA球隊金州勇士(Warriors)的死忠,主場比賽幾乎場場出席。甲骨文(Oracle)不僅冠名了勇士隊的球場,而且,幾乎每年都傳出即將全資收購球隊的消息。不過,在長達(dá)40多年的時間里,勇士隊乏善可陳,甚至常常聯(lián)盟墊底,是NBA可有可無的背景板。

好在,勇士在硅谷。

硅谷對于數(shù)據(jù)挖掘的癡迷,造福了勇士。NBA崇尚明星的突破和扣籃,但是數(shù)據(jù)永遠(yuǎn)理性,大數(shù)據(jù)顯示三分球才是更有效率更合算的贏比賽手段。身體瘦弱,專攻三分球的后衛(wèi)庫里(Stephen Curry),遠(yuǎn)不是理想的NBA明星,卻在勇士得到重用,圍繞他打造的“死亡5小”組合,常規(guī)賽73勝,破了喬丹塵封20年的單季常規(guī)賽最佳記錄,隨后,連續(xù)5年殺進(jìn)總決賽,拿下3個總冠軍。

和每個商業(yè)王國一樣,勇士王朝最終還是解體了,后三年最重要的冠軍拼圖杜蘭特(Kevin  Durant)因為在勇士隊遭遇內(nèi)訌,被排擠去了布魯克林籃網(wǎng)隊。屈辱和榮耀,歸屬和背叛,兄弟和仇人,所有人都等著他殺回甲骨文球場的那一天!

哦,對了,籃網(wǎng)的老板,是阿里巴巴二號人物蔡崇信。奇怪,這該死的圈子怎么那么??? 

2009年,甲型H1N1流感肆虐美國。

就在疫情爆發(fā)幾周前。Google的工程師在《自然》雜志上發(fā)了一篇論文。中心思想是,Google用大數(shù)據(jù)技術(shù)分析用戶的搜索指令,提前預(yù)判到了這場流感。

這先知般的存在,讓Google風(fēng)光得一塌糊涂。

如果你還記得,不久前,Google剛剛推出了Android系統(tǒng)。它要領(lǐng)導(dǎo)人類從PC向移動手機(jī)遷徙了!那真是Google把微軟按在地上摩擦的時光,幾乎每一場發(fā)布會都是在抽微軟的臉。

Google很早就野心勃勃地在Kirkland開了辦公室,這個距離微軟總部Redmond不到10公里的地方。伴隨Google瘋狂的挖角,辭職信一封封地遞進(jìn)微軟CEO史蒂夫·鮑爾默(SteveBallmer)的辦公桌。這位一米九幾的大漢終于忍不住了,問道“別TM告訴我,你TM也是去Google?”美國人比較直,就回答,“是啊,你怎么知道的哈?” Ballmer抄起椅子直接砸了過來。

那是2004年,Ballmer還可以發(fā)脾氣扔椅子。09年就別扔椅子了,大家都覺得是微軟玩了這些人的青春,微軟應(yīng)該羞羞地向員工說聲抱歉。

舍恩伯格(Viktor Mayer Schnberger)在《大數(shù)據(jù)時代》中指出。什么是大數(shù)據(jù)時代?數(shù)據(jù)分析從“隨機(jī)采樣”、“精確求解”和“強(qiáng)調(diào)因果”的傳統(tǒng)模式,演變?yōu)?ldquo;全體數(shù)據(jù)”、“近似求解”和“只看關(guān)聯(lián)不問因果”的新模式。

超市零售巨頭Target,曾經(jīng)是“小數(shù)據(jù)”時代的贏家。經(jīng)過幾輪實(shí)驗,發(fā)現(xiàn)把啤酒放在尿不濕旁邊,啤酒銷量會大增。Target百思不得其解,后來這樣解釋:大概是,媽媽叫爸爸去超市買尿不濕,百無聊賴的爸爸看到啤酒,想到也要犒勞一下自己,所以就順手買了。

在大數(shù)據(jù)時代,以上至少兩點(diǎn)可以提高。第一,既然經(jīng)過有限幾輪實(shí)驗就能發(fā)現(xiàn)“啤酒+尿不濕”促銷法,那么用數(shù)字化方式+無數(shù)次實(shí)驗所有可能的組合搭配,會發(fā)現(xiàn)多少種促銷大法呢?顯然,零售的效率要爆炸了。第二,找到“把啤酒放到尿不濕旁邊”的促銷方法就行,何必一定要找一個蹩腳的理由?這就好比已經(jīng)汗涔涔地倒下,卻傻乎乎地問“我和你前X友們比,誰更棒?”這既找不到真實(shí)的答案,也無助于業(yè)務(wù)能力的提高。

不追求精確度,不追求因果,承認(rèn)混雜,探索相關(guān)——這就是,大數(shù)據(jù)時代。阿里巴巴前副總裁車品覺打過一個超贊的比喻:先開槍,后瞄準(zhǔn)。

當(dāng)然,大數(shù)據(jù)也好,云計算也好,并不是一帆風(fēng)順的。

2009年大出風(fēng)頭后,預(yù)測流感走勢的Google Flu在2015年徹底關(guān)閉。原因第一是隱私擔(dān)憂,第二是多次不準(zhǔn),荒謬頻出,尤其是2012年那一次,反復(fù)預(yù)警有疫情,但是最后毛都沒有。

云計算,同樣挫折不斷。2015年5月,網(wǎng)商銀行開業(yè)獲批當(dāng)日,支付寶在全國范圍癱瘓2.5個小時。2019年,中國第一的阿里云,和世界第一的AWS先后發(fā)生大規(guī)模宕機(jī)和癱瘓。作為云計算客戶的你,業(yè)務(wù)完全癱瘓,投訴電話被打爆;但是你的工程師卻摸不到出問題的服務(wù)器,你說你慌不慌?

但是再多的問題,也沒有人會懷疑,云計算的路子是對的。

100年前的北大。27歲胡適被蔡元培聘請為講師教授。北大學(xué)子有質(zhì)疑權(quán)威的傳統(tǒng),準(zhǔn)備課堂發(fā)難,提幾個胡適答不上來的問題,讓這個年輕人知道知道“this is 北大”。

傅斯年被派去提前聽胡適的課,探探虛實(shí)。傅斯年回來后,對準(zhǔn)備搗亂的北大同學(xué)說,“這個人書讀得不多,但是路子是對的。你們不要鬧。”

路子是對的。大數(shù)據(jù)只是還需要一些時間。除了技術(shù)的迭代,就是數(shù)據(jù)的積累。

不巧的是,這恰恰成為大數(shù)據(jù)最令人警惕的視角。當(dāng)數(shù)據(jù)成為新時代的石油,誰霸占數(shù)據(jù)誰就搶占未來。這下,硅谷迎來了最嚴(yán)厲的拷打?!都~約客》說,這還不到兩年,情況就發(fā)生翻轉(zhuǎn),硅谷曾經(jīng)被認(rèn)為是美國獨(dú)創(chuàng)性的先鋒和我們時代的宇航員,如今淪為與標(biāo)準(zhǔn)石油公司和其他鍍金時代的壟斷者進(jìn)行的比較。

打倒美國壟斷資本家!歐盟重拳出擊,出臺《通用數(shù)據(jù)保護(hù)條例》(General DataProtection Regulation),為互聯(lián)網(wǎng)企業(yè)攫取數(shù)據(jù)設(shè)置了最嚴(yán)格的控制。把公民隱私堅定地放在了公司發(fā)展之前。

同樣的問題,公民隱私和商業(yè)進(jìn)步,中國要怎么選?作為行業(yè)領(lǐng)袖,李彥宏的在訪談中這樣說:中國人對隱私不敏感。

百度大概也習(xí)慣了自己被噴成篩子的狀態(tài)。輿論恨啊,你李彥宏好歹是北大的,怎么連“不在乎”和“沒得選”都分不清?還是故意分不清?

換位思考一下,李彥宏也不容易,偏偏活在一個國人對于北大精英還抱有不切實(shí)際幻想的年代。何必呢,你們自己也不去未名湖畔走走,胡適傅斯年尚在乎?

也不想想當(dāng)年杭州師范畢業(yè)生是怎么說的?“支付寶隨時可以交給國家。”

這境界。還會有人舍得批評Jack?

直接上數(shù)據(jù),你們自己感受云計算的市場布局吧。

Canalys的報告,2019年世界范圍內(nèi)云計算產(chǎn)業(yè)的市場份額,AWS占32.3%,獨(dú)自構(gòu)成遙遙領(lǐng)先的第一梯隊,排在其后的是微軟Azure(16.9%)、谷歌云(5.8%)、阿里云(4.9%)。

客觀地說,中國商業(yè)的數(shù)字化已經(jīng)落后歐美不少。根據(jù)《2018~2019年中國公有云市場現(xiàn)狀與發(fā)展趨勢研究報告》、《2018中國企業(yè)上云報告》等文件,美國企業(yè)的上云率高達(dá)80%,而中國僅30%。

往積極地說,中國市場商業(yè)數(shù)字化的前景十分廣闊。知識青年上山下鄉(xiāng),廣闊天地,大有作為。

但是,從數(shù)據(jù)大國轉(zhuǎn)變?yōu)閿?shù)據(jù)強(qiáng)國,遠(yuǎn)非那么簡單。

尤其當(dāng)衣公子看到很多講解大數(shù)據(jù)的文章,常常把數(shù)據(jù)多少當(dāng)作大數(shù)據(jù)行業(yè)的唯一標(biāo)準(zhǔn)——這樣的論述,過于片面。更有甚,“只要XXX中國就一定能XXX”,妄圖用激越的民族情緒代替理性的商業(yè)常識,這樣的趨勢,常常讓我感到擔(dān)憂。

請允許我鋪開大數(shù)據(jù)行業(yè)的工程圖。

數(shù)據(jù)采集和傳輸:Sqoop、Flume、Kafka等開源技術(shù)

存儲:HDFS是大數(shù)據(jù)磁盤存儲的實(shí)際標(biāo)準(zhǔn)。

數(shù)據(jù)庫:Redis、HBase、Cassandra、MongoDB、Neo4j

計算處理引擎:Spark、MapReduce、Flink

實(shí)時計算:Flink、SparkStreaming

數(shù)據(jù)查詢和分析工具:豐富的SQL on Hadoop的解決方案,比如,Hive、HAWQ、Impala、Presto、Spark SQL以及傳統(tǒng)對的MPP(大規(guī)模并行處理)

數(shù)據(jù)可視化:Tableau、QlikView等敏捷商業(yè)智能分析工具

等等等等……

以上這些,才是大數(shù)據(jù)。

如果把大數(shù)據(jù)技術(shù)比喻成武器。那么數(shù)據(jù)只不過是火藥。千年前火藥就存在,數(shù)量再多也只不過是祭祀封建的鞭炮,如今決定火藥能否成為威力巨大的子彈,最關(guān)鍵的是造槍的技術(shù)。

衣公子認(rèn)為,要帶領(lǐng)中國走向大數(shù)據(jù)時代,要反對的是拔苗助長,該警惕的是“管得太多”,要相信的是敬畏市場,能依賴的是企業(yè)家精神。

這個問題上,不存在特殊國情?;ヂ?lián)網(wǎng)行業(yè)沒有國家模式,早有前車之鑒??催^那個紀(jì)錄片嗎?馬云在北京推銷中國黃頁,在宣傳司綜合處,對方打斷了他,“我跟你講啊,這件事情你應(yīng)該先約,辦事程序應(yīng)該你先約,你要不約的話呢,很難給你做一個很滿意的回答。”……

QQ最初不賺錢,卻狂吃服務(wù)器,騰訊一度瀕臨破產(chǎn)。抱上中國移動的大腿,合作移動QQ,才賺上了增值業(yè)務(wù)的分賬,馬化騰以為迎來了柳暗花明。但是移動推出了自己的產(chǎn)品“飛信”,又把企鵝踹開了。中國移動不強(qiáng)乎?當(dāng)年企鵝的營收和利潤給它當(dāng)零頭都不配,不是嗎?

當(dāng)搜索行業(yè)已經(jīng)明朗,還是有人想培養(yǎng)一種更正能量的搜索引擎——即刻。股東名單強(qiáng)到我都不敢在文章里列名字,還請了一個乒乓球大滿貫冠軍來當(dāng)總經(jīng)理。可是,如今,飛信安在哉?即刻搜索,安在哉?

真的,為了中國好,一定要允許、鼓勵自由競爭。

其實(shí),管理者如果真的想幫忙,大概有以下三點(diǎn)是可以做的。第一,培養(yǎng)人才。根據(jù)各類報告,以及衣公子和從業(yè)者的交流,中國大數(shù)據(jù)行業(yè)的人才缺口目前約100萬,5年后將達(dá)到500萬。

第二,保護(hù)知識產(chǎn)權(quán),維護(hù)市場公平。市場與人性如此,我們不要自欺欺人。剎住蔓延中國的商業(yè)抄襲之風(fēng),讓每個企業(yè)無論大小都可以收獲自己的商業(yè)果實(shí)。這樣才能真的做到萬眾創(chuàng)新,讓待攻克的技術(shù)難題陷入人民戰(zhàn)爭的汪洋大海。

第三,開放數(shù)據(jù)。目前來看,幾乎所有的公共數(shù)據(jù)都在政府和BAT手中。既然數(shù)據(jù)就是價值,開放價值,就好比戰(zhàn)國時期燕昭王于易水之畔筑黃金臺,招天下之士,誰是英雄,現(xiàn)場抽一塊黃金與之。

其實(shí),美國也有振興大數(shù)據(jù)行業(yè)的政策,而且比我們更早,但不是補(bǔ)貼錢,而是開放政府掌握的數(shù)據(jù)。奧巴馬2009年1月簽署《開放和透明的政府指令》(Transparency and Open Government),豐富且大量的美國公共數(shù)據(jù),是美國大數(shù)據(jù)行業(yè)興盛的土壤。

奧巴馬開篇就引用美國大法官路易斯·布蘭代斯的名言:陽光是最好的防腐劑。

是啊,陽光是最好的防腐劑。形勢比人強(qiáng)。

不說了,喝酒。

編者按:本文來自微信公眾號:衣公子的劍(ID:yigongzidejian),作者:衣公子(信托經(jīng)理、財經(jīng)作家)

本文來源衣公子的劍,內(nèi)容僅代表作者本人觀點(diǎn),不代表前瞻網(wǎng)的立場。本站只提供參考并不構(gòu)成任何投資及應(yīng)用建議。(若存在內(nèi)容、版權(quán)或其它問題,請聯(lián)系:service@qianzhan.com) 品牌合作與廣告投放請聯(lián)系:0755-33015062 或 hezuo@qianzhan.com

p45 q0 我要投稿

分享:
標(biāo)簽: 大數(shù)據(jù) Google

品牌、內(nèi)容合作請點(diǎn)這里:尋求合作 ››

前瞻經(jīng)濟(jì)學(xué)人

專注于中國各行業(yè)市場分析、未來發(fā)展趨勢等。掃一掃立即關(guān)注。

前瞻產(chǎn)業(yè)研究院

中國產(chǎn)業(yè)咨詢領(lǐng)導(dǎo)者,專業(yè)提供產(chǎn)業(yè)規(guī)劃、產(chǎn)業(yè)申報、產(chǎn)業(yè)升級轉(zhuǎn)型、產(chǎn)業(yè)園區(qū)規(guī)劃、可行性報告等領(lǐng)域解決方案,掃一掃關(guān)注。

前瞻數(shù)據(jù)庫
企查貓
作者 衣公子的劍
財經(jīng)自媒體
71346
關(guān)注
60
文章
前瞻經(jīng)濟(jì)學(xué)人App二維碼

掃一掃下載APP

與資深行業(yè)研究員/經(jīng)濟(jì)學(xué)家互動交流讓您成為更懂趨勢的人

研究員周關(guān)注榜

企查貓(企業(yè)查詢寶)App
×

掃一掃
下載《前瞻經(jīng)濟(jì)學(xué)人》APP提問

 
在線咨詢
×
在線咨詢

項目熱線 0755-33015070

AAPP
前瞻經(jīng)濟(jì)學(xué)人APP下載二維碼

下載前瞻經(jīng)濟(jì)學(xué)人APP

關(guān)注我們
前瞻產(chǎn)業(yè)研究院微信號

掃一掃關(guān)注我們

我要投稿

×
J