一個(gè)萬(wàn)物互聯(lián)的數(shù)字化世界正在悄然形成,不知不覺中,我們已經(jīng)進(jìn)入到了一個(gè)前所未有的數(shù)字化與智能化時(shí)代。
數(shù)智化時(shí)代對(duì)人類社會(huì)的改變是顛覆性的。半導(dǎo)體芯片技術(shù)的突飛猛進(jìn),使得萬(wàn)物皆可“數(shù)”;寬帶泛在網(wǎng)絡(luò)的普及應(yīng)用,使得萬(wàn)物皆可“連”;云計(jì)算(算力)與人工智能(算法)的并行發(fā)展,使得萬(wàn)事皆可“算”。數(shù)據(jù)已成為新的生產(chǎn)要素,算法和算力已成為新的生產(chǎn)動(dòng)力,機(jī)器智能將成為新的生產(chǎn)工具,數(shù)字經(jīng)濟(jì)、數(shù)字社會(huì)、數(shù)字生活和數(shù)字治理都將成為智能革命廣闊的主戰(zhàn)場(chǎng)。我們?cè)撊绾握J(rèn)識(shí)并適應(yīng)這個(gè)時(shí)刻變化中的世界?
《圖解數(shù)據(jù)智能》是一本為數(shù)字資源的對(duì)接方、分配方以及廣大的入門學(xué)習(xí)者提供相關(guān)數(shù)據(jù)智能概念的科普讀物。書中各個(gè)概念之間相對(duì)獨(dú)立,讀者可以將其作為一本檢索用的工具書籍,也可以根據(jù)自己的興趣靈活查閱相關(guān)篇章。
無(wú)論你是數(shù)智化領(lǐng)域的專業(yè)從業(yè)人員,還是剛剛畢業(yè)想要進(jìn)入該領(lǐng)域的技術(shù)小白,抑或是正面臨著數(shù)字化轉(zhuǎn)型的政府或企業(yè)人員,或者是千千萬(wàn)萬(wàn)個(gè)生活在這個(gè)數(shù)智化社會(huì)中的普通人,都可以閱讀此書,你將從酣暢淋漓的技術(shù)釋疑和輕松有趣的漫畫解讀中,找到自己的答案。
這是一本人人都能讀懂、趣味十足的技術(shù)科普書。
近百個(gè)核心技術(shù)概念,為你深度解讀數(shù)據(jù)智能時(shí)代背后的邏輯。
酣暢淋漓的技術(shù)釋義,輕松有趣的漫畫解讀,帶你輕松認(rèn)知這個(gè)時(shí)刻變化中的世界
1、通俗易懂
生動(dòng)鮮活的生活示例+幽默風(fēng)趣的行文插畫,對(duì)數(shù)據(jù)智能領(lǐng)域的核心概念進(jìn)行演繹呈現(xiàn)。
2、技術(shù)科普
近百個(gè)數(shù)據(jù)智能概念,高頻、熱門、有用,助你快速掃除對(duì)數(shù)據(jù)智能時(shí)代的認(rèn)知障礙。
3、貼近時(shí)代、貼近應(yīng)用
所有技術(shù)概念均來(lái)自當(dāng)前數(shù)字化生活中你每天能聽到/看到/刷到/聊到的詞匯,掌握這些概念,便能輕松暢游數(shù)據(jù)智能世界。
本書適合——
想進(jìn)入數(shù)據(jù)智能領(lǐng)域的技術(shù)小白
面臨數(shù)字化轉(zhuǎn)型的政府及企業(yè)人員
技術(shù)功底薄弱的產(chǎn)品經(jīng)理/市場(chǎng)營(yíng)銷人員/……
千千萬(wàn)萬(wàn)個(gè)處于數(shù)智化時(shí)代中的普通人
幾十年前的我們可能無(wú)法相信,我們生活在一個(gè)多么令人難以置信的時(shí)代。互聯(lián)網(wǎng)的飛速發(fā)展讓我們以光速躍進(jìn)了信息時(shí)代,信息大爆炸又讓我們跌入了大數(shù)據(jù)時(shí)代,緊接著大數(shù)據(jù)等新一代信息技術(shù)的進(jìn)一步發(fā)展和應(yīng)用讓人工智能時(shí)代迎面撞來(lái)。曾經(jīng)的我們還處在人類棋手被人工智能擊敗的錯(cuò)愕之中,短短幾年,我們的生活場(chǎng)景就逐漸被人工智能這個(gè)新物種占據(jù)。
2021 年10 月28 日,F(xiàn)acebook 宣布將更名為Meta,從此轉(zhuǎn)向以虛擬現(xiàn)實(shí)為主的新興計(jì)算平臺(tái)。公司CEO 扎克伯格表示,F(xiàn)acebook 數(shù)年內(nèi)將從“一家社交媒體公司變成一家元宇宙公司”。
一石激起千層浪。業(yè)界在驚呼:“元宇宙”真的要來(lái)了嗎?盡管學(xué)術(shù)界和工業(yè)界半信半疑,但似乎也沒(méi)有鮮明的反對(duì)聲音。人類社會(huì)發(fā)展到今天,人們已經(jīng)開始習(xí)慣了科技大佬們的“未卜先知”。今天,我們就奔跑在《未來(lái)之路》(比爾·蓋茨,1995)所描繪的信息高速公路上,我們就沉浸在《數(shù)字化生存》(尼古拉·尼葛洛龐帝,1996)所預(yù)言的數(shù)字化虛擬空間中。本以為是游戲世界中的場(chǎng)景,沒(méi)想到有可能真的要照進(jìn)人類社會(huì)的現(xiàn)實(shí)中。
一個(gè)萬(wàn)物互聯(lián)的數(shù)字化世界正在悄然形成,不知不覺中,我們已經(jīng)進(jìn)入了一個(gè)前所未有的數(shù)字化與智能化時(shí)代了。
與以往的任何時(shí)代都迥然不同,今天的數(shù)智化時(shí)代對(duì)人類社會(huì)的改變將是顛覆性的。我們得益于半導(dǎo)體芯片技術(shù)的突飛猛進(jìn),使得萬(wàn)物皆可“數(shù)”;我們得益于寬帶泛在網(wǎng)絡(luò)的普及應(yīng)用,使得萬(wàn)物皆可“連”;我們得益于云計(jì)算(算力)與人工智能(算法)的并行發(fā)展,使得萬(wàn)事皆可“算”。數(shù)據(jù)已成為新的生產(chǎn)要素,算法和算力已成為新的生產(chǎn)動(dòng)力,機(jī)器智能將成為新的生產(chǎn)工具,數(shù)字經(jīng)濟(jì)、數(shù)字社會(huì)、數(shù)字生活和數(shù)字治理都將成為智能革命廣闊的主戰(zhàn)場(chǎng)。
一個(gè)個(gè)橫空出世的新興概念,一場(chǎng)場(chǎng)新概念下的資本狂歡,乃至一瞬間筑起高樓的新興行業(yè)。然而,我們?cè)谙硎苤鴶?shù)智化時(shí)代便利性的同時(shí),也感受到了技術(shù)飛速演進(jìn)所帶來(lái)的困惑及裹挾。我們仿佛剛剛理解了什么是“信息化”,它就升級(jí)為了“數(shù)字化”,剛剛才適應(yīng)了“智能化”社會(huì),現(xiàn)在又面臨著“數(shù)智化”轉(zhuǎn)型;蛟S我們還未曾意識(shí)到,新時(shí)代意義下的“數(shù)字鴻溝”并非只存在于代際或城鄉(xiāng)之間,實(shí)則廣泛存在于主動(dòng)的概念創(chuàng)造者(掌握著數(shù)字話語(yǔ)權(quán)的知名企業(yè)、大型機(jī)構(gòu)、意見領(lǐng)袖等)與被動(dòng)的概念接受者(普羅大眾)之間。
面對(duì)著這些從新行業(yè)中衍生出的一個(gè)個(gè)新崗位,被新崗位倒逼出的一個(gè)個(gè)新專業(yè)……作為普通人,我們到底應(yīng)該選擇躬身入局還是應(yīng)等待潮水退盡?
無(wú)論你是正面臨著數(shù)字化轉(zhuǎn)型的政府或企業(yè)相關(guān)負(fù)責(zé)人,還是數(shù)智化領(lǐng)域的專業(yè)從業(yè)人員,抑或是剛剛畢業(yè)想要進(jìn)入該領(lǐng)域的技術(shù)小白,或者是我們千千萬(wàn)萬(wàn)生活在這個(gè)數(shù)智化社會(huì)中的普通人。我們都面臨著一個(gè)亟需解決的迫切問(wèn)題:我們應(yīng)該如何認(rèn)識(shí)并適應(yīng)如今所處的這個(gè)時(shí)刻變化中的世界。
在世界百年未有之大變局的今日,這既是巨大的機(jī)遇,也意味著艱難的挑戰(zhàn)。在面對(duì)未知的恐懼時(shí),本書或可稍稍弭平我們與這些專業(yè)技術(shù)之間的數(shù)字鴻溝,幫助我們形成在數(shù)智化時(shí)代下尋求問(wèn)題解決路徑的專業(yè)化思維模式,讓新技術(shù)更好地服務(wù)于我們的美好生活,而非成為被模糊不清的技術(shù)概念操縱的提線木偶。
這也正是我們編著本書的初衷,一方面是為了向政府或者企業(yè)中的非專業(yè)人士科普數(shù)據(jù)智能的相關(guān)概念,促進(jìn)專業(yè)與非專業(yè)人士之間實(shí)現(xiàn)更高效、順暢的溝通協(xié)作;另一方面也為即將踏出校門的高校畢業(yè)生們打開數(shù)據(jù)智能領(lǐng)域的大門,畢竟數(shù)智化思維已逐漸成為我們生活和工作中的必備思維。
如上所述,《圖解數(shù)據(jù)智能》是一本為數(shù)字資源的對(duì)接方、分配方以及廣大的入門學(xué)習(xí)者提供相關(guān)數(shù)據(jù)智能概念的科普讀物。書中各個(gè)概念之間相對(duì)獨(dú)立,讀者可以將其作為一本檢索用的工具書籍,也可以根據(jù)自己的興趣靈活查閱相關(guān)篇章。作為本書的編著團(tuán)隊(duì),我們基于在零點(diǎn)有數(shù)從事相關(guān)領(lǐng)域工作的有限經(jīng)驗(yàn),借助數(shù)智化視野,以“數(shù)據(jù)”“算力”“算法”“技術(shù)”和“應(yīng)用”為主線,為大家將其間涉及的通識(shí)性概念進(jìn)行通俗化的轉(zhuǎn)譯,并以故事化和漫畫化的事例加以呈現(xiàn),力求將晦澀、專業(yè)的概念深入淺出地呈現(xiàn)給大家。
在本書中,我們分為五個(gè)篇章為大家解答如下問(wèn)題。
一、什么是數(shù)據(jù)?我們經(jīng)常接觸到的數(shù)據(jù)類型有哪些?我們?nèi)绾螌?duì)這些數(shù)據(jù)進(jìn)行處理、存放和計(jì)算?
二、什么是算法?算法如何賦予機(jī)器以智能(智慧)?為什么算法會(huì)存在偏見?我們應(yīng)該如何讓算法對(duì)自己的偏見行為負(fù)責(zé)?
三、什么是算力?我們?cè)撊绾翁嵘?jì)算能力,以應(yīng)對(duì)大數(shù)據(jù)的快速增長(zhǎng)?
四、新一代信息技術(shù)有哪些?它們?nèi)绾螐募夹g(shù)層面徹底顛覆了我們的日常生活?
五、人工智能是如何應(yīng)用于各行各業(yè),作為普惠科技照亮千家萬(wàn)戶,甚至成為各國(guó)必爭(zhēng)之地的?
張燕玲,四川大學(xué)文學(xué)碩士,零點(diǎn)有數(shù)營(yíng)銷總監(jiān),歷任研究總監(jiān),具有10余年數(shù)據(jù)研究工作經(jīng)驗(yàn),兩次榮獲中國(guó)市場(chǎng)研究行業(yè)專業(yè)論文“寶潔獎(jiǎng)”一等獎(jiǎng),發(fā)表文章數(shù)百篇。在推動(dòng)數(shù)據(jù)智能和算法產(chǎn)業(yè)應(yīng)用的科普傳播方面具有豐富經(jīng)驗(yàn)。
許正軍,博士,高級(jí)通信工程師,零點(diǎn)有數(shù)技術(shù)副總裁。從事信息通信技術(shù)、互聯(lián)網(wǎng)、工業(yè)互聯(lián)網(wǎng)、“互聯(lián)網(wǎng)+政務(wù)服務(wù)”和數(shù)據(jù)智能行業(yè)應(yīng)用開發(fā)20余年,在各類學(xué)術(shù)刊物上發(fā)表過(guò)40多篇論文。在數(shù)字政府、數(shù)字社會(huì)和數(shù)字經(jīng)濟(jì)建設(shè)領(lǐng)域具有豐富的理論與實(shí)踐經(jīng)驗(yàn)。
張軍,中國(guó)人民大學(xué)經(jīng)濟(jì)學(xué)碩士,零點(diǎn)有數(shù)董事、首席執(zhí)行官,兼任中國(guó)信息協(xié)會(huì)市場(chǎng)研究業(yè)分會(huì)(CMRA)副會(huì)長(zhǎng)、歐洲民意與市場(chǎng)研究協(xié)會(huì)(ESOMAR)中國(guó)代表、全球移動(dòng)通信系統(tǒng)協(xié)會(huì)(GSMA)評(píng)委等職,多年來(lái)致力于公共管理和商業(yè)服務(wù)領(lǐng)域的數(shù)據(jù)挖掘與咨詢服務(wù)。
第1章 算量 /001
本章導(dǎo)讀 /001
大數(shù)據(jù) /004
結(jié)構(gòu)化數(shù)據(jù) /014
非結(jié)構(gòu)化數(shù)據(jù) /021
特征工程 /026
多源數(shù)據(jù) /034
網(wǎng)絡(luò)爬蟲 /038
行為數(shù)據(jù) /042
元數(shù)據(jù) /048
數(shù)據(jù)倉(cāng)庫(kù) /054
集群系統(tǒng) /059
分布式系統(tǒng) /063
中臺(tái) /068
數(shù)據(jù)加密 /076
第2章 算法 /085
本章導(dǎo)讀 /085
人工智能 /089
算法 /096
模糊計(jì)算 /103
機(jī)器學(xué)習(xí) /108
監(jiān)督學(xué)習(xí) /111
無(wú)監(jiān)督學(xué)習(xí) /116
強(qiáng)化學(xué)習(xí) /121
人工神經(jīng)網(wǎng)絡(luò) /127
深度學(xué)習(xí) /134
集成學(xué)習(xí)算法 /139
圖像識(shí)別 /148
人臉識(shí)別 /155
計(jì)算機(jī)視覺 /158
無(wú)人駕駛 /163
開源算法平臺(tái) /168
算法偏見 /173
算法責(zé)任 /179
第3章 算力 /184
本章導(dǎo)讀 /184
算力 /186
DPU /192
AI 芯片 /204
云、云計(jì)算、云存儲(chǔ) /213
公有云、私有云、混合云 /223
邊緣計(jì)算 /231
第4章 新一代信息技術(shù) /237
本章導(dǎo)讀 /237
新一代信息技術(shù) /239
數(shù)字新基建 /244
5G /252
物聯(lián)網(wǎng) /260
消費(fèi)互聯(lián)網(wǎng) /268
產(chǎn)業(yè)互聯(lián)網(wǎng) /273
工業(yè)互聯(lián)網(wǎng) /278
IPv6 /284
集成電路 /290
芯片 /296
傳感器 /301
人機(jī)交互 /308
下一代操作系統(tǒng) /311
智聯(lián)網(wǎng) /317
AR/VR /323
數(shù)字孿生 /328
第5章 數(shù)字化轉(zhuǎn)型 /334
本章導(dǎo)讀 /334
網(wǎng)絡(luò)強(qiáng)國(guó) /335
數(shù)字中國(guó) /340
智慧城市 /346
城市大腦 /351
數(shù)字底座 /358
數(shù)字化轉(zhuǎn)型 /362
數(shù)智化 /366
數(shù)字政府 /374
數(shù)字經(jīng)濟(jì) /382
數(shù)字化治理 /387
數(shù)字民生 /391
城市生命體征 /395
智能制造 /400
商業(yè)智能 /405
數(shù)字貨幣 /410
強(qiáng)化學(xué)習(xí)
【導(dǎo)讀】強(qiáng)化學(xué)習(xí)、監(jiān)督學(xué)習(xí)和半監(jiān)督學(xué)習(xí)屬于機(jī)器學(xué)習(xí)的三個(gè)大類。強(qiáng)化學(xué)習(xí)(Reinforcement Learning)又被稱為再勵(lì)學(xué)習(xí)、評(píng)價(jià)學(xué)習(xí)或增強(qiáng)學(xué)習(xí),是除了監(jiān)督學(xué)習(xí)和無(wú)監(jiān)督學(xué)習(xí)之外的第三種機(jī)器學(xué)習(xí)方法。
強(qiáng)化學(xué)習(xí)指的是機(jī)器選擇一個(gè)動(dòng)作用于環(huán)境,環(huán)境接受該動(dòng)作后狀態(tài)發(fā)生變化,同時(shí)產(chǎn)生一個(gè)強(qiáng)化信號(hào)(獎(jiǎng)或懲)反饋給機(jī)器,機(jī)器根據(jù)強(qiáng)化信號(hào)和環(huán)境當(dāng)前狀態(tài)再選擇下一個(gè)動(dòng)作,選擇的原則是使受到正強(qiáng)化(獎(jiǎng))的概率增大。
接下來(lái),將圍繞小美養(yǎng)狗的故事,告訴你什么是強(qiáng)化學(xué)習(xí),以及強(qiáng)化學(xué)習(xí)與監(jiān)督學(xué)習(xí)、無(wú)監(jiān)督學(xué)習(xí)的區(qū)別。
什么是強(qiáng)化學(xué)習(xí)
小美家里新養(yǎng)了一只寵物小狗狗,但是初來(lái)乍到的狗狗并不懂家里的規(guī)矩,于是,小美想要給它訓(xùn)訓(xùn)家規(guī)。
此處,我們請(qǐng)把小狗狗看作機(jī)器主體,“它不懂家里規(guī)矩”對(duì)應(yīng)強(qiáng)化學(xué)習(xí)中的“數(shù)據(jù)無(wú)標(biāo)簽,機(jī)器在沒(méi)有嘗試前不知道什么是對(duì)什么是錯(cuò)!
第一天,狗狗在家里亂尿尿了,小美打了它,并且罰它半天不能吃狗糧。下午,狗狗去廁所尿尿,小美摸了摸它,并且獎(jiǎng)勵(lì)了狗狗好吃的。不斷循環(huán)往復(fù),狗狗明白了:在廁所尿尿=主人高興+有好吃的;四處在客廳尿尿=主人不開心+會(huì)被打一頓+沒(méi)有吃的。慢慢地,狗狗再也不會(huì)在家里四處亂尿尿了,變成了一只愛干凈的狗狗。
上述例子中的“狗狗在家里亂尿尿了”對(duì)應(yīng)著強(qiáng)化學(xué)習(xí)中的“行為”,只有有了行為才有行為所對(duì)應(yīng)的外界的反饋,而這個(gè)反饋就是“小美打它,并且不給他吃的”。而后面的“狗狗去廁所尿尿后,小美獎(jiǎng)勵(lì)食物”對(duì)應(yīng)的是強(qiáng)化學(xué)習(xí)的“(正)強(qiáng)化信號(hào)”。
狗狗(機(jī)器)在循環(huán)往復(fù)地試錯(cuò)后,明白了什么是對(duì)的,什么是錯(cuò)的,并且不斷地去趨向?qū)Φ男袨,尋求最佳的表現(xiàn)結(jié)果。
強(qiáng)化學(xué)習(xí)與監(jiān)督學(xué)習(xí)的區(qū)別
可能有人會(huì)疑問(wèn),感覺強(qiáng)化學(xué)習(xí)和之前咱們提過(guò)的監(jiān)督學(xué)習(xí)很相似呀,都有一個(gè)“訓(xùn)練導(dǎo)師”。
是的,雖然如此,但不同的是:監(jiān)督學(xué)習(xí)的數(shù)據(jù)有標(biāo)簽,通過(guò)“帶有答案”的數(shù)據(jù)來(lái)訓(xùn)練(例如,你拎著狗狗,去整個(gè)屋子的四處全都走一遍,告訴它這是可以尿尿的,而那里是不可以尿尿的)。
而強(qiáng)化學(xué)習(xí)的數(shù)據(jù)無(wú)標(biāo)簽,只有嘗試了,才能得到反饋(例如,在客廳尿尿了,被打了;在廁所尿尿,被表?yè)P(yáng)了,并且獎(jiǎng)勵(lì)了好吃的),從反饋中,調(diào)整之前的行為(狗狗知道了什么是會(huì)被表?yè)P(yáng)的,就會(huì)去做,知道了做什么會(huì)被打,就不做了),就這樣不斷地調(diào)整,機(jī)器能夠?qū)W習(xí)到在什么樣的情況下選擇什么樣的行為可以得到最好的結(jié)果(狗狗以后都到廁所去尿尿了)。
強(qiáng)化學(xué)習(xí)與無(wú)監(jiān)督學(xué)習(xí)的區(qū)別
可能還有人會(huì)說(shuō),數(shù)據(jù)都是無(wú)標(biāo)簽的,那么強(qiáng)化學(xué)習(xí)和無(wú)監(jiān)督學(xué)習(xí)不是很像嗎?
不同的是,無(wú)監(jiān)督學(xué)習(xí)是從無(wú)標(biāo)簽的數(shù)據(jù)集中發(fā)現(xiàn)隱藏的結(jié)構(gòu)(例如,狗狗觀察了下家里的環(huán)境,知道了馬桶、垃圾桶和地毯都是圓的,衣柜、電視機(jī)、抽屜都是有棱角的)。而強(qiáng)化學(xué)習(xí)的目標(biāo)是獲得最大化獎(jiǎng)勵(lì)的結(jié)果(狗狗內(nèi)心os:我知道在廁所以外的地方尿尿,會(huì)被打,在廁所尿尿會(huì)被夸,我以后要做一只被獎(jiǎng)勵(lì)的狗狗)。
總而言之,強(qiáng)化學(xué)習(xí)就是讓計(jì)算機(jī)從什么都不懂,通過(guò)不斷嘗試,在環(huán)境給予的獎(jiǎng)勵(lì)或懲罰的刺激下,逐步形成對(duì)刺激的預(yù)期,在規(guī)律中學(xué)習(xí)的一種方法。強(qiáng)化學(xué)習(xí)的應(yīng)用很廣泛,無(wú)論是日常社交平臺(tái)中的推薦、優(yōu)化、猜你喜歡等,還是游戲、自動(dòng)駕駛,甚至是大家所熟知的蘋果智能語(yǔ)音助手Siri或者是戰(zhàn)勝世界第一圍棋手的阿爾法圍棋(AlphaGo),都有著強(qiáng)化學(xué)習(xí)的相應(yīng)嘗試與實(shí)踐。