【前言】

回想2020年，疫情的爆發(fā)使得世界經(jīng)濟陷入衰退，目前仍對我們的生活造成影響。

幸運的是我們生活在一個好時代，科技在這幾十年中得到了迅猛發(fā)展。即使在疫情嚴重的時刻，我們?nèi)匀豢梢酝ㄟ^音視頻會議進行遠程辦公，通過在線教育系統(tǒng)進行學習，通過一些視頻軟件觀看直播。

從某個角度看，這次疫情雖然導致很多行業(yè)處于崩潰邊緣，但也迫使一些行業(yè)加速發(fā)展，其中音視頻會議、在線教育的重要性馬上體現(xiàn)了出來，新的溝通方式和教育方式被越來越多的人所認知、接納。我們甚至可以推測，在線教育行業(yè)和音視頻會議行業(yè)會在今年崛起，并在未來十年得到迅猛發(fā)展。音視頻技術(shù)、傳輸技術(shù)（如5G）的飛速發(fā)展，以及因此激發(fā)出的人們對音視頻的需求，也為音視頻行業(yè)的發(fā)展提供了動力。

現(xiàn)在音視頻技術(shù)已經(jīng)非常成熟了，它被越來越廣泛地應用于各行各業(yè)，如抖音、微信短視頻、娛樂直播、教育直播、音視頻會議等。就連熱門的AI技術(shù)也與音視頻技術(shù)關系密切，如智能音箱、自動駕駛、人臉識別等都離不開音視頻技術(shù)。未來音視頻技術(shù)會有更好的前景，對音視頻人才的需求也必然會像當年移動互聯(lián)網(wǎng)發(fā)展時一樣出現(xiàn)井噴現(xiàn)象。面對這樣的機遇，你若能掌握音視頻的核心技術(shù)，一定可以在未來職場上獲得豐厚的回報和滿滿的成就感。所以，目前是學習音視頻的時機，及早加入音視頻研發(fā)的隊伍，有助于你在未來的職場上更有作為。

說到音視頻技術(shù)，就不得不說Google開源的WebRTC庫了。WebRTC庫如同音視頻技術(shù)的一頂王冠，上面鑲嵌了大大小小、各種各樣的寶石，如降噪、回音消除、自動增益、NetEQ、網(wǎng)絡擁塞控制······不勝枚舉！目前國內(nèi)無論是在線教育直播系統(tǒng)，還是音視頻會議系統(tǒng)，其底層幾乎無一例外都使用了WebRTC或從WebRTC中借鑒了不少有價值的模塊和思想。不僅如此，如果現(xiàn)在你去應聘一線大廠的音視頻研發(fā)崗，可以發(fā)現(xiàn)崗位描述中都寫有熟悉WebRTC技術(shù)者優(yōu)先之類的要求，WebRTC的重要性由此可見一斑。因此，了解和學習WebRTC更顯得尤為重要。

自從2011年WebRTC推出之后，我就一直在追蹤其進展。近幾年WebRTC的發(fā)展越來越快，服務質(zhì)量也越來越好，現(xiàn)在對于大多數(shù)公司來說，完全不必像我們當年（2010年）那樣從0開始自研音視頻系統(tǒng)了。你可以在WebRTC的基礎上構(gòu)建系統(tǒng)，這樣既省時又省力，質(zhì)量又能得到保障。

但學習WebRTC也并非易事，需要你有良好的基礎，如熟練掌握C 、熟悉音視頻知識、了解網(wǎng)絡傳輸?shù)龋�這顯然增加了學習WebRTC的成本。而我自從加入跟誰學團隊后，不知怎的竟有了好為人師的沖動，一直在想是否可以對WebRTC做一個深入剖析，讓更多的人知道WebRTC能做什么，該如何更好地利用WebRTC。這種想法一直縈繞心頭，隨著時間的推移反而愈加強烈，后來竟成了我必須完成的使命！

因此，自2018年開始，我制定了WebRTC三部曲的計劃，即推出三門課，分別是WebRTC入門與實戰(zhàn)百萬級高并發(fā)WebRTC流媒體服務器的實現(xiàn)WebRTC源碼剖析。這三門課的前兩門我已經(jīng)在慕課網(wǎng)推出，受到了廣泛好評，而第三門則以圖書的形式推出，本書也就與大家見面了。當然，WebRTC源碼十分龐雜，想通過一本書將其講清楚是不現(xiàn)實的，所以這本書的推出既是我制定的WebRTC三部曲計劃的終點，也是后面深入分析WebRTC源碼的起點，而我的終極目標是將WebRTC剖析透徹，讓更多的人可以更好地利用WebRTC做出更優(yōu)秀的產(chǎn)品。

【本書分為三部分，共13章】

第①部分，第1～3章，主要介紹WebRTC的由來，為什么要選擇WebRTC，以及實時音視頻通信的本質(zhì)是什么。

其中第3章為關鍵，只有了解了音視頻實時通信的本質(zhì)，你才能知道音視頻實時通信要解決什么問題，然后才能知道如何解決這些問題，從而理解WebRTC為什么要這樣做。

第②部分，第4～10章，循序漸進地向你講解WebRTC的理論和實戰(zhàn)。

第4章介紹了一個簡單的WebRTC信令服務器該如何構(gòu)建，

第5章介紹了如何通過瀏覽器實現(xiàn)一對一通信，通過這兩章你就可以搭建出一個WebRTC一對一實時通信系統(tǒng)了。

第6章介紹了WebRTC底層是如何傳輸音視頻數(shù)據(jù)的，重點是如何進行NAT穿越；

第7章詳述了WebRTC媒體協(xié)商使用的SDP各字段的含義。需要說明的是，SDP中的每個字段你都需要牢記在心，這樣才能為后續(xù)閱讀WebRTC代碼掃清障礙。

第8章介紹如何通過移動端（Android、iOS）Native的方式實現(xiàn)一對一通信，讀完本章內(nèi)容后，將能實現(xiàn)Web端與移動端的互聯(lián)互通；

第9章介紹了WebRTC底層的傳輸協(xié)議RTP/RTCP，這部分內(nèi)容是每個從事實時通信工作的讀者必須掌握的；

第10章介紹了WebRTC的兩種擁塞控制算法，詳細介紹了WebRTC為什么終選擇Transport-CC作為默認擁塞控制算法。

第③部分，第11～13章。

第11章介紹了編譯WebRTC源碼庫的方法，對于大多數(shù)剛?cè)腴T的讀者來說，學習WebRTC的道門檻便是如何編譯WebRTC，通過對該章的學習，相信你一定可以順利地將WebRTC庫編譯出來；

第12章對WebRTC的peerconnect_client例子做了深入剖析，這個例子可以說是我們學習WebRTC源碼的必經(jīng)之路，這一章你一定要多花些時間將其全部掌握；

第13章是對WebRTC源碼的整體架構(gòu)和運轉(zhuǎn)流程的詳細分析，也是本書難的部分，將這章了解清楚后，你就知道WebRTC是如何運轉(zhuǎn)的了。

【推薦序】

2021年1月29日，WebRTC正式成為W3C和IETF標準。自2011年Google宣布WebRTC開源，已經(jīng)十年了。記得2011年10月，我約了當時還在VisualOn的劉華平和華平科技的劉睿在上海討論基于WebRTC創(chuàng)業(yè)計劃。

WebRTC的前身是GIPS（GlobalIPSolutions）。GIPS早全名叫作GlobalIPSound，是和SpritDSP一樣的終端語音通信解決方案。很多運營商都使用了GIPS或SpritDSP的方案做3G的底層通話SDK。GIPS的突出特點是包括編解碼、回聲消除、降噪等3A算法。GIPS團隊中也不乏大師，比如KenVos、BastiaanKleijn。KenVos（也是后來發(fā)明SILK的科學家）的iLBC和iSAC編碼器（2000年后基于FFT的語音編碼器）都開創(chuàng)了編解碼考慮網(wǎng)絡丟包影響的先河。發(fā)明回聲消除動態(tài)延時估計算法的BastiaanKleijn大師的論文一直被后來的工程師膜拜，它從根本上解決了延時估計的問題。GIPS后期開始做視頻通信SDK方案，所以也把全名由GlobalIPSound改成了GlobalIPSolutions。但星光閃耀的GIPS在商業(yè)上不算成功，后在2011年以不到7000萬美元的價格賣給了Google。而同年5月，微軟收購同樣技術(shù)領先的Skype時花費了85億美元。

如果把端到端通信互動技術(shù)分解一下，會發(fā)現(xiàn)其中有幾個技術(shù)難點：客戶端技術(shù)、服務器技術(shù)、全球設備網(wǎng)絡適配技術(shù)和通信互動質(zhì)量監(jiān)控與展示技術(shù)。在被收購時，GIPS更像一個完整的客戶端解決方案。所以后期Google的開發(fā)者在里面增加了P2P通信技術(shù)和一些簡單的互聯(lián)互通協(xié)議，以及基于Web展示的質(zhì)量監(jiān)控，使整個方案逐漸完整起來。

李超先生擁有十多年的實時音視頻研發(fā)經(jīng)驗，曾帶領團隊研發(fā)過多個直播平臺，先后任職滬江網(wǎng)高級架構(gòu)師、新東方音視頻技術(shù)專家。這本書從代碼出發(fā)，詳細介紹了如何使用WebRTC搭建一對一通信服務，并對內(nèi)部的協(xié)議、擁塞控制技術(shù)和交互邏輯也做了詳細的剖析，是一本難得的WebRTC開發(fā)書籍。

十年彈指一揮間，一本書囊括了李超先生多年的經(jīng)驗總結(jié)。很榮幸能為李超先生的作品作序。

聲網(wǎng) Agora 技術(shù) VP & 合伙人，高澤華