第一章 什么是交互式數(shù)字媒體 當(dāng)我告訴人們我教“交互式數(shù)字媒體”時(shí)，人們通常會(huì)問(wèn)：“那是什么？”盡管我已經(jīng)非常習(xí)慣于解釋我的研究領(lǐng)域，但我還是很驚訝究竟有多少人不知道交互式數(shù)字媒體是什么。我認(rèn)為最好描述交互式數(shù)字媒體的定義是“計(jì)算機(jī)驅(qū)動(dòng)的體驗(yàn)（通�；�于屏幕），它促進(jìn)了設(shè)備和用戶之間的交互”，或者，正如我的一名學(xué)生所說(shuō)：“您對(duì)設(shè)備（電腦、平板電腦、屏幕等）做些什么，這個(gè)設(shè)備就會(huì)做一些回應(yīng)�！睂�(shí)際上我認(rèn)為這也是一個(gè)很好的定義。 交互式數(shù)字媒體應(yīng)用程序可以是網(wǎng)站、傳統(tǒng)的獨(dú)立自助終端、運(yùn)行在移動(dòng)設(shè)備上的 App、電子游戲，或者是由計(jì)算機(jī)或傳感器驅(qū)動(dòng)的博物館或公共場(chǎng)所中的物理體驗(yàn)。所有這些都是用不同編程語(yǔ)言開(kāi)發(fā)的，運(yùn)行在不同類型的硬件上，服務(wù)于不同目的。然而，它們的共同點(diǎn)是都支持用戶和系統(tǒng)之間的雙向?qū)υ挕? 第一節(jié)? 交互式數(shù)字媒體不同于其他形式媒體的特點(diǎn) 是什么讓交互式數(shù)字媒體不同于其他形式的媒體？答案是兩個(gè)詞：用戶、交互。當(dāng)用戶體驗(yàn)其他形式的媒體時(shí)，例如，觀看圖像、閱讀文本、觀看視頻或收聽(tīng)音頻，媒體不對(duì)用戶做出響應(yīng)。這些媒體形式可能會(huì)引發(fā)用戶的某種反應(yīng)，但用戶不會(huì)與之交互。 交互式數(shù)字媒體不同于其他形式的媒體，這是因?yàn)樗�是一種非線性體驗(yàn)。它不同于視頻、音頻和文本。視頻、音頻和文本通常有不同的開(kāi)頭、中間和結(jié)尾，用戶以順序方式使用媒體。雖然一些電影具有非線性的敘事結(jié)構(gòu)，即結(jié)尾在開(kāi)頭顯示，但是觀眾仍然以順序方式體驗(yàn)電影。一個(gè)經(jīng)典例子是2000年的電影《記憶碎片》，它有兩條情節(jié)主線，同時(shí)向相反方向發(fā)展，然后在最后一幕合二為一。從這個(gè)意義上說(shuō)，這部電影有一個(gè)非線性的敘事，但觀眾體驗(yàn)這部電影的方式是受電影剪輯師將它們組合起來(lái)的方式所控制的。 每個(gè)用戶在使用交互式應(yīng)用程序時(shí)可能會(huì)有不同的體驗(yàn)。例如，我可能會(huì)打開(kāi)AroundMe App并開(kāi)始尋找藥店，而其他人可能會(huì)在我周圍找到雜貨店。即使是像AroundMe這樣相當(dāng)簡(jiǎn)單的App，用戶可以選擇的路徑也幾乎是無(wú)限的。對(duì)于每個(gè)用戶來(lái)說(shuō)，體驗(yàn)是動(dòng)態(tài)和獨(dú)特的。 然而，交互式數(shù)字媒體應(yīng)用的某些部分是需要按線性方式進(jìn)行體驗(yàn)的。例如，在培訓(xùn)應(yīng)用程序中，如果用戶需要在進(jìn)入下一個(gè)模塊之前理解某些內(nèi)容，信息通常以線性方式呈現(xiàn)。交互式數(shù)字媒體中線性體驗(yàn)的另一個(gè)例子是電子商務(wù)網(wǎng)站的結(jié)賬部分。在線購(gòu)物者必須在輸入地址、查看訂單、添加信用卡信息以及最終結(jié)賬之前查看購(gòu)物車。 預(yù)先設(shè)計(jì)較少的交互式數(shù)字媒體體驗(yàn)可能是相當(dāng)具有挑戰(zhàn)性的，因?yàn)楹茈y預(yù)測(cè)用戶行為。人們經(jīng)常以設(shè)計(jì)者和開(kāi)發(fā)者從未考慮過(guò)的方式使用應(yīng)用程序。許多交互式應(yīng)用失敗了，因?yàn)樵O(shè)計(jì)者和開(kāi)發(fā)者不明白用戶想要什么，以及他們將如何使用產(chǎn)品。 交互式應(yīng)用程序開(kāi)發(fā)過(guò)程中的一個(gè)重要步驟是嘗試預(yù)測(cè)用戶將如何使用該應(yīng)用程序。設(shè)計(jì)人員創(chuàng)建如圖 1-1 所示的場(chǎng)景，以確定他們的應(yīng)用程序如何滿足不同類型用戶的需求。 有時(shí)，即使精心策劃，交互式應(yīng)用還是會(huì)因?yàn)橛脩舨幌矚g使用而失敗。例如，2009 年，谷歌推出了一款名為Google Wave的產(chǎn)品，旨在簡(jiǎn)化群發(fā)郵件。它得到了大量炒作和宣傳。因?yàn)槿喊l(fā)郵件經(jīng)常很難跟蹤所有線索和回復(fù)，所以人們都很興奮，想使用該產(chǎn)品。不幸的是，這款應(yīng)用并沒(méi)有像宣傳的那樣取得成功。該產(chǎn)品融合了電子郵件、即時(shí)消息和維基的功能，導(dǎo)致用戶界面過(guò)于復(fù)雜，整個(gè)產(chǎn)品沒(méi)有比原有解決方案做得更好。開(kāi)發(fā)者沒(méi)有想到用戶使用該產(chǎn)品時(shí)會(huì)不知所措，因而不再使用該 App。最終這款產(chǎn)品消失了 （Fitzpatrick，2010）。 交互式數(shù)字媒體開(kāi)發(fā)人員如何避免這些陷阱？交互式數(shù)字媒體開(kāi)發(fā)人員了解用戶如何與應(yīng)用程序交互的一種方法是在開(kāi)發(fā)過(guò)程中進(jìn)行一些可用性測(cè)試。也就是說(shuō)，一旦您完成了一個(gè)原型或者項(xiàng)目的一部分，您就把它交給有代表性的用戶，看看他們是如何與之交互的。這個(gè)過(guò)程意在指出瑕疵，告訴您需要修復(fù)的地方�？吹接脩羧绾闻c您構(gòu)建的應(yīng)用程序進(jìn)行交互，通常是非常令人驚訝的�？雌饋�(lái)可能會(huì)令人失望，因?yàn)槟�認(rèn)為直觀的東西，對(duì)用戶來(lái)說(shuō)可能不是。但是在開(kāi)發(fā)周期的早期理解可用性缺陷要比后期好得多。 幸運(yùn)的是，一些可用性問(wèn)題可以通過(guò)快速修復(fù)來(lái)解決。例如，不一致的標(biāo)題會(huì)使用戶困惑。如果您在一個(gè)地方稱一個(gè)頁(yè)面為“訂單”，而在另一個(gè)地方稱為“產(chǎn)品列表”，用戶對(duì)此可能會(huì)感到困惑。雖然您可能明白兩者是一回事，但用戶可能不明白。 我在開(kāi)發(fā)一個(gè)電子商務(wù)應(yīng)用程序時(shí)，由于沒(méi)有明確標(biāo)注，無(wú)意中造成了一個(gè)可用性問(wèn)題。這個(gè)特殊的電子商務(wù)網(wǎng)站有一個(gè)登錄區(qū)，供設(shè)計(jì)師登錄后上傳他們要出售的物品。在我們推出之前，設(shè)計(jì)師們登錄并編輯他們的個(gè)人資料，添加產(chǎn)品數(shù)據(jù)。有一回，我增加了一個(gè)客戶登錄，但設(shè)計(jì)師報(bào)告說(shuō)他們無(wú)法登錄。我不知道為什么登錄突然不能用了。最后，我向一位設(shè)計(jì)師詢問(wèn)更多關(guān)于她試圖做什么的信息，我發(fā)現(xiàn)她試圖通過(guò)客戶登錄方式來(lái)進(jìn)行登錄。因?yàn)槲覜](méi)有對(duì)客戶和設(shè)計(jì)者的登錄位置進(jìn)行不同的標(biāo)記，所以一直使用該應(yīng)用程序的設(shè)計(jì)者只是以為我為他們創(chuàng)建了另一個(gè)登錄位置。幸運(yùn)的是，對(duì)于這種情況，這個(gè)嚴(yán)重的可用性問(wèn)題是很容易解決的。這提醒了我，用戶是多么不可預(yù)測(cè)的。 第二節(jié)? 交互式數(shù)字媒體的形式 自從交互式數(shù)字媒體出現(xiàn)以來(lái)，硬件不斷發(fā)展，產(chǎn)生新的交互的形式、用途和模式，影響我們交流、購(gòu)物、學(xué)習(xí)和娛樂(lè)的方式。 傳統(tǒng)的獨(dú)立自助終端 自助終端（Kiosk）是一種基于特定位置的交互式（通常是觸摸屏）體驗(yàn)，旨在提供指導(dǎo)、提高生產(chǎn)力、促進(jìn)交流、傳遞娛樂(lè)信息。交互式自助終端是交互式媒體的最初形式，甚至比萬(wàn)維網(wǎng)發(fā)明還要早幾年。雜貨店和藥店的自助結(jié)賬亭以及航空公司的值機(jī)亭越來(lái)越常見(jiàn)，因?yàn)樗鼈円驯蛔C明可以提高生產(chǎn)率（Sabatová等，2016）。在博物館環(huán)境中，自助終端用于吸引和通知游客，增加另一維度的信息或提供與所展示內(nèi)容相關(guān)的體驗(yàn)。這些現(xiàn)代的觸摸屏自助終端現(xiàn)在甚至可以促進(jìn)協(xié)作式的交互式體驗(yàn)。 網(wǎng)站 網(wǎng)站是相互鏈接的Web頁(yè)面的組合。所有網(wǎng)頁(yè)都在同一域名下，顯示在Web瀏覽器中，可以從任何連接到互聯(lián)網(wǎng)的計(jì)算機(jī)上訪問(wèn)。早期的網(wǎng)站主要是“宣傳冊(cè)式網(wǎng)頁(yè)”，由一些帶有相互鏈接文本的靜態(tài)頁(yè)面組成，但隨著技術(shù)、帶寬和協(xié)議的發(fā)展，它們變得越來(lái)越復(fù)雜。20世紀(jì)90年代末，電子商務(wù)網(wǎng)站蓬勃發(fā)展。此后不久，博客和社交媒體平臺(tái)出現(xiàn)在萬(wàn)維網(wǎng)上。 與早期的網(wǎng)站相比，現(xiàn)代網(wǎng)站已經(jīng)有了很大的發(fā)展。因?yàn)槲覀儸F(xiàn)在可以從各種設(shè)備訪問(wèn)網(wǎng)站，所以大多數(shù)網(wǎng)站都被設(shè)計(jì)為響應(yīng)式的，這意味著它們的布局和內(nèi)容會(huì)根據(jù)請(qǐng)求它的設(shè)備進(jìn)行調(diào)整。這一高級(jí)要求對(duì)Web設(shè)計(jì)人員和Web開(kāi)發(fā)人員都提出了新的挑戰(zhàn)。 移動(dòng)應(yīng)用 移動(dòng)應(yīng)用程序（App）是現(xiàn)代智能手機(jī)誕生后出現(xiàn)的一種獨(dú)特的交互式數(shù)字媒體形式。它們不同于桌面應(yīng)用程序（在您的計(jì)算機(jī)上運(yùn)行的Microsoft Word等程序）和Web應(yīng)用程序（在Web瀏覽器上運(yùn)行的專用程序），因?yàn)樗鼈兪菫樵谄桨咫娔X、智能手機(jī)或手表上運(yùn)行而設(shè)計(jì)的，并且通常是為執(zhí)行特定任務(wù)而設(shè)計(jì)的。一些App安裝在諸如Web瀏覽器或電子郵件程序的設(shè)備上。其他App必須通過(guò)與設(shè)備相關(guān)的應(yīng)用商店購(gòu)買(mǎi)和下載，例如用于iPhone和iPad的蘋(píng)果應(yīng)用商店。 自從App首次出現(xiàn)以來(lái)，它們?cè)絹?lái)越受歡迎，因?yàn)樗鼈兺ǔ２毁F，易于下載、更新和刪除，并為設(shè)備提供有趣且有用的增強(qiáng)功能。App也可以由任何人開(kāi)發(fā)和銷售，只要有一個(gè)聰明的想法和一點(diǎn)編程知識(shí)。這就確保了持續(xù)創(chuàng)新。應(yīng)用商店中總是有新的和令人興奮的東西。 App有時(shí)會(huì)與移動(dòng)版本的網(wǎng)站混淆，但網(wǎng)站總是在App瀏覽器中查看。公司經(jīng)常開(kāi)發(fā) App，使其具有網(wǎng)站的一些相同功能，但是被設(shè)計(jì)成讓某些任務(wù)變得簡(jiǎn)單。精明的公司知道，如果您下載他們的App，該公司可以向您推送通知，如優(yōu)惠券和提醒等，以利于他們的業(yè)務(wù)。 電子游戲 電子游戲是一種在電腦、移動(dòng)設(shè)備或?qū)Ｓ糜螒驒C(jī)上運(yùn)行的游戲。用戶使用某種類型的物理控制器、傳感器或觸摸屏與系統(tǒng)進(jìn)行交互。第一批電子游戲裝在電話亭大小的外殼里，被安放在拱廊中，供公眾使用。1972年發(fā)行的Pong被稱為第一部電子游戲，目標(biāo)是在屏幕上來(lái)回?fù)舸蛞粋�(gè)虛擬球。圖形很簡(jiǎn)單——黑白的，并且游戲也很容易理解和好玩（Newman，2017）。Pong 和其他在20世紀(jì)70年代末和80年代初發(fā)行的早期電子游戲令人激動(dòng)，這促進(jìn)了街機(jī)文化的建立：孩子們?cè)诠袄戎虚e逛，把錢(qián)花在電子游戲上。 到20世紀(jì)70年代末，電子游戲已經(jīng)在家中出現(xiàn)，可以通過(guò)專門(mén)的游戲機(jī)來(lái)玩。第一個(gè)成功的電子游戲機(jī)是1977年的雅達(dá)利（Atari）2600（Newman，2017）。從那時(shí)起，電子游戲機(jī)有了顯著的發(fā)展。在過(guò)去的40年里，我們已經(jīng)看到了幾代游戲設(shè)備的出現(xiàn)和消失，從手持游戲機(jī)到最新、最先進(jìn)的支持互聯(lián)網(wǎng)上協(xié)作的游戲設(shè)備，以及擺脫了控制器只通過(guò)感應(yīng)玩家手勢(shì)實(shí)現(xiàn)交互的游戲設(shè)備。 電子游戲現(xiàn)在已經(jīng)進(jìn)入我們所有的設(shè)備。我們可以在電腦上或者通過(guò)Web瀏覽器，在平板電腦和智能手機(jī)上，甚至在手表上玩電子游戲�？捎玫挠螒蝾愋鸵彩嵌喾N多樣的。一些游戲機(jī)上的游戲非常復(fù)雜，需要花費(fèi)大量時(shí)間去探索和掌握。增強(qiáng)現(xiàn)實(shí)（AR）游戲融合了現(xiàn)實(shí)世界和數(shù)字空間。虛擬現(xiàn)實(shí)（VR）游戲通過(guò)體感方式讓玩家沉浸在游戲世界中�！靶蓍e游戲”非常簡(jiǎn)單，可以在排隊(duì)等候時(shí)在 iPhone 上玩。游戲不再僅僅是為了娛樂(lè)；它們被用來(lái)教育和培訓(xùn)學(xué)生和專業(yè)人員。游戲是一個(gè)不斷增長(zhǎng)的行業(yè)，有著吸引人的細(xì)分市場(chǎng)和商機(jī)。 實(shí)物裝置、展品和表演 博物館已經(jīng)成為一個(gè)受歡迎的獨(dú)特的交互式體驗(yàn)的場(chǎng)所。在這里，展覽設(shè)計(jì)師努力創(chuàng)造具有“技術(shù)的新穎性和開(kāi)放性”的體驗(yàn)，以吸引參觀者的注意力（Sandifer，2003）。這種新一代的交互式展覽鼓勵(lì)參觀者以創(chuàng)新的方式與內(nèi)容進(jìn)行互動(dòng)，這通常促進(jìn)了參觀者之間的協(xié)作。例如，在富蘭克林研究所，參觀者可以借助 Oculus Rift（一種包含護(hù)目鏡和耳機(jī)的 VR頭盔，讓佩戴者沉浸在3D虛擬世界中）的精密傳感器，“發(fā)現(xiàn)深海的隱藏之美，飛往外太空的最遠(yuǎn)邊界，以及探索人體復(fù)雜的內(nèi)部機(jī)理”（The Franklin Institute，n.d.）。在史密森尼博物館的“皮膚和骨骼”展覽中，參觀者通過(guò)增強(qiáng)現(xiàn)實(shí)App觀看這些文物時(shí)，看到皮膚和伴隨骨骼而來(lái)的運(yùn)動(dòng)（Billock，2017）。 獨(dú)特而精妙的參與型交互式數(shù)字體驗(yàn)設(shè)備有時(shí)安裝在公共空間。大衛(wèi)?斯莫爾（David Small）的《思想大廳》（Hall of Ideas）就是一個(gè)最好的例子。該展覽位于波士頓的瑪麗?貝克?艾迪圖書(shū)館（Mary Baker Eddy Library），展出了從噴泉中冒出來(lái)的動(dòng)畫(huà)字母。它們從噴泉溢出來(lái)，灑在地板上，聚集在人們站立的地方。然后它們慢慢爬上墻，在那里它們排成了引語(yǔ)（小型設(shè)計(jì)公司：思想大廳）。 交互式媒體為戲劇的現(xiàn)場(chǎng)表演增添了新的元素。俄勒岡州波特蘭市的特羅基亞牧場(chǎng)的編舞師在他們的舞蹈表演中充分利用它的能力。例如，最近的一部作品，部分是由觀眾的動(dòng)作編排的。演出開(kāi)始時(shí)，攝像機(jī)記錄下觀眾的動(dòng)作。然后，軟件解釋這些圖像，向舞者發(fā)送信號(hào)，告訴他們要表演哪個(gè)動(dòng)作序列（Kaufman，2013）。 基于非屏幕的交互式體驗(yàn) 交互式數(shù)字媒體領(lǐng)域中相對(duì)較新的創(chuàng)新是基于非屏幕的體驗(yàn)，服務(wù)于不同的目的并在不同的環(huán)境中使用。雖然它們?nèi)匀槐阌谟脩襞c基于計(jì)算機(jī)的某種類型設(shè)備進(jìn)行通信，但是它們并沒(méi)有利用傳統(tǒng)計(jì)算機(jī)屏幕。一個(gè)非常實(shí)用的非屏幕交互式設(shè)備的例子是亞馬遜的智能音箱 Echo。Echo可以根據(jù)用戶的語(yǔ)音指令播放不同類型的媒體。