跨越感官 – 產(chǎn)品的多模態(tài)交互(系列五)

0 評(píng)論 4565 瀏覽 1 收藏 12 分鐘

在前幾篇文章中,我們討論了環(huán)境、注意力等內(nèi)容,聽覺作為僅次于視覺的重要感官,這篇文章,我們分析下其在人機(jī)交互中的作用和設(shè)計(jì)要素。

“人體是一個(gè)反映整個(gè)世界樣子的鏡子,眼睛印證了宇宙中有光的存在,耳朵印證了機(jī)械振動(dòng)的存在?!?/p>

??本篇知識(shí)點(diǎn)概括:

1.聽覺 – 僅次于視覺的第二高分辨率感官

2.聽覺的人機(jī)交互參數(shù)

3.聲音體驗(yàn)設(shè)計(jì)

4.語音交互設(shè)計(jì)

01 聽覺 -僅次于視覺的第二高分辨率感官

聽覺利用我們周圍的空氣,以振動(dòng)波的形式傳遞壓力,人們用有趣的方式感知這些振動(dòng)的變化,比如感知到音高(pitch) ,和諧波(harmonic)。

「音高」指的是聲音的頻率,決定了我們聽到的音調(diào)的高低。音高越高,頻率越高,反之亦然。「和諧波」則是指在基本頻率的基礎(chǔ)上,聲音中存在的其他頻率成分,這些成分與基本頻率的關(guān)系通常是整數(shù)倍的關(guān)系,形成了豐富的音色和音質(zhì)。「音高」和「和諧波」在音樂和語言中都扮演著重要角色,影響著我們對(duì)聲音的感知和理解。

我們可以做到有選擇地集中注意力傾聽,無論是森林中一只活躍的鳥,還是某個(gè)人在一個(gè)嘈雜的房間里說話(也稱為“雞尾酒會(huì)效應(yīng)”)。這是因?yàn)槲覀兊膬芍欢湎喔粢欢尉嚯x,雙耳聽覺的配置讓我們能夠在 3D 空間中定位聲源。空氣是迄今為止最常見的振動(dòng),我們可以聽到波通過大多數(shù)形式的物質(zhì)傳導(dǎo),例如在水下游泳的時(shí)候,將耳朵貼在地上的時(shí)候,我們甚至可以使用骨骼傳導(dǎo)聲波設(shè)備。

聽覺是僅次于視覺的第二高分辨率感官。通過語言和音樂,它與我們一些最具智力和創(chuàng)造力的追求息息相關(guān)。然而,當(dāng)你把這些聽覺體驗(yàn)拆解開來時(shí),一首小提琴協(xié)奏曲、一句莎士比亞的歌詞或溪流的潺潺流淌,實(shí)際上都是聲源和我們耳朵之間的空間中吹過的一點(diǎn)空氣。聲音與自我表達(dá)最直接地聯(lián)系在一起,發(fā)聲是我們最早的交流能力之一。顯然,聽力與語言能力密切相關(guān),副語言也占交流的很大一部分(即:非語言交流),如嘆息、面部表情、手勢(shì)、清嗓子,以及所說的話語的細(xì)微語氣,稱為韻律。

02 聽覺的人機(jī)交互參數(shù)

范圍:

  • 頻率/音高:20–20,000 赫茲 (Hz)空氣壓縮波的每秒循環(huán)次數(shù)。
  • 振幅/體積:0–130 分貝 (dB)氣壓變化的程度

分辨率:

  • 頻率和音量的高分辨率讓在一串聲音中可以很容易地區(qū)分音高和音量的微小差異,但是單獨(dú)播放單個(gè)聲音的時(shí)候就要困難得多。
  • 我們可以區(qū)分不同音色,距離、混響和顫音(這些術(shù)語通常用于描述人聲和樂器。)

聚焦:

  • 選擇性聽覺注意(又稱「雞尾酒會(huì)效應(yīng)」)我們可以一次聽到多種聲音,就像管弦樂隊(duì)中的不同樂器一樣,也可以從許多不同的聲音中挑選出單個(gè)聲音。

反射:

  • 驚嚇反應(yīng),也稱為戰(zhàn)斗或逃跑,可能由突然、響亮或意外的聲音或動(dòng)作觸發(fā),也與其他感官相關(guān)。
  • 在過高的音量下,耳朵會(huì)停止對(duì)聲音做出反應(yīng),以防止耳朵受傷。

聽覺無障礙:

  • 聽力損失以 dB 為單位,隨著年齡的增長(zhǎng)而惡化。
  • 大約 20% 的人群患有某種形式的聽力損失。

其他能力:

  • 雙耳聽覺使我們能夠感知物體在空間中相對(duì)于我們自己的位置(聲源定位)。
  • 副語言是非語言交流的廣義術(shù)語,韻律是一種描述語氣、重音和其他意義載體的類型。
  • 即使是很低頻的聲音也可以感覺到振動(dòng)。

03 聲音體驗(yàn)設(shè)計(jì)

對(duì)于設(shè)計(jì)師來說,專注和認(rèn)知是針對(duì)聲音體驗(yàn)進(jìn)行設(shè)計(jì)的關(guān)鍵因素。因?yàn)?strong>以語音形式攜帶信息是認(rèn)知密集型的,所以它傳遞的速度和對(duì)即時(shí)環(huán)境的有用性很重要。例如,谷歌地圖對(duì)及時(shí)提供轉(zhuǎn)彎方向的音效使用非常謹(jǐn)慎,為了保證不讓用戶收到難以記住的信息。

聲音的早期用途是在遠(yuǎn)距離傳遞簡(jiǎn)單的信息。人們很快就發(fā)現(xiàn),即使在其他人很忙的時(shí)候,聲音也是吸引他人注意力的好方法。緊急救援人員車輛上的警報(bào)器、嚇唬入侵者或在火災(zāi)中動(dòng)員建筑物居民的響亮警報(bào),以及教堂的鐘聲或祈禱的呼喚基本上是一種公共廣播。這可能是因?yàn)?strong>聽覺是我們最快的感官。更溫和、更個(gè)人化的聲音使用,例如電話鈴聲和手機(jī)消息提醒,設(shè)計(jì)的意圖都旨在提醒而不是警告人們。現(xiàn)代生活的許多聲音來源仍然是教堂塔樓上的金屬鐘和火車上的電話或蒸汽喇叭的復(fù)古設(shè)計(jì),嗶嗶聲就可以追溯到以前最古老的電動(dòng)揚(yáng)聲器。

電子揚(yáng)聲器??

當(dāng)然,再現(xiàn)各類自然聲音的能力有限,我們被聲音提醒的方式也不需要如此復(fù)古。如今的聲音設(shè)計(jì)變得更加有創(chuàng)意,例如大阪的地鐵在每個(gè)車站到達(dá)時(shí)播放獨(dú)特的歌曲,經(jīng)常在通勤途中睡著的乘客可以很容易地識(shí)別出他們所在車站的獨(dú)特旋律,提醒乘客在聽到對(duì)應(yīng)站點(diǎn)的歌曲時(shí)醒過來。

除了警報(bào)之外,功能性聲音設(shè)計(jì)通常起著輔助作用,「邀請(qǐng)」或更常見的「確認(rèn)」操作,打電話的時(shí)候,撥號(hào)音表示系統(tǒng)正常運(yùn)行,要求用戶采取行動(dòng)。隨著數(shù)字交互性取代模擬交互,「確認(rèn)」變得越來越普遍,就像為您的相機(jī)提供的可自定義快門點(diǎn)擊聲音一樣。聲音經(jīng)常用于補(bǔ)充其他感官(通常是視覺),因此在幫助盲人或視障人士時(shí)尤為常見,例如聲音增強(qiáng)過馬路信號(hào)或火車站的語音名稱,不僅可以幫助那些沒有視力的通勤者,還可以幫助那些視線可能被遮擋的人。

日本路旁電線桿頂端的紅綠信號(hào)燈旁都安裝了一個(gè)名叫“附音響裝置信號(hào)機(jī)”的裝置,它能在綠色信號(hào)燈時(shí)發(fā)出“布谷、布谷”的聲音,提醒盲人過馬路。

電子游戲大量使用聲音,既作為互動(dòng)元素,也作為敘事元素。電子游戲的一個(gè)有趣的子類型,“無畫面”,意味著玩家要閉著眼睛玩,以 Papa Sangre 系列及其衍生產(chǎn)品為代表,例如本尼迪克特·康伯巴奇 (Benedict Cumberbatch) 講述的夜鷹。它基于聲音,使用雙耳音頻來傳遞位置感、動(dòng)量和動(dòng)作感,而游戲則由手機(jī)的加速計(jì)檢測(cè)到的手勢(shì)和原本空白屏幕上的控制器按鈕組成。這些類型的探索不僅為游戲,而且為音頻和觸覺交互性開辟了新的、有用的(且有趣的)’賽道‘。

游戲 The Nightjar 將玩家放在一艘殘疾的宇宙飛船上,而支持生命的關(guān)鍵系統(tǒng)又出現(xiàn)了故障。視力喪失加劇了游戲的心理恐怖,主要運(yùn)用的就是聽覺和觸覺。

04 語音交互設(shè)計(jì)

基于語音的交互(如 Amazon Echo、Apple Siri、Google Home 和 Google Assistant,天貓精靈,小愛同學(xué)等)的興起預(yù)示著語音將成為一個(gè)更強(qiáng)大的場(chǎng)所,但限制仍然存在,尤其是在聽力方面,因?yàn)樵摷夹g(shù)無法在嘈雜的環(huán)境中再現(xiàn)人類的雞尾酒會(huì)效果。語言通過添加思想、概念、問題、描述以及副語言的抽象來傳達(dá)額外的細(xì)微含義,從而為已經(jīng)信息密集的聲音領(lǐng)域增添了內(nèi)容。而語音是一種運(yùn)動(dòng)能力——產(chǎn)生聲帶振動(dòng)并協(xié)調(diào)我們的嘴巴、舌頭和嘴唇以創(chuàng)建特定音素的能力,通常將語音技術(shù)成為聽覺界面(Voice User Interface),按理這應(yīng)該是最快能被用戶駕馭的人機(jī)交互界面,因?yàn)闀?huì)說話是人類與身俱來的能力,但實(shí)際用戶在使用語音交互時(shí),還是存在很多無法自然使用的問題,比如,“并不知道機(jī)器可以理解我哪些話啊“ ”公共場(chǎng)合開口和我手機(jī)說話是不是有點(diǎn)尷尬???”

從智能音箱等AI工具的出現(xiàn),到現(xiàn)在以ChatGPT為代表的實(shí)時(shí)語音交互能力在處理人類語言和令人信服地響應(yīng)的能力方面都取得了巨大進(jìn)步,但就像 R2D2 (電影星際大戰(zhàn)系列中的一個(gè)機(jī)器人角色)通過無字的語氣和節(jié)奏傳達(dá)含義一樣,副語言和韻律始終是聲音設(shè)計(jì)時(shí)需要重點(diǎn)關(guān)注的。(人類始終是富有情感響應(yīng)的動(dòng)物)

作者:小末,公眾號(hào):Moer Talk

本文由 @小末is小末 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)作者許可,禁止轉(zhuǎn)載

題圖來自Unsplash,基于CC0協(xié)議

該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)

更多精彩內(nèi)容,請(qǐng)關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號(hào)或下載App
評(píng)論
評(píng)論請(qǐng)登錄
  1. 目前還沒評(píng)論,等你發(fā)揮!