《虛擬現(xiàn)實(shí)與VRML－第一章虛擬現(xiàn)實(shí)的基本概念.ppt》由會(huì)員分享，可在線閱讀，更多相關(guān)《虛擬現(xiàn)實(shí)與VRML－第一章虛擬現(xiàn)實(shí)的基本概念.ppt（82頁(yè)珍藏版）》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。

山東理工大學(xué)虛擬現(xiàn)實(shí)實(shí)驗(yàn)室虛擬現(xiàn)實(shí)與VRML 虛擬現(xiàn)實(shí)與VRML 參考教材1 虛擬現(xiàn)實(shí)技術(shù) 申蔚北京希望電子出版社2002 參考教材2 虛擬現(xiàn)實(shí)系統(tǒng) 接口 應(yīng)用與設(shè)計(jì) 作者 舍曼譯者 魏迎梅電子工業(yè)出版社2004 參考教材3 虛擬現(xiàn)實(shí)基礎(chǔ)與VRML編程 高等教育出版社 參考教材4 虛擬現(xiàn)實(shí)系統(tǒng) 科學(xué)出版社2001 參考教材5 虛擬現(xiàn)實(shí)與系統(tǒng)仿真 韋有雙國(guó)防工業(yè)出版社2004 參考教材6 虛擬現(xiàn)實(shí)三維立體網(wǎng)絡(luò)程序設(shè)計(jì)語(yǔ)言VRML 第二代網(wǎng)絡(luò)程序設(shè)計(jì)語(yǔ)言 張金釗張金銳張金鏑清華大學(xué)出版社 北京交通大學(xué)出版社2004 上課要求 不要求做筆記對(duì)是否購(gòu)買(mǎi)教材不做硬性規(guī)定有事可以隨時(shí)離開(kāi)教室盡量關(guān)掉手機(jī)鈴聲如果鈴聲真的響了 請(qǐng)不要在課上接電話如果實(shí)在想接 goto3 課程的主要內(nèi)容 虛擬現(xiàn)實(shí)的基本概念和術(shù)語(yǔ) 虛擬現(xiàn)實(shí)的基礎(chǔ)方法 虛擬現(xiàn)實(shí)有關(guān)的人的因素 虛擬現(xiàn)實(shí)的接口設(shè)備和計(jì)算機(jī)設(shè)備 虛擬現(xiàn)實(shí)的世界建模技術(shù) 虛擬現(xiàn)實(shí)的應(yīng)用 虛擬現(xiàn)實(shí)建模語(yǔ)言 VRML 的基本介紹 虛擬場(chǎng)景的構(gòu)建方法 考核方式 大作業(yè)課程論文保證你的付出與成績(jī)成正比 第一節(jié)虛擬現(xiàn)實(shí)的基本概念 1 1 1虛擬現(xiàn)實(shí) 先看幾個(gè)VRML例子 寶馬汽車綜合展示 船舶3D虛擬實(shí)境 虛擬小區(qū) 虛擬煤礦 大家也許都看過(guò) 黑客帝國(guó) 吧 影片展現(xiàn)給我們的是我們生活的真實(shí)環(huán)境已經(jīng)消亡 取而代之的是一個(gè)虛擬的世界 雖然細(xì)節(jié)有所不同 但是人們也許真希望有一天 可以通過(guò)電子或者虛擬的現(xiàn)實(shí)來(lái)擺脫沉重枯燥的日常生活 其實(shí)虛擬現(xiàn)實(shí)技術(shù)早在1994年就已經(jīng)達(dá)成了一個(gè)共同的標(biāo)準(zhǔn) 但是由于網(wǎng)絡(luò)和電腦硬件的限制所以直到近些年它才得到迅猛地發(fā)展 1989年 美國(guó)VPLResearch公司創(chuàng)始人JaronLanier提出了 VirtualReality 虛擬現(xiàn)實(shí) 的概念 在這里 Reality 的含義是現(xiàn)實(shí)的世界 或現(xiàn)實(shí)的環(huán)境 所以 VirtualReality 虛擬現(xiàn)實(shí) 的另一個(gè)名稱是 VirtualEnvironment 虛擬環(huán)境 Virtual 說(shuō)明 這個(gè)世界或環(huán)境是虛擬的 不是真實(shí)的 這個(gè)世界或環(huán)境是人工構(gòu)造的 是存在于計(jì)算機(jī)內(nèi)部的 用戶應(yīng)該能夠 進(jìn)入 這個(gè)虛擬的環(huán)境中 所謂 進(jìn)入 這個(gè)虛擬的環(huán)境中 是指用戶以自然的方式與這個(gè)環(huán)境交互 包括感知環(huán)境并干預(yù)環(huán)境 從而產(chǎn)生置身于相應(yīng)的真實(shí)環(huán)境中的虛幻感 身臨其境的感覺(jué) VirtualReality 虛擬現(xiàn)實(shí) 或 VirtualEnvironment 虛擬環(huán)境 是人工構(gòu)造的 存在于計(jì)算機(jī)內(nèi)部的環(huán)境 用戶應(yīng)該能夠以自然的方式與這個(gè)環(huán)境交互 包括感知環(huán)境并干預(yù)環(huán)境 從而產(chǎn)生置身于相應(yīng)的真實(shí)環(huán)境中的虛幻感 沉浸感 身臨其境的感覺(jué) 虛擬現(xiàn)實(shí)已在娛樂(lè) 醫(yī)療 工程與建筑 教育與培訓(xùn) 軍事 科學(xué)和金融可視化等方面獲得了應(yīng)用 它將是21世紀(jì)廣泛應(yīng)用的一種新技術(shù) 日本松下公司用來(lái)招攬買(mǎi)主的 廚房世界 就是用虛擬現(xiàn)實(shí)技術(shù) 讓顧客去品評(píng)廚房設(shè)備是否合自己的心意的一個(gè)嘗試 當(dāng)你走進(jìn)陳列室 只要戴上特殊的頭盔和一雙銀色的手套 叫數(shù)據(jù)手套 你在原地就可以去漫游 廚房世界 了 在頭盔的顯示器內(nèi) 你可以看到廚房及它的門(mén) 你伸出手去開(kāi)門(mén) 門(mén)隨手而開(kāi) 廚房?jī)?nèi)所有的設(shè)備就會(huì)映入你的眼簾 你可以用手打開(kāi)柜櫥的門(mén)和抽屜 查看里面的結(jié)構(gòu)和質(zhì)量 可從碗架上拿下盤(pán)子看看 也可以打開(kāi)水龍頭 立即看見(jiàn)水流出來(lái) 聽(tīng)見(jiàn)流水聲 還可查看水池下面的排水是否流楊 也可查看照明是否亮堂 試試通水排氣是否正常 當(dāng)你拿下頭盔 摘下手套 這一切就都消失了 早在50年代 莫頓 海利希就考慮 看電影如何才能使人有身臨其境的感覺(jué) 他得到墨西哥教育部長(zhǎng)的支持 研究制造出一臺(tái)機(jī)器 叫 傳感影院 但效果不佳 又由于教育部長(zhǎng)在飛機(jī)失事中喪生 他失去了經(jīng)濟(jì)支持 幸好又有對(duì)此感興趣人提供投資 他才制成第二臺(tái)樣機(jī) 這是利用視覺(jué) 聽(tīng)覺(jué) 運(yùn)動(dòng)覺(jué) 使用戶感到好像是騎在摩托車或自行車上進(jìn)旅行 欣賞周圍的自然景色 可惜的是 這種裝置只能為一個(gè)人服務(wù) 每次花費(fèi)驚人 所以沒(méi)有引起電影界的重視 美國(guó)人艾凡 薩瑟蘭 在1962年還是一個(gè)研究生時(shí) 在一次計(jì)算機(jī)圖形領(lǐng)域研究人員會(huì)議上 向與會(huì)者說(shuō)明了自己名為 寫(xiě)生簿 的論文內(nèi)容 這一程序后來(lái)引起了工程設(shè)計(jì)的一場(chǎng)大變革 開(kāi)創(chuàng)了一個(gè)嶄新的計(jì)算機(jī)輔助設(shè)計(jì)領(lǐng)域 1965年 他發(fā)表了一篇題為 終極的顯示 的論文 后來(lái)被公認(rèn)為在虛擬環(huán)境領(lǐng)域中起著里程碑的作用 1966年 他在麻省理工學(xué)院開(kāi)始了第一個(gè)頭盔的研制工作 參觀者戴上頭盔看虛擬環(huán)境 可以像身臨其境一樣 1967年 美國(guó)的北卡羅來(lái)納大學(xué)的弗雷德里克 布魯克斯研究了力反饋問(wèn)題 使用戶能感到虛擬環(huán)境中計(jì)算機(jī)仿真物體和環(huán)境中的力的作用 1972年 諾蘭 布什內(nèi)爾開(kāi)發(fā)出第一種交互式電子游戲 1969年4月 美國(guó)威斯康星大學(xué)的邁倫 克魯格與一個(gè)藝術(shù)家小組合作 建立了一個(gè)交互的演示系統(tǒng) 用戶一走進(jìn)一間屋子 就和計(jì)算機(jī)生成的圖像發(fā)生相互作用 到1975年 他們一共建立了三個(gè)這樣的系統(tǒng) 1981年 美國(guó)加州大學(xué)的博士研究生邁克爾 麥格里威為美國(guó)航空和航天局研究了晶體顯示頭盔顯示器 1986年 美國(guó)航空和航天局終于建立了一個(gè)虛擬環(huán)境 第一個(gè)計(jì)算機(jī)虛擬環(huán)境世界終于誕生了 虛擬現(xiàn)實(shí)技術(shù)可以幫助人進(jìn)行產(chǎn)品設(shè)計(jì) 我們就叫它為虛擬設(shè)計(jì) 虛擬設(shè)計(jì) 就是設(shè)計(jì)人員用一個(gè)虛擬的產(chǎn)品來(lái)分析 研究 檢查所設(shè)計(jì)的產(chǎn)品是否合理 有毛病沒(méi)有 應(yīng)如何修改 在對(duì)虛擬產(chǎn)品品評(píng)和考查中 如發(fā)現(xiàn)問(wèn)題 可再修改設(shè)計(jì) 使產(chǎn)品設(shè)計(jì)得更好 而不是在投產(chǎn)前先制造一個(gè)模型或樣品 例如 美國(guó)伊利諾斯州的科普利紀(jì)念醫(yī)院病房設(shè)計(jì)出來(lái)之后 請(qǐng)一大批殘疾的老戰(zhàn)士 坐在輪椅上 戴上有顯示器的頭盔和數(shù)據(jù)手套 進(jìn)入虛擬現(xiàn)實(shí)世界 對(duì)病房的設(shè)計(jì)進(jìn)行檢查 評(píng)論 他們從頭盔中看到的是猶如真的病房 他們到處查看 結(jié)果發(fā)現(xiàn) 水池上方的水龍頭調(diào)節(jié)手柄距離地面太遠(yuǎn) 坐輪椅的人夠不著 用虛擬現(xiàn)實(shí)世界 查出設(shè)計(jì)中的毛病 就可以改進(jìn)設(shè)計(jì)了 虛擬設(shè)計(jì)在設(shè)計(jì)建筑物中 可以讓設(shè)計(jì)人員在虛擬建筑物內(nèi)漫游 獲得第一手材料 來(lái)驗(yàn)證自己設(shè)計(jì)的建筑物是不是合適 在建筑設(shè)計(jì)中 除要考慮結(jié)構(gòu)及強(qiáng)度等問(wèn)題外 還要考慮采光 聲音效果 通風(fēng)等許多問(wèn)題 而這些問(wèn)題要預(yù)先估計(jì)出來(lái)是比較困難的 利用虛擬現(xiàn)實(shí)技術(shù) 虛擬出建筑物 讓設(shè)計(jì)人員到室內(nèi)考查 這就方便多了 對(duì)于講演廳 電影院的設(shè)計(jì) 則可用虛擬現(xiàn)實(shí)技術(shù)來(lái)考查聲音效果 幫助設(shè)計(jì)人員改進(jìn)設(shè)計(jì) 飛機(jī)發(fā)動(dòng)機(jī)設(shè)計(jì)是十分復(fù)雜的工作 最重要的一個(gè)問(wèn)題是發(fā)動(dòng)機(jī)的拆裝 因?yàn)榘l(fā)動(dòng)機(jī)零件多 很緊湊 設(shè)計(jì)出來(lái)的發(fā)動(dòng)機(jī) 常常在拆裝中發(fā)生困難 拆不下來(lái) 裝不上去 或工具伸不進(jìn)去 沒(méi)地方下手等等 用虛擬現(xiàn)實(shí)技術(shù) 虛擬一個(gè)發(fā)動(dòng)機(jī) 進(jìn)行拆裝 就可以發(fā)現(xiàn)設(shè)計(jì)中的漏洞和毛病 以便加以修改 現(xiàn)在 汽車設(shè)計(jì) 艦船設(shè)計(jì)也都可以采用虛擬設(shè)計(jì) 利用虛擬現(xiàn)實(shí)技術(shù)度過(guò)休閑時(shí)光 到虛擬世界中去游玩一番 是別有風(fēng)趣的 但卻沒(méi)有一絲一毫的危險(xiǎn) 有一種賽車系統(tǒng) 是由計(jì)算機(jī)和一系列裝置構(gòu)成的 它能構(gòu)造出駕駛方程式賽車的虛擬環(huán)境 這個(gè)環(huán)境和真實(shí)的幾乎完全一樣 游戲有三條賽車道和三輛賽車 你可以選用初學(xué)者的賽車 也可選用58 8千瓦的高級(jí)賽車 啟動(dòng)后 你可以加速 自動(dòng)換擋 開(kāi)出公路 揚(yáng)起灰塵 緊急調(diào)頭 自動(dòng)剎車 甚至使用平行滑動(dòng)等高難動(dòng)作 駕駛不好甚至發(fā)生翻車事故都沒(méi)有關(guān)系 是有驚無(wú)險(xiǎn) 你可以利用虛擬現(xiàn)實(shí)技術(shù) 坐在家里或坐在游戲廳內(nèi)去到旅游景點(diǎn)游覽一番 我國(guó)杭州大學(xué)開(kāi)發(fā)了虛擬故宮游玩系統(tǒng) 只要你戴上特制的頭盔 騎上不動(dòng)的自行車 你從頭盔顯示器里就看見(jiàn)了形象逼真的天安門(mén)城樓 你用腳踏自行車的腳踏 你就會(huì)感到自己騎自行車來(lái)到了午門(mén)前的大道上 飛快地穿過(guò)午門(mén) 越過(guò)金水橋 越過(guò)大和門(mén) 來(lái)到太和殿廣場(chǎng) 由于你的自行車太快 一下子破墻而入 到了太和殿 金鑾殿內(nèi)盤(pán)龍的柱子 莊嚴(yán)的殿堂和真實(shí)的景象完全一樣 你又騎車來(lái)到了御花園 綠樹(shù) 紅亭 碧池 令你陶醉 好像身臨其境 但是 只要你摘下頭盔 你仍然是騎在一輛不動(dòng)的自行車上 眼前的一切都消失了 美國(guó)一家工程公司研制出一種打高爾夫球的虛擬現(xiàn)實(shí)模擬器 在很大的房間內(nèi) 懸掛一個(gè)有彈性的尼龍屏幕 你在室內(nèi)用標(biāo)準(zhǔn)的高爾夫球桿和真正的球 進(jìn)行打球活動(dòng) 只要你從球座上發(fā)球后 球飛出碰到屏幕便掉在你的房間地板上 這時(shí)屏幕上可以顯示出球在真實(shí)球場(chǎng)的上空飛行的狀況 這是因?yàn)?由傳感器 紅外線發(fā)射器 電子跟蹤系統(tǒng)確定出球的飛行情況 由計(jì)算機(jī)計(jì)算出球繼續(xù)飛行的路徑 并確定出是左曲球還是右曲球 于是在屏幕上顯示出球的飛行過(guò)程 這種虛擬的室內(nèi)打高爾夫球模擬器 可以模擬16個(gè)著名高爾夫球場(chǎng)的實(shí)況 打18個(gè)洞的高爾夫球 先進(jìn)的虛擬現(xiàn)實(shí)娛樂(lè)就更有趣了 比如 美國(guó)芝加哥有一個(gè)虛擬現(xiàn)實(shí)娛樂(lè)廳 叫 戰(zhàn)技中心 它是世界上第一個(gè)大規(guī)模虛擬現(xiàn)實(shí)娛樂(lè)系統(tǒng) 有一個(gè)座艙 前方有一個(gè)屏幕 可以從上面看到戰(zhàn)斗場(chǎng)景 下方有個(gè)副屏幕 從它的上面可看到損傷情況 主屏幕的兩側(cè)顯示武器的狀態(tài)和選擇 左邊的操縱桿控制武器動(dòng)作 右邊的調(diào)整開(kāi)關(guān)可以控制速度 戰(zhàn)斗機(jī)器 是這個(gè)娛樂(lè)系統(tǒng)的 主要人物 是一個(gè)超級(jí)機(jī)器人 它是一場(chǎng)戰(zhàn)爭(zhēng)的發(fā)動(dòng)者 假設(shè)這場(chǎng)戰(zhàn)爭(zhēng)發(fā)生在一千多年以后 用腳去踏腳踏板 就使 戰(zhàn)斗機(jī)器模擬器 開(kāi)始工作 于是模仿一千多年以后的戰(zhàn)爭(zhēng)就開(kāi)始了 在虛擬現(xiàn)實(shí)環(huán)境中學(xué)習(xí)和培訓(xùn)虛擬現(xiàn)實(shí)技術(shù)可以用在教學(xué)中 美國(guó)懷俄明州的卡斯帕的一些中學(xué)生 有幸從1993年開(kāi)始試驗(yàn)用這種技術(shù)進(jìn)行上課 每個(gè)學(xué)生都有一臺(tái)個(gè)人計(jì)算機(jī) 特殊的頭盔眼鏡 數(shù)據(jù)手套和操縱桿 學(xué)生可以用虛擬現(xiàn)實(shí)技術(shù)在太陽(yáng)系里飛行 也可以進(jìn)入人體內(nèi)的細(xì)胞里 可以學(xué)習(xí)計(jì)算機(jī)內(nèi)部結(jié)構(gòu) 還可以沿尼羅河漂流而下 也可以建造一座早期的城堡 用虛擬現(xiàn)實(shí)技術(shù)學(xué)習(xí)既生動(dòng)又有趣 世界著名的摩托羅拉公司 有一種為期3天的高級(jí)培訓(xùn)課程 這種課程是用來(lái)教會(huì)在世界各地的公司成員怎樣操縱機(jī)器人裝配線的 該公司只有三家工廠有這種實(shí)驗(yàn)設(shè)備 過(guò)去培訓(xùn) 公司成員必須長(zhǎng)途跋涉去到這三家工廠的某一實(shí)驗(yàn)室接受訓(xùn)練 但從1994年開(kāi)始 這個(gè)公司尋求用虛擬現(xiàn)實(shí)技術(shù)制造裝配線的模型 這種虛擬模型是由硬件和軟件組成的 硬件包括計(jì)算機(jī) 各種傳感器 頭盔顯示器 鼠標(biāo)器等 軟件包括計(jì)算機(jī)控制程序 由實(shí)際裝配線拍攝下來(lái)的照片并變成計(jì)算機(jī)存儲(chǔ)的圖像資料 學(xué)員在啟動(dòng) 運(yùn)行 關(guān)閉裝配系統(tǒng)的虛擬模型中 可以聽(tīng)到像從真實(shí)系統(tǒng)發(fā)出的響聲 從顯示器上可看見(jiàn)與真實(shí)系統(tǒng)一樣的動(dòng)作反應(yīng) 用裝配線的虛擬模型 就可對(duì)學(xué)員進(jìn)行培訓(xùn) 虛擬現(xiàn)實(shí) 可以模擬一些特殊環(huán)境 用來(lái)訓(xùn)練飛行己汽車駕駛員 運(yùn)動(dòng)員等等 用虛擬現(xiàn)實(shí)駕車系統(tǒng) 可以虛擬出行車中出現(xiàn)的各種緊急情況 這些情況和真實(shí)駕車所遇到的情況完全一樣 十分逼真 若是學(xué)習(xí)駕駛的人處理不當(dāng) 也不會(huì)發(fā)生危險(xiǎn) 只不過(guò)再多練幾遍而已 現(xiàn)在 在飛行仿真訓(xùn)練系統(tǒng)中也越來(lái)越多地采用虛擬現(xiàn)實(shí)技術(shù) 虛擬現(xiàn)實(shí)技術(shù)造生物用虛擬現(xiàn)實(shí)技術(shù)可以 制造 出活生生的人和物 美國(guó)佐治亞理工學(xué)院開(kāi)發(fā)出虛擬動(dòng)物園的大猩猩系統(tǒng) 游人戴上頭盔 看到立體景物 就像在一群大猩猩中走動(dòng) 如果游客大靠近雄性大猩猩 它會(huì)發(fā)出咳嗽聲 好像是在警告你 你若不去操縱控制桿 使自己離它遠(yuǎn)點(diǎn) 大猩猩就會(huì)虛張聲勢(shì)地?fù)溥^(guò)來(lái) 游客只好借助 后退鈕 向后退去 當(dāng)然這些都是虛擬的 日本富士通公司用計(jì)算機(jī)制造出一個(gè)小動(dòng)物 它一半像海豚 一半像鳥(niǎo) 這個(gè)由虛擬現(xiàn)實(shí)技術(shù)創(chuàng)造的電子寵物叫 菲蘭克 它和人能進(jìn)行相互交流 它會(huì)記人的臉和聲音 當(dāng)主人呼喚它的時(shí)候 它會(huì)高興得又叫又跳 你用溫柔的聲音對(duì)它說(shuō)話 它就會(huì)作出小鳥(niǎo)依人狀 如果你粗聲吼叫 它就會(huì)飛行得無(wú)影無(wú)蹤 它會(huì)唱歌 能學(xué)唱新歌 還會(huì)表演雜技 日本一家公司 由幾十位計(jì)算機(jī)圖像藝術(shù)家 花了兩年時(shí)間設(shè)計(jì)制造出一個(gè)虛擬世界中的歌手 叫伊達(dá)恭子 它不是真人 但勝似真人 伊達(dá)恭子 是16歲妙齡的少女 身材美妙 歌喉柔蜜略帶沙啞 動(dòng)作令人傾倒 它不會(huì)老 也不會(huì)發(fā)脾氣 隨意由人支使 可以連續(xù)唱數(shù)小時(shí)而不會(huì)累倒 它會(huì)講7種語(yǔ)言 伊達(dá)恭子的出現(xiàn) 使流行樂(lè)壇發(fā)生了變化 越來(lái)越多的人喜歡這個(gè)虛擬世界中的歌手 賓夕法尼亞大學(xué)研究制成虛擬現(xiàn)實(shí)人 叫杰克 它是由計(jì)算機(jī)生成的人 是一種模型 而不是把某人的形像拍攝下來(lái)再重放的人的形像 杰克在虛擬世界中 能模仿真正人的動(dòng)作 與環(huán)境中的人 物 機(jī)器進(jìn)行相互作用 用杰克可以研究一些問(wèn)題 比如人與機(jī)器相互作用的好壞 也就是研究人與機(jī)器相互配合問(wèn)題 人操縱機(jī)器的安全問(wèn)題 人操縱機(jī)器的效率問(wèn)題 在研究中 杰克代替真人去工作 比如讓它開(kāi)汽車 在可能發(fā)生碰撞 翻車等情況中工作 用來(lái)考查汽車的設(shè)計(jì)好壞 對(duì)人的安全保護(hù)性能等 虛擬現(xiàn)實(shí)系統(tǒng)應(yīng)用最多的專用設(shè)備是頭盔式立體顯示器和數(shù)據(jù)手套 于是 有人以使用這些專用設(shè)備為虛擬現(xiàn)實(shí)系統(tǒng)的標(biāo)志 這種觀點(diǎn)是不準(zhǔn)確的 上述的虛擬現(xiàn)實(shí)的概念 是在計(jì)算機(jī)應(yīng)用和人機(jī)交互方面開(kāi)創(chuàng)的全新的學(xué)科領(lǐng)域 這個(gè)新領(lǐng)域的發(fā)展 還有很多困難 有很多技術(shù)難點(diǎn)有待解決 當(dāng)前 這一領(lǐng)域還只是走出了第一步 頭盔式立體顯示器和數(shù)據(jù)手套等設(shè)備 只是當(dāng)前已經(jīng)實(shí)現(xiàn)的一部分虛擬顯示設(shè)備 它們還很不完善 例如 頭盔的視場(chǎng) 分辨率 造成眩暈等問(wèn)題還有待解決 聽(tīng)覺(jué)接口和力覺(jué)接口等設(shè)備還在研究 應(yīng)用還不多 味覺(jué) 嗅覺(jué) 運(yùn)動(dòng)覺(jué)等技術(shù) 還缺乏研究 虛擬環(huán)境 VirtualEnvironment VE 系統(tǒng)或虛擬現(xiàn)實(shí) VirtualReality VR 系統(tǒng)包括人類操作者 人機(jī)接口和計(jì)算機(jī) 第一種情況是模仿真實(shí)世界中的環(huán)境 例如 建筑物 武器系統(tǒng) 或戰(zhàn)場(chǎng)環(huán)境 這種真實(shí)環(huán)境 可能是已經(jīng)存在的 也可能是已經(jīng)設(shè)計(jì)好但還沒(méi)有建成的 為了逼真地模仿真實(shí)世界中的環(huán)境 要求逼真地建立幾何模型和物理模型 環(huán)境的動(dòng)態(tài)應(yīng)符合物理規(guī)律 這一類虛擬現(xiàn)實(shí)系統(tǒng)的功能 實(shí)際是系統(tǒng)仿真 第二種情況是人類主觀構(gòu)造的環(huán)境 例如 用于影視制作或電子游戲的三維動(dòng)畫(huà) 環(huán)境是虛構(gòu)的 幾何模型和物理模型就可以完全虛構(gòu) 這時(shí) 系統(tǒng)的動(dòng)畫(huà)技術(shù)常用插值方法 第三種情況是模仿真實(shí)世界中的人類不可見(jiàn)的環(huán)境 例如 分子的結(jié)構(gòu) 空氣中速度 溫度 壓力的分布等 這種真實(shí)環(huán)境 是客觀存在的 但是人類的視覺(jué)和聽(tīng)覺(jué)不能感覺(jué)到 對(duì)于分子結(jié)構(gòu)這類微觀環(huán)境 進(jìn)行放大尺度的模仿 使人能看到 對(duì)于空氣中速度這類不可見(jiàn)的物理量 可以用流線顯示速度 流線方向表示速度方向 流線密度表示速度大小 這一類虛擬現(xiàn)實(shí)系統(tǒng)的功能 實(shí)際是科學(xué)可視化 虛擬現(xiàn)實(shí)系統(tǒng)中的虛擬環(huán)境 可能有下列幾種情況 由此可見(jiàn) 虛擬現(xiàn)實(shí)技術(shù)可以用于系統(tǒng)仿真 科學(xué)可視化 三維動(dòng)畫(huà)等領(lǐng)域 和虛擬現(xiàn)實(shí)有關(guān)的幾個(gè)概念是遙操作 增強(qiáng)現(xiàn)實(shí) 以及合成現(xiàn)實(shí) 這些概念之間的區(qū)別在于與用戶交互的環(huán)境不同 對(duì)于遙操作系統(tǒng) 與用戶交互的環(huán)境實(shí)際是在遠(yuǎn)地的一個(gè)真實(shí)的環(huán)境 用戶通過(guò)類似虛擬現(xiàn)實(shí)系統(tǒng)的人機(jī)接口 與遠(yuǎn)處的真實(shí)環(huán)境交互 也就是看到真實(shí)環(huán)境的場(chǎng)景 聽(tīng)到真實(shí)環(huán)境的聲音 感到與環(huán)境中物體的接觸 遙操作系統(tǒng)實(shí)際上是高級(jí)的遙控系統(tǒng) 是采用了先進(jìn)的虛擬現(xiàn)實(shí)技術(shù)的遙控系統(tǒng) 虛擬環(huán)境 VirtualEnvironment VE 系統(tǒng)或虛擬現(xiàn)實(shí) VirtualReality VR 系統(tǒng)包括人類操作者 人機(jī)接口和計(jì)算機(jī) 遙操作 Teleoperator 系統(tǒng)包括人類操作者 人機(jī)接口和遙機(jī)器人 增強(qiáng)現(xiàn)實(shí) AugmentedReality 系統(tǒng)中 則組合了虛擬環(huán)境和真實(shí)環(huán)境 合成環(huán)境 SyntheticEnvironment SE 系統(tǒng) 是遙操作系統(tǒng) 虛擬環(huán)境系統(tǒng) 增強(qiáng)現(xiàn)實(shí)系統(tǒng)等的總稱 對(duì)于虛擬現(xiàn)實(shí)系統(tǒng) 與用戶交互的環(huán)境實(shí)際是人工構(gòu)造的 存在于計(jì)算機(jī)內(nèi)部的環(huán)境 這種虛擬的環(huán)境 可能是不同的環(huán)境 一種情況是真實(shí)環(huán)境的仿真 例如 仿真真實(shí)建筑物的虛擬建筑物 這種真實(shí)建筑物可能是已經(jīng)建成的 也可能是已經(jīng)設(shè)計(jì)好但尚未建成的 一種情況是完全虛擬的人造環(huán)境 例如在虛擬風(fēng)洞中 借助可視化技術(shù)構(gòu)造的虛擬風(fēng)洞環(huán)境 又如在三維動(dòng)畫(huà)中 人工構(gòu)造的虛擬環(huán)境 1 1 2虛擬現(xiàn)實(shí)的特點(diǎn) 1 計(jì)算機(jī)提供 環(huán)境 不是 數(shù)據(jù) 信息 這改變了人機(jī)接口的內(nèi)容 2 操作者由視覺(jué) 聽(tīng)覺(jué) 力覺(jué)感知環(huán)境 由自然的動(dòng)作操作環(huán)境 不是由屏幕 鍵盤(pán) 鼠標(biāo)和計(jì)算機(jī)交互 這改變了人機(jī)接口的形式 3 逼真的感知和自然的動(dòng)作 使人產(chǎn)生身臨其境的感覺(jué) 這改變了人機(jī)接口的效果 基于虛擬現(xiàn)實(shí)的基本概念 可以得到虛擬現(xiàn)實(shí)的下列三個(gè)特點(diǎn) 第一個(gè)特點(diǎn)體現(xiàn)了計(jì)算機(jī)應(yīng)用的新方向 計(jì)算機(jī)的名稱體現(xiàn)了 它的最早應(yīng)用是計(jì)算 當(dāng)時(shí) 計(jì)算機(jī)和用戶交互的是計(jì)算有關(guān)的數(shù)值 此后 計(jì)算機(jī)擴(kuò)大到處理數(shù)值 字符串 文本等各類數(shù)據(jù) 以后 計(jì)算機(jī)更擴(kuò)大到處理圖像 圖形 聲音 語(yǔ)言等多種媒體的信息 虛擬現(xiàn)實(shí)系統(tǒng)則以環(huán)境為計(jì)算機(jī)處理的對(duì)象和人機(jī)交互的內(nèi)容 這開(kāi)拓了計(jì)算機(jī)應(yīng)用的新思路 第二個(gè)特點(diǎn)體現(xiàn)了計(jì)算機(jī)人機(jī)接口的新方向 至今為止的計(jì)算機(jī)人機(jī)接口都是面向機(jī)器的 終端 鍵盤(pán) 鼠標(biāo) 打印機(jī)等接口設(shè)備 都是適應(yīng)計(jì)算機(jī)的專用設(shè)備 這些設(shè)備很好地完成了各類數(shù)據(jù)和多媒體信息的交互 虛擬現(xiàn)實(shí)中的人機(jī)接口 則是面向用戶的 虛擬現(xiàn)實(shí)系統(tǒng)中 用戶以自然的方式與虛擬環(huán)境交互 所謂自然的方式 是指用戶通過(guò)視覺(jué) 聽(tīng)覺(jué) 觸覺(jué)等感覺(jué)虛擬環(huán)境 使用戶產(chǎn)生在真實(shí)環(huán)境中的幻覺(jué) 同時(shí) 用戶通過(guò)在真實(shí)環(huán)境中的行為 去干預(yù)虛擬環(huán)境 于是 虛擬現(xiàn)實(shí)的人機(jī)接口設(shè)備 完全不同于現(xiàn)有計(jì)算機(jī)的人機(jī)接口設(shè)備 這也是虛擬現(xiàn)實(shí)技術(shù)中最有特色的內(nèi)容 第三個(gè)特點(diǎn)體現(xiàn)了計(jì)算機(jī)人機(jī)接口的新要求 用戶通過(guò)人機(jī)接口與虛擬環(huán)境交互的結(jié)果 是使用戶產(chǎn)生身臨其境的虛幻感 沉浸感 有的文章中認(rèn)為 虛擬現(xiàn)實(shí)的概念中有三個(gè)I 1 Immersion 沉浸 是指逼真的 身臨其境的感覺(jué) 2 Interaction 交互 是指用戶感知與操作環(huán)境 3 Imagination 想象 是指創(chuàng)造性 1 1 3虛擬現(xiàn)實(shí)的應(yīng)用領(lǐng)域 1 娛樂(lè)2 國(guó)防3 設(shè)計(jì) 制造和銷售4 醫(yī)療和健康5 危險(xiǎn)操作6 訓(xùn)練7 教育8 信息可視化9 遠(yuǎn)程交往與遠(yuǎn)程游歷 虛擬現(xiàn)實(shí)的應(yīng)用范圍非常廣泛 本課在以后將做詳細(xì)介紹 1 1 4虛擬現(xiàn)實(shí)的技術(shù) 1 VR的人機(jī)接口2 VR的計(jì)算機(jī)系統(tǒng)3 VR的建模和仿真 1 VR的人機(jī)接口 VR的人機(jī)接口有兩個(gè)作用 其一是給人類操作者提供環(huán)境信息 視覺(jué) 聽(tīng)覺(jué)和觸覺(jué) 其二是感覺(jué)人類操作者的動(dòng)作和響應(yīng) 位置跟蹤和映射 前者包括 視覺(jué)通道 聽(tīng)覺(jué)通道 觸覺(jué)通道 運(yùn)動(dòng)接口和其他接口 后者包括 位置跟蹤和映射 語(yǔ)音識(shí)別等 1 位置跟蹤和映射位置跟蹤和映射用于測(cè)量人體各部位的位置和姿態(tài) 分析判斷人面部的表情 它的目的是了解人的身體行為 這是為了實(shí)現(xiàn)人機(jī)交互所必需的系統(tǒng)功能 VR系統(tǒng)由此了解人的行為 然后做出適當(dāng)?shù)捻憫?yīng) 實(shí)現(xiàn)交互 常用的技術(shù)包括 機(jī)械鏈接 磁傳感器 聲傳感器 光傳感器和慣性傳感器 基本目標(biāo)是精確完成位置和姿態(tài)的測(cè)量 三個(gè)主要的要求 大范圍的線性響應(yīng) 高帶寬 1kHz 以及允許頭和身體的運(yùn)動(dòng) 2 視覺(jué)通道視覺(jué)通道給人的視覺(jué)系統(tǒng)提供圖形顯示 為了提供身臨其境的逼真感覺(jué) 視覺(jué)通道應(yīng)該滿足一些要求 顯示的像素應(yīng)該足夠小 使人不至感覺(jué)到像素的不連續(xù) 顯示的頻率應(yīng)該足夠高 使人不至感覺(jué)到畫(huà)面的不連續(xù) 給兩眼提供具有雙目視差的圖形 形成立體視覺(jué) 應(yīng)該具有足夠大的視場(chǎng) 理想情況是顯示畫(huà)面充滿整個(gè)視場(chǎng) 視覺(jué)通道的顯示表面分為 基于CRT和基于LCD 視覺(jué)通道的光學(xué)系統(tǒng)分為 頭盔顯示 HMD 和非頭盔顯示 OHD 3 聽(tīng)覺(jué)通道聽(tīng)覺(jué)通道給人的聽(tīng)覺(jué)系統(tǒng)提供聲音顯示 為了提供身臨其境的逼真感覺(jué) 聽(tīng)覺(jué)通道應(yīng)該滿足一些要求 使人感覺(jué)置身于立體的聲場(chǎng)之中 能識(shí)別聲音的類型和強(qiáng)度 能判定聲源的位置 聽(tīng)覺(jué)通道的關(guān)鍵技術(shù)包括 合成由接口提供的虛擬聲音信號(hào) 聲音在虛擬空間定位問(wèn)題 以及發(fā)聲設(shè)備 4 觸覺(jué)通道觸覺(jué)通道給人體表面提供觸覺(jué)和力覺(jué) 當(dāng)人體在虛擬空間中運(yùn)動(dòng)時(shí) 如果接觸到虛擬物體 虛擬顯示系統(tǒng)應(yīng)該給人提供這種觸覺(jué)和力覺(jué) 觸覺(jué)通道涉及操作以及感覺(jué) 包括觸覺(jué)反饋和力覺(jué)反饋 觸覺(jué)通道的結(jié)構(gòu)分為 安在身體上和安在地面的設(shè)備 5 運(yùn)動(dòng)接口人體在環(huán)境中的運(yùn)動(dòng)包括 身體的被動(dòng)運(yùn)動(dòng) 被動(dòng)移動(dòng) 如在車上的運(yùn)動(dòng) 身體主動(dòng)運(yùn)動(dòng) 漫游 如散步 人在運(yùn)動(dòng)中 人體內(nèi)部的運(yùn)動(dòng)感覺(jué)器官可以感知運(yùn)動(dòng)信息 感知運(yùn)動(dòng)信息的器官包含 前庭系統(tǒng) 運(yùn)動(dòng)系統(tǒng) 視覺(jué)聽(tīng)覺(jué)系統(tǒng) 本體感受 動(dòng)覺(jué)和觸覺(jué) 運(yùn)動(dòng)接口應(yīng)該給這些器官提供運(yùn)動(dòng)信息 6 其它類型接口其它類型接口包括 嗅覺(jué) 味覺(jué)通道 以及感覺(jué)熱 風(fēng)及濕度的接口 還包括語(yǔ)音通訊 語(yǔ)音識(shí)別與合成 以及直接心理感覺(jué)和控制 這些接口還缺乏研究 以下將不介紹 2 VR的計(jì)算機(jī)系統(tǒng) 硬件軟件網(wǎng)絡(luò) 現(xiàn)有的虛擬顯示系統(tǒng)主要考慮視覺(jué)通道 聽(tīng)覺(jué)通道和觸覺(jué)通道還處于研究階段 所以 VR的計(jì)算機(jī)系統(tǒng)主要考慮視覺(jué)通道的要求 1 硬件 視覺(jué)通道對(duì)計(jì)算機(jī)系統(tǒng)的要求 首先是要求維持足夠的圖形幀速率 于是要求在指定的時(shí)間內(nèi) 約為0 1秒 計(jì)算出兩眼的兩幅圖像 同時(shí)要求提供足夠好質(zhì)量的圖像 這一般體現(xiàn)在圖像中顯示的多邊形或三角形的樹(shù)木 因此 往往需要專用硬件 圖形硬件應(yīng)提供快速幾何變換 截取 消隱 多邊形填充和表面紋理 2 軟件 VR系統(tǒng)中的軟件主要包括下列幾種 交互軟件利用人機(jī)控制設(shè)備的輸出去修改VE 視覺(jué)漫游軟件控制用戶在VE中運(yùn)動(dòng)時(shí)看到的場(chǎng)景 建模軟件定義虛擬物體形狀 外觀和屬性的模型 操作系統(tǒng)支持VE的實(shí)時(shí)多模態(tài)要求 3 網(wǎng)絡(luò) 分布式交互仿真已經(jīng)成為現(xiàn)代仿真技術(shù) 特別是軍事仿真的潮流 通訊網(wǎng)絡(luò)可以把VE轉(zhuǎn)換成共享的分布式計(jì)算環(huán)境 3 VR的建模和仿真 1 建模建模包括 幾何建模和物理建模 一般的VR工具軟件都具有幾何建模功能 利用現(xiàn)有的CAD建模工具也是常用的方法 市場(chǎng)上已有商業(yè)模型庫(kù)出售 對(duì)實(shí)際物體的建模 則采用激光掃描等專用設(shè)備 物理建模是基于物理方程的建模 一般考慮剛體建模 鏈接物體的建模 以及非剛體的建模 智能體的建模不是基于物理方程 而是基于人為的物體智能 人工建模技術(shù)在圖形學(xué)和CAD領(lǐng)域 已有成熟的成果 自動(dòng)建模采用激光掃描建立幾何模型 也已經(jīng)有相關(guān)產(chǎn)品 自動(dòng)建立物理模型的研究還不多 2 仿真仿真包括 圖形繪制和三維動(dòng)畫(huà) 圖形繪制是把三維環(huán)境 相對(duì)于虛擬攝像機(jī) 虛擬視點(diǎn) 投影 形成圖像的過(guò)程 為了提供連續(xù)運(yùn)動(dòng)的錯(cuò)覺(jué) 幀速率必須大于每秒8到10幀 為了保持瞬間交互控制的錯(cuò)覺(jué) 響應(yīng)時(shí)間的延遲必須小于0 1秒 為了繪制人眼可分辨的所有細(xì)節(jié) 這要求有8千萬(wàn)個(gè)多邊形 這是對(duì)于圖形繪制的要求 然而 用今天的硬件 每個(gè)畫(huà)面8千萬(wàn)多邊形的系統(tǒng)對(duì)真正的實(shí)時(shí)交互是太慢了 于是存在真實(shí)圖像與實(shí)時(shí)交互間的折衷 某些應(yīng)用 如建筑和藝術(shù) 可能要求照片一樣真實(shí)的繪制 制造和醫(yī)療應(yīng)用要求更高層次的實(shí)時(shí)交互 三維動(dòng)畫(huà)可以用兩種途徑實(shí)現(xiàn) 基于物理模型的數(shù)值計(jì)算是一種方法 軍事和工業(yè)等應(yīng)用 往往要求這種滿足物理規(guī)律的仿真技術(shù) 數(shù)學(xué)插值則是另一種實(shí)現(xiàn)動(dòng)畫(huà)的方法 這種技術(shù)在三維動(dòng)畫(huà)電影中獲得了巨大的成功 下圖表示 虛擬現(xiàn)實(shí)開(kāi)發(fā)系統(tǒng)的方塊圖 用戶通過(guò)輸入輸出設(shè)備與輸入輸出軟件交互 輸入軟件通過(guò)形狀編輯器完成幾何建模 通過(guò)聲音編輯器完成虛擬聲音系統(tǒng)建模 然后 在世界編輯器完成虛擬環(huán)境的建模 其中的虛擬剪切器 用于模型的剪切 建立的模型 保存在虛擬世界中 整個(gè)工作在計(jì)算機(jī)系統(tǒng)中完成 小節(jié) 虛擬現(xiàn)實(shí)或虛擬環(huán)境是人工構(gòu)造的 存在于計(jì)算機(jī)內(nèi)部的環(huán)境 用戶應(yīng)該能夠以自然的方式與這個(gè)環(huán)境交互 包括感知環(huán)境并干預(yù)環(huán)境 從而產(chǎn)生置身于相應(yīng)的真實(shí)環(huán)境中的虛幻感 沉浸感 身臨其境的感覺(jué) 虛擬現(xiàn)實(shí)系統(tǒng)包括人類操作者 人機(jī)接口和計(jì)算機(jī) 虛擬現(xiàn)實(shí)有下列三個(gè)特點(diǎn) 1 計(jì)算機(jī)提供 環(huán)境 不是 數(shù)據(jù) 信息 2 操作者由視覺(jué) 聽(tīng)覺(jué) 力覺(jué)感知環(huán)境 由自然的動(dòng)作操作環(huán)境 3 逼真的感知和自然的動(dòng)作 使人產(chǎn)生身臨其境的感覺(jué) 第二節(jié)虛擬現(xiàn)實(shí)有關(guān)的人的因素 計(jì)算機(jī) 接口和用戶是VR系統(tǒng)中的三個(gè)組成部分 接口設(shè)計(jì)必須考慮人的因素 人的因素與VR系統(tǒng)性能直接相關(guān) 下面介紹與VR系統(tǒng)直接相關(guān)的人的因素問(wèn)題 1 2 1人眼1 視覺(jué)生理結(jié)構(gòu)2 立體視覺(jué)3 屈光度4 瞳孔5 分辨力6 明暗適應(yīng)7 周圍視覺(jué)和中央視覺(jué)8 視覺(jué)暫留9 視場(chǎng)現(xiàn)有的VR系統(tǒng)中 已經(jīng)考慮的因素包括 立體視覺(jué) 分辨力 視覺(jué)暫留 以及視場(chǎng) 其他因素還沒(méi)有充分考慮到 1 視覺(jué)生理結(jié)構(gòu) 大腦皮層 CerebralCortex 是大腦半球的最外層 它負(fù)責(zé)各種形式的感覺(jué) 視網(wǎng)膜 Retina 是在每只眼背部的神經(jīng)細(xì)胞的多層膜 它把光轉(zhuǎn)成電信號(hào) 并通過(guò)視神經(jīng)和管道傳給大腦 下圖表示 視網(wǎng)膜的解剖圖 圖中顯示了層 管道和神經(jīng) 光感受器 Photoreceptor 是每只眼睛視網(wǎng)膜中1 25億個(gè)神經(jīng)細(xì)胞中的一部分 它在受到特定波長(zhǎng)的光的刺激時(shí) 會(huì)發(fā)出電信號(hào) 視網(wǎng)膜是眼的光敏層 幾百微米厚 有10層 光線通過(guò)其中8層 被另外兩層的視桿細(xì)胞和視錐細(xì)胞的光接收器 Photoreceptor 吸收 每只眼的視網(wǎng)膜上有1 25億個(gè)神經(jīng)細(xì)胞 脊椎動(dòng)物有兩種光感受器 視桿細(xì)胞 rods 負(fù)責(zé)低分辨率的 單色的 夜間的視覺(jué) 視錐細(xì)胞 cones 負(fù)責(zé)高分辨率的 彩色的 白天的視覺(jué) 它花費(fèi)25ms把光轉(zhuǎn)成電信號(hào) 再送給大腦 下圖表示 視網(wǎng)膜內(nèi)光感受器的解剖圖 圖中桿狀細(xì)胞和錐狀細(xì)胞在上部 通向大腦的視神經(jīng)纖維在下部 下圖表示 視覺(jué)系統(tǒng)的生理結(jié)構(gòu)圖 圖中鉛筆的反射光線通過(guò)眼睛晶狀體的透鏡 于是 鉛筆的倒置圖像直接投影在視網(wǎng)膜上 視網(wǎng)膜的桿狀細(xì)胞和錐狀細(xì)胞負(fù)責(zé)通過(guò)視神經(jīng)把信號(hào)傳給大腦 2 立體視覺(jué) 視覺(jué)的另一個(gè)重要因素是立體視覺(jué)能力 提供給人類視覺(jué)的圖像 必須使人感覺(jué)是立體的 這樣 觀看者的視覺(jué)系統(tǒng)就可以計(jì)算出被看物體的遠(yuǎn)近 對(duì)同一個(gè)場(chǎng)景 兩眼得到稍有差別的視圖 左視區(qū)的信息 送到兩眼視網(wǎng)膜的右側(cè) 在視交叉處 左眼的一半神經(jīng)纖維交叉到大腦的右半球 左眼的另一半神經(jīng)纖維不交叉 直接到大腦的左半球 這樣 兩眼得到的左視區(qū)的所有信息 都送到右半球 人類立體視覺(jué)的原理圖 HMD 頭虧顯示器 提供兩個(gè)顯示 不但應(yīng)保持雙目視差 而且應(yīng)該重疊 實(shí)際上 由于兩眼有6 5cm的瞳距 所以兩者視場(chǎng)總有些差別 有不重疊的區(qū)域 對(duì)中央凹區(qū)域 深度感在150m時(shí)減弱 對(duì)周圍視覺(jué) 深度感在100m減弱 而在這個(gè)距離上 雙目視差不是最有用的 運(yùn)動(dòng)視差和透視可能更有用 3 屈光度 與眼的光學(xué)部分有關(guān)的一個(gè)度量是 屈光度 dioptre 有1個(gè)屈光度的鏡頭 可以聚焦平行光線在1米距離 人眼的聚焦能力約60屈光度 這表明聚焦平行光在17mm距離 這就是眼球尺寸 是晶狀體和視網(wǎng)膜的距離 年青人可以連續(xù)改變14個(gè)屈光度 這稱為調(diào)節(jié)或聚焦 這保證對(duì)遠(yuǎn)近物體都能看到清晰的圖像 年長(zhǎng)后調(diào)節(jié)能力減弱 50歲時(shí)調(diào)節(jié)能力2個(gè)屈光度 70歲時(shí)調(diào)節(jié)能力0個(gè)屈光度 在注視運(yùn)動(dòng)物體時(shí) 自動(dòng)調(diào)節(jié)屈光度 調(diào)節(jié)作用保證某個(gè)距離的物體清晰 而其它距離物體模糊 這起了濾波器的作用 使人集中關(guān)注視場(chǎng)中部分區(qū)域 在HMD中沒(méi)有調(diào)節(jié) 2個(gè)圖像都是聚焦在2到3米距離 4 瞳孔 瞳孔是晶狀體前的孔 直徑可變化 由1 5mm到8mm 面積之比1 30 瞳孔作用有三個(gè) a 放大時(shí)可增加眼的敏感 b 縮小時(shí)可增加近視覺(jué)的視距 c 縮小時(shí)可限制入射光在光學(xué)效果最好的中心區(qū) 5 分辨力 分辨力是人眼區(qū)分兩個(gè)點(diǎn)的能力 限于10m距離上約1 5 2mm 例如在2m的距離觀看寬度400mm的電視 人眼區(qū)分兩個(gè)點(diǎn)的能力 在2m距離上約0 4mm 則寬度400mm上應(yīng)該由1000個(gè)0 4mm大小的像素 計(jì)算機(jī)監(jiān)視器和高清晰度電視機(jī) 都達(dá)到了這樣的分辨率 6 明暗適應(yīng) 眼對(duì)亮度的感覺(jué)可以自動(dòng)調(diào)節(jié) 這是通過(guò)改變?cè)谝晽U和視錐細(xì)菌中光敏化合物的濃度 例如從亮處進(jìn)入暗室時(shí)的現(xiàn)象 稱為暗適應(yīng) 花費(fèi)約40分 亮適應(yīng)是從暗室進(jìn)入陽(yáng)光下時(shí)的現(xiàn)象 這種適應(yīng)的強(qiáng)度變化在25000倍 視桿細(xì)胞適應(yīng)時(shí)間約1小時(shí) 視錐細(xì)胞適應(yīng)時(shí)間約幾分鐘 7 周圍視覺(jué)和中央視覺(jué) 視網(wǎng)膜不僅是被動(dòng)的光敏表面 通過(guò)視桿和視錐細(xì)胞與神經(jīng)細(xì)胞的連接 它還有一定的圖像處理 中央凹是視網(wǎng)膜中央部分 在光軸與視網(wǎng)膜焦點(diǎn)附近 直徑約1mm 有高密度視錐細(xì)胞 中央凹區(qū)域的視覺(jué)稱為中央視覺(jué) 中央視覺(jué)是高分辨率部分 有彩色的 白天的視覺(jué) 視網(wǎng)膜周圍區(qū)域包含視桿和視錐細(xì)胞 視網(wǎng)膜周圍區(qū)域的視覺(jué)稱為中央視覺(jué) 這些神經(jīng)細(xì)胞對(duì)光強(qiáng)的變化敏感 它幫助我們注意運(yùn)動(dòng)物體 周圍視覺(jué)雖然分辨率低 是單色的 夜間的視覺(jué) 但敏感運(yùn)動(dòng)物體 8 視覺(jué)暫留 視覺(jué)暫留是視網(wǎng)膜的電化學(xué)現(xiàn)象造成視覺(jué)的反應(yīng)時(shí)間 當(dāng)觀看很短的光脈沖時(shí) 視桿細(xì)胞得到約0 25s的峰 視錐細(xì)胞快4倍 得到約0 04s的峰 這種現(xiàn)象造成視覺(jué)暫留 這是電影 電視 VR顯示的基礎(chǔ) 臨界熔合頻率 CriticalFusionFrequency CFF 效果會(huì)產(chǎn)生把離散圖像序列組合成連續(xù)視覺(jué)的能力 CFF最低20Hz 并取決于圖像尺寸和亮度 英國(guó)電視幀頻25Hz 美國(guó)電視幀頻30Hz 電影幀頻24Hz 眼對(duì)閃爍的敏感正比于亮度 所以若白天的圖像更新率為60Hz 則夜間只要30Hz 9 視場(chǎng) 雙目的視場(chǎng)約為水平 1000 垂直 600 而水平的雙目重疊視場(chǎng)1200 實(shí)際的全景顯示可能產(chǎn)生水平 1000 垂直 300視場(chǎng) 這已經(jīng)有強(qiáng)的沉浸感 1 2 2人耳 1 聲音2 聲音感覺(jué)3 頻率范圍4 聲強(qiáng)5 聲音方向6 聲音舞臺(tái)7 頭部有關(guān)的傳遞函數(shù) 現(xiàn)有的VR系統(tǒng)中 已經(jīng)考慮的因素包括 聲音方向 聲音舞臺(tái) 以及頭部有關(guān)的傳遞函數(shù) 其他因素還沒(méi)有充分考慮到 1 聲音 音速在空氣中 0 時(shí)331m s 20 時(shí)344m s 在海水中 1 時(shí)音速1453m s 在鑄鐵棒中 音速3500m s 耳聽(tīng)到的頻率范圍約20Hz到20kHz 隨年歲增加 頻率范圍縮小 特別是高頻段 考慮音速344m s 20Hz的波長(zhǎng)17 2m 1kHz的波長(zhǎng)34 4cm 10kHz的波長(zhǎng)3 44cm 人耳的尺寸約7cm 這是5kHz的波長(zhǎng) 這說(shuō)明耳會(huì)影響這種頻率聲音的收集 人的身體也會(huì)與聲波交互 這也會(huì)影響聲音的質(zhì)量 這類似音樂(lè)廳中的音響效果 2 聲音感覺(jué) 耳分為外耳 中耳 內(nèi)耳 外耳把聲音引導(dǎo)進(jìn)內(nèi)耳 它也作為濾波器而改變聲音 把手放在耳前面 就會(huì)感到聲音變化 聲音最終沖擊耳膜 使之振動(dòng) 耳膜振動(dòng)再傳到耳蝸 并且振動(dòng)加大20倍 3 頻率范圍 耳蝸有3個(gè)螺旋管 被2個(gè)膜片分開(kāi) Reissner膜和耳底膜 振動(dòng)會(huì)刺激耳底膜上的2萬(wàn)到3萬(wàn)個(gè)硬毛 并產(chǎn)生電信號(hào)傳給大腦 耳底膜有識(shí)別頻率的機(jī)制 高頻振動(dòng)刺激膜的開(kāi)始部分 中頻振動(dòng)刺激膜的中間部分 低頻振動(dòng)刺激膜的遠(yuǎn)端部分 4 聲強(qiáng)聲強(qiáng)影響到耳底膜的振幅 直接轉(zhuǎn)成毛細(xì)胞的刺激 5 聲音方向一般認(rèn)為 人腦識(shí)別聲源位置 是利用兩耳收到的聲音的時(shí)間差和聲音幅度差 當(dāng)人面對(duì)聲源時(shí) 兩耳的聲強(qiáng)和路徑相等 當(dāng)人向左轉(zhuǎn)以后 右耳聲音比左耳強(qiáng) 且更早聽(tīng)到 若兩耳路徑之差為20cm 則時(shí)間差0 6ms 6 聲音舞臺(tái)如果用一對(duì)麥克風(fēng)記錄立體聲音 就可以重現(xiàn)聲音舞臺(tái) 它有寬度和深度 7 頭部有關(guān)的傳遞函數(shù) 在聽(tīng)耳機(jī)時(shí) 每個(gè)耳只聽(tīng)一個(gè)發(fā)聲器的聲音 當(dāng)然一個(gè)耳中的聲音 也會(huì)經(jīng)頭部傳給另一耳 在聽(tīng)揚(yáng)聲器時(shí) 每個(gè)耳都分別聽(tīng)到兩個(gè)揚(yáng)聲器的聲音 1974年P(guān)lenge認(rèn)為 進(jìn)入耳的聲音的形式 會(huì)產(chǎn)生外部的聲音舞臺(tái)的感覺(jué) 對(duì)于耳機(jī) 特別是插入式耳塞 感覺(jué)的聲音舞臺(tái)是內(nèi)部的 如果驅(qū)動(dòng)耳機(jī)的左右通道可以由電子設(shè)備構(gòu)成聲音 則人會(huì)感覺(jué)聲音有外部的真實(shí)性 為此要求知道聲音的形狀 或由聲源到耳內(nèi)部的傳遞函數(shù) 這個(gè)由聲源到耳內(nèi)部的傳遞函數(shù)稱為 頭部有關(guān)的傳遞函數(shù) Head relatedtransferfunctions HRTF 它反映頭和耳對(duì)傳聲的影響 不同的人有不同的HRTF HRTF的測(cè)量方法如下 對(duì)空間每個(gè)位置的聲源 安放在耳中接近耳膜的小麥克風(fēng)測(cè)量收到的信號(hào) 信號(hào)經(jīng)過(guò)處理 補(bǔ)償非線性頻率響應(yīng) 由此得到HRTF 1 2 3身體感覺(jué) 這涉及到感覺(jué)表面粗糙 振動(dòng) 運(yùn)動(dòng) 位置 壓力 疼痛和溫度 按身體不同部位 可分四類 a 深部感覺(jué) b 內(nèi)臟感覺(jué) c 本體感覺(jué) d 外感受感覺(jué) 現(xiàn)有的VR系統(tǒng)中 已經(jīng)考慮了觸覺(jué)和力覺(jué)顯示 但是有關(guān)的技術(shù)細(xì)節(jié)還沒(méi)有充分考慮到 a 深部感覺(jué) 它提供關(guān)節(jié) 骨 腱 肌肉和其它組織的信息 涉及壓力 疼痛和振動(dòng) b 內(nèi)臟感覺(jué) 它提供胸腹腔中的內(nèi)臟的狀況 主要是疼痛 c 本體感覺(jué) 它提供身體的位置 平衡和肌肉感覺(jué) 也涉及與其它物體的接觸 如站在地上 躺在床上 本體感覺(jué)接受器位于關(guān)節(jié) 肌肉和深部組織 d 外感受感覺(jué) 它是身體表面的接觸感覺(jué) 平衡是在飛行仿真和運(yùn)動(dòng)眩暈中的問(wèn)題 眩暈的原因很多 但往往來(lái)自視覺(jué)和前庭器官信息的沖突 例如在固定座艙的飛行仿真中 視覺(jué)接收人體運(yùn)動(dòng)感覺(jué) 前庭器官不感覺(jué)人體運(yùn)動(dòng) 又如在乘車旅行中 前庭器官感覺(jué)人體與車同時(shí)的運(yùn)動(dòng) 視覺(jué)沒(méi)有或較少接收人體運(yùn)動(dòng)感覺(jué) 下圖表示 人體皮膚的內(nèi)部結(jié)構(gòu) VR的觸覺(jué)接口直接刺激皮膚 產(chǎn)生接觸感 人體具有約20種不同的神經(jīng)末梢 它們?nèi)o大腦發(fā)送信息 但是 最普通的感知器是熱感知器 冷感知器 疼痛感知器 以及壓力 或接觸 感知器 VR的觸覺(jué)接口可以提供高頻震動(dòng) 小范圍的形狀或壓力分布 以及熱特性 由此來(lái)刺激這些感知器 圖中 綠色的ColdReceptor是冷感知器 黃色的HeatReceptor是熱感知器 紅色的PainReceptor是疼痛感知器 紫色的PressureReceptor是壓力感知器 此外 Dermis是真皮 Epidermis是表皮 Hair是毛發(fā) 在VR中 某些人的因素明顯被考慮 如HMD中考慮瞳距 另外一些人的因素未明顯考慮 如運(yùn)動(dòng)眩暈 DefenceResearchAgency研究了沉浸感顯示的副作用 有些人認(rèn)為用HMD看不同遠(yuǎn)處物體時(shí) 不能用會(huì)聚和調(diào)節(jié) 使人不適應(yīng) 有人認(rèn)為HMD與內(nèi)瞳距不匹配也使眼疲勞 有人認(rèn)為眼不是會(huì)聚 而是在發(fā)散 有些用戶很敏感運(yùn)動(dòng)刺激 如汽車 船 飛機(jī) 火車等 有人實(shí)驗(yàn)研究了VR引起運(yùn)動(dòng)眩暈問(wèn)題 在150個(gè)實(shí)驗(yàn)者中 有8人產(chǎn)生強(qiáng)烈眩暈 其它實(shí)驗(yàn)者經(jīng)歷了20分鐘沉浸環(huán)境 5分后有22 的人眩暈 10分后有32 人眩暈 15分后有40 人眩暈 20分后有45 人眩暈 在沉浸經(jīng)歷以后5分鐘 還有36 的人眩暈 10分鐘后還有27 的人眩暈 在VR中 具有圖像生成的延遲 視覺(jué)和前庭器官信息的時(shí)間不同步也造成感覺(jué) 視覺(jué)與本體感覺(jué) 的沖突 快速處理和予測(cè)算法有可能緩解這種不同步 第一章到此結(jié)束