多模態(tài)人機(jī)交互技術(shù)及應(yīng)用
定 價(jià):68 元
- 作者:曾向榮,劉衍,鐘志偉編
- 出版時(shí)間:2023/9/1
- ISBN:9787548754213
- 出 版 社:中南大學(xué)出版社
- 中圖法分類:TB18
- 頁碼:262
- 紙張:
- 版次:1
- 開本:16開
本書從實(shí)際應(yīng)用出發(fā),把生活中常見的人機(jī)交互技術(shù)進(jìn)行拆分。從硬件、軟件和系統(tǒng)三個(gè)層次,用難易不同的語言描述多模態(tài)人機(jī)交互技術(shù)。用時(shí)間、空間的眼光,為讀者介紹不同場景下的多模態(tài)人機(jī)交互技術(shù)。近幾年隨著大數(shù)據(jù)、人工智能、深度學(xué)習(xí)的浪潮的推動(dòng),人機(jī)交互技術(shù)也由機(jī)器檢測人、人操作機(jī)器的簡單方式轉(zhuǎn)變?yōu)槿溯o助機(jī)器、機(jī)器配合人的人機(jī)共融方式。
本書的多模態(tài)人機(jī)交互技術(shù)涉及多模式傳感器層面的視覺傳感器、體感傳感器、體表傳感器、眼動(dòng)傳感器、語音傳感器等多種傳感器;涉及傳統(tǒng)的基于特征提取和目前流行的基于深度學(xué)習(xí)、Transformer等的人機(jī)交互識(shí)別方式;涉及人機(jī)交互中操作員控制機(jī)器、機(jī)器感知操作員狀態(tài)的人機(jī)交互方式;涉及人機(jī)交互中多模式下的任務(wù)規(guī)劃和協(xié)同感知;涉及人機(jī)交互中的安全等。
第1章 緒論
1.1 多模式人機(jī)操作
1.2 多模式人機(jī)協(xié)同感知規(guī)劃
1.3 試驗(yàn)驗(yàn)證情況
第2章 多模式人機(jī)交互構(gòu)成及交互方式
2.1 基于多傳感器測量的操作員狀態(tài)監(jiān)視模塊
2.2 多傳感器融合的神經(jīng)網(wǎng)絡(luò)語義學(xué)習(xí)方法
2.3 基于多傳感器輸入的多無人機(jī)混合主動(dòng)控制模塊設(shè)計(jì)
2.4 監(jiān)督控制系統(tǒng)初步實(shí)現(xiàn)與仿真驗(yàn)證
2.5 總結(jié)
第3章 手勢識(shí)別交互
3.1 手勢識(shí)別傳感器
3.2 基于視覺特征學(xué)習(xí)的手勢特征提取
3.3 基于視覺特征學(xué)習(xí)的手勢特征識(shí)別
3.4 基于深度學(xué)習(xí)的手勢識(shí)別
3.5 手勢在交互中的應(yīng)用
3.6 總結(jié)
第4章 人體姿態(tài)識(shí)別交互
4.1 人體骨架模型
4.2 深度相機(jī)的人體骨架提取
4.3 單可見光相機(jī)的人體骨架提取
4.4 人體姿態(tài)識(shí)別
4.5 多傳感器融合的姿態(tài)識(shí)別
4.6 人體姿態(tài)識(shí)別在交互中的應(yīng)用
4.7 總結(jié)
第5章 眼動(dòng)跟蹤交互
5.1 眼睛視線跟蹤模型
5.2 基于視覺的眼睛定位及狀態(tài)檢測
5.3 眼動(dòng)儀檢測定位
5.4 眼動(dòng)跟蹤交互應(yīng)用
5.5 總結(jié)
第6章 面部表情交互
6.1 表情模型
6.2 面部表情特征提取方法
6.3 基于深度學(xué)習(xí)的面部表情識(shí)別
6.4 人臉表情識(shí)別常見傳感器
6.5 面部表情交互應(yīng)用
6.6 總結(jié)
第7章 語音交互
7.1 語音模型
7.2 語音識(shí)別
7.3 語音情感識(shí)別
7.4 麥克風(fēng)陣列語音交互
7.5 語音交互應(yīng)用
7.6 總結(jié)
第8章 腦電信號(hào)交互
8.1 腦電信號(hào)模型
8.2 基于腦電信號(hào)的情感識(shí)別
8.3 腦電信號(hào)與睡眠的關(guān)系
8.4 腦電信號(hào)與疲勞關(guān)系
8.5 腦電信號(hào)與注意力關(guān)系
8.6 腦電信號(hào)控制
8.7 腦電信號(hào)檢測過程
8.8 腦電信號(hào)的應(yīng)用
8.9 總結(jié)
第9章 其他交互方式
9.1 情緒識(shí)別
9.2 觸覺識(shí)別
9.3 鼠標(biāo)、鍵盤、筆式交互
9.4 唇語識(shí)別
9.5 總結(jié)
第10章 視覺感知
10.1 基于視覺的無人車多任務(wù)感知
10.2 基于點(diǎn)云的無人車障礙物檢測研究
10.3 圖像語義理解
10.4 總結(jié)
第11章 路徑規(guī)劃
11.1 常用的路徑規(guī)劃算法
11.2 基于梯度平滑A*算法的無人車路徑規(guī)劃
11.3 RRT算法與Dubins曲線融合航線規(guī)劃方法
11.4 總結(jié)
第12章 多模式人機(jī)操作及協(xié)同感知規(guī)劃實(shí)驗(yàn)設(shè)計(jì)
12.1 可解釋性的人-無人機(jī)交互操作
12.2 多模式人機(jī)協(xié)同感知/規(guī)劃性能參數(shù)
12.3 多模式人機(jī)交互操作實(shí)驗(yàn)平臺(tái)設(shè)計(jì)
12.4 基于深度學(xué)習(xí)的多模式人機(jī)交互操作技術(shù)
12.5 基于多模式人機(jī)混合主動(dòng)控制
12.6 總結(jié)
第13章 人機(jī)交互安全
13.1 人機(jī)交互中操作員的安全
13.2 人機(jī)交互中的身份信息確認(rèn)
13.3 數(shù)據(jù)安全
13.4 總結(jié)
參考文獻(xiàn)