本書重點在深度機(jī)器學(xué)習(xí)框架下，圍繞上述關(guān)鍵問題，對筆者的研究經(jīng)歷、研究成果和研究結(jié)論進(jìn)行總結(jié)和歸納，主要內(nèi)容如下：
章主要介紹感知用戶界面(perceptual user interface，PUI)以及感知計算(perceptual computing)概念的提出和歷史發(fā)展，以及在感知計算語境下，基于表面肌電的手勢識別(下文中簡稱為肌電手勢識別)技術(shù)相比其他手勢識別技術(shù)的特點和優(yōu)缺點，由此引出筆者的主要研究問題和本書主要架構(gòu)。
第二章描述表面肌電信號的產(chǎn)生機(jī)理，并對基于表面肌電的手勢識別技術(shù)進(jìn)行綜述。
第三章基于手勢動作與肌群產(chǎn)生的肌電信號的關(guān)聯(lián)性假設(shè)，介紹一種面向肌電手勢識別的多流融合深度學(xué)習(xí)方法，對前臂肌電信號生成的肌電圖像進(jìn)行多流表征，將得到的多個子圖像分別輸入多流卷積神經(jīng)網(wǎng)絡(luò)各個分支中進(jìn)行建模，之后通過特征層多流融合，把多個分支學(xué)習(xí)到的深度特征融合在一起。在不同肌電數(shù)據(jù)集上的結(jié)果表明，在多流融合深度學(xué)習(xí)框架下對前臂不同肌群的肌電信號進(jìn)行關(guān)聯(lián)性建模，可以有效提高肌電手勢識別的準(zhǔn)確率。
第四章介紹了一種面向肌電手勢識別的多視圖深度學(xué)習(xí)方法，從稀疏多通道肌電信號中提取多個經(jīng)典特征集構(gòu)建為肌電信號不同視圖的數(shù)據(jù)，然后通過一個深度學(xué)習(xí)框架下的視圖選擇過程，選取具有較優(yōu)手勢識別性能的視圖，將其數(shù)據(jù)輸入多視圖卷積神經(jīng)網(wǎng)絡(luò)中進(jìn)行建模。相比單視圖學(xué)習(xí)，多視圖學(xué)習(xí)可以充分利用原始數(shù)據(jù)多個視圖下的信息，從而帶來性能的提升。
第五章主要介紹肌電手勢識別中的領(lǐng)域偏移問題，并介紹一種面向肌電手勢識別系統(tǒng)的無監(jiān)督領(lǐng)域自適應(yīng)算法，以及其對筆者所提出不同深度神經(jīng)網(wǎng)絡(luò)模型在會話間或被試間手勢識別測試時性能的影響。
第六章對本書內(nèi)容進(jìn)行了總結(jié)，并對未來相關(guān)研究工作進(jìn)行展望。