摘要：针对目前人机交互中存在的问题与不足，提出了一种基于多模态视觉特征的人机交互新方法。采用二维Gabor小波提取全局人脸朝向视觉特征，克服人脸显著特征提取困难，以及不同人脸朝向特征区分的难度性；基于人脸几何分布特征，快速定位人眼中心，无需考虑人脸图像分辨率和人眼闭合及其配戴情况；通过对视觉特征的重要性评价，选取分类特性显著的多模态视觉特征进行机器学习与训练，确定用户所指目标，实现非穿戴自然人机交互，用户无需佩戴任何标记，且其活动不受约束，便于充分发挥其日常技能。通过实验对比，验证了文中所提方法有效、可行，可应用于实时非穿戴自然人机交互中。

关键词：人机交互 多模态视觉特征 非穿戴 机器学习 

单位：上海大学通信与信息工程学院; 上海200072; 新型显示技术及应用集成教育部重点实验室; 上海200072