【摘要】 一种利用视觉进行非接触式人机交互的系统，属于人机交互领域。通过一种信息在视觉通道上流通的方式实现人与机器人之间的非接触式交互。该系统包括：机器视觉单元，用于获取特定光照条件下的使用者面部图像；信息处理分析单元，用于处理面部图像并计算使用者的视线方向，分析使用者眼动状态提取出蕴含使用者意图的信息，识别意图信息决策机器人应反馈的交互信息；交互信息显示单元，用于以能给人产生视觉刺激的方式为使用者提供机器人的反馈信息，并作为机器人与使用者交互的最直接的平台。本发明充分利用视觉通道获取、表达信息的自然性、直接性和便捷性，使人机交互过程更简便、迅速、易操作，且对信息通道带宽要求较低。 【专利类型】发明授权 【申请人】北京科技大学 【申请人类型】学校 【申请人地址】100083 北京市海淀区学院路30号 【申请人地区】中国 【申请人城市】北京市 【申请人区县】海淀区 【申请号】CN200810227432.0 【申请日】2008-11-26 【申请年份】2008 【公开公告号】CN101441513B 【公开公告日】2010-08-11 【公开公告年份】2010 【授权公告号】CN101441513B 【授权公告日】2010-08-11 【授权公告年份】2010.0 【IPC分类号】G06F3/01; G06K9/20 【发明人】黄莹; 王志良 【主权项内容】一种利用视觉进行非接触式人机交互的系统，其特征在于，该系统包括：机器视觉单元、信息处理分析单元和交互信息显示单元，其中机器视觉单元是利用特殊波长的主动光源均匀照射使用者面部，结合配套的敏感相机，持续获得此光照环境下的使用者的面部图像；信息处理分析单元是由使用者面部图像检测出其视线方向，分析其眼动状态并提取出蕴含意图的信息，识别意图信息做出相应的反馈决策；交互信息显示单元是以能给人产生视觉刺激的方式为使用者提供机器人的反馈信息；机器视觉单元将获取的使用者面部图像持续传送至信息处理分析单元，信息处理分析单元又将反馈决策以命令形式发送至交互信息显示单元；所述信息处理分析单元包括：视线检测模块、状态分析及意图提取模块、决策模块、交互信息产生模块和记忆模块；视线检测模块检测出使用者当前的视线信息，同时将视线信息输送至状态分析及意图提取模块和记忆模块；状态分析及意图提取模块同时连接至视线检测模块和记忆模块，根据视线检测模块传入的使用者当前视线信息和记忆模块传入的历史视线信息，从中提取出使用者当前的意图信息同时输送至决策模块和记忆模块；决策模块同时连接至状态分析及意图提取模块和记忆模块，接收状态分析及意图提取模块传入的使用者当前的意图信息，并同时接收记忆模块传入的历史意图信息和任务管理参量，从中分析出使用者的真正意图做出相应的反馈决策向所述交互信息产生模块发出指令、更新任务管理参量输送至记忆模块；交互信息产生模块连接至决策模块，执行决策模块传入的指令并控制交互信息显示单元的行动；记忆模块同时连接至视线检测模块、状态分析及意图提取模块和决策模块，存储历史视线方向信息、眼动状态信息、历史意图信息和任务管理参量。 【当前权利人】北京科技大学 【当前专利权人地址】北京市海淀区学院路30号 【统一社会信用代码】121000004000022245 【引证次数】2.0 【被引证次数】3 【他引次数】2.0 【被他引次数】3.0 【家族引证次数】2.0 【家族被引证次数】56
