基于眼动信息的人机交互关键技术研究

基于眼动信息的人机交互关键技术研究

作者:师大云端图书馆 时间:2015-10-03 分类:期刊论文 喜欢:3602
师大云端图书馆

【摘要】传统的人机交互方式大多利用使用者的肢体运动来实现人机交互的功能,无法满足那些肢体残疾者、重度瘫痪者等特殊人群独立与外界交流的需求。随着各类学科技术的发展,基于视觉、听觉、触觉、嗅觉等多模态技术的新型人机交互方式层出不穷。本论文就是研究基于眼动信息的人机交互中的某些关键技术,以期能推动这种新型人机交互方式早日走出实验室,造福于社会。简单地说,基于眼动信息的人机交互方式就是记录并识别眼球的不同运动模式作为输入命令信号,实现对一些仪器设备的控制操作。基本的眼动模式有凝视、扫视(眼睛上、下、左、右的运动)、眨眼等。眼睛的这些运动模式又称为眼姿势(eyegestures)。在理解眼睛运动模式的生理机制的基础上,本论文围绕如下几点关键技术展开研究。一,研究与眼动信息提取与记录相关的问题。在综合比较了各种眼动信息提取方法之后,本论文选用基于影像Video-oculography(VOG)的方法记录眼动信息。即使用摄像机捕获眼睛图像,通过图像处理技术来提取眼动信息。用户是在一种完全自然的状态下被记录眼动状态,不会有任何紧张等不适感。系统组成仅仅包括一架摄像机与一台计算机,无需任何辅助光源。为了保证用单摄像机在自然光源下采集到完整、清晰的双眼图像,论文通过建立数学模型讨论:1)摄像机的合理放置区域,包括摄像机与用户之间的距离范围、摄像机的最大侧移角度;2)单摄像机采集眼动图像时,允许用户头部转动的最大水平角度。并在Matlab平台上完成了仿真模型边界条件的计算。之后,在实验室自然光源下,以模型头为对象,使用CongexInsight1020摄像机采集图像,验证了仿真建模的正确性。结论表明:在自然光源下,使用单摄像机要采集到完整、清晰的双眼图像,摄像机的水平侧移范围为±40o;同时,允许用户头部在±60o范围内转动(±表示左右方向)。二,研究多视角下人脸检测技术。通过改进经典的Adaboost算法,论文实现了复杂背景下100%的正面单人脸检测率。在此基础上,论文进一步扩大对不同视角方向下人脸检测的研究。在实验室自然光照条件下,从摄像机在用户正前方位置(初始0o视角)开始,以10o为步长,采集用户±60o视角范围内的头肩图像。在OpenCV平台上应用Adaboost算法对实际采集的图像进行人脸检测,实现了±30o视角范围内100%的单人脸检测率。三,研究多视角下人眼定位技术。首先应用积分投影算法在检测到的人脸图像上粗定位眼窗口。在此基础上,论文提出基于高斯滤波的区域灰度极小值算法计算眼睛瞳孔中心位置,并采用国际通用的Hausdorff距离度量标准检验计算结果的准确率。检验结果表明,应用本文算法对±30o视角范围内的眼动图像进行瞳孔中心定位,精度为96.43%。四,研究眼姿势识别算法。根据瞳孔中心位置变化辨识眼睛运动姿势。首先分析眼睛上下左右运动、有意眨眼动作与眼动图像中瞳孔中心变化轨迹的关系;在此基础上,讨论实现了±30o视角范围内水平眼动识别算法、垂直眼动识别算法与有意眨眼识别算法。最后,论文将人脸检测技术、人眼定位技术、眼姿势识别技术串联起来,在实验室自然光照下分别进行了水平眼动跟踪实验、垂直眼动跟踪实验、斜向眼动跟踪实验、矩形眼动跟踪实验以及命令式眼动控制实验。并对实验结果进行计算分析,验证了本文所研究的关键技术的正确性及可行性,为实际基于眼动信息的人机交互系统的应用作了有益的探索。
【作者】林敏;
【导师】李斌;
【作者基本信息】上海大学,控制理论与控制工程,2014,博士
【关键词】眼动信息;人机交互;人脸检测;瞳孔中心定位;眼姿势识别;

【参考文献】
[1]胡宗棠.基于Cortex-MO+内核Kinetis无线射频模块的应用研究[D].苏州大学,计算机应用技术,2014,硕士.
[2]舒雨晨.宋词和宋画中的桥[D].北京林业大学,城市规划与设计,2013,硕士.
[3]赵贤利.统筹城乡发展下湖北新生代农民工人力资源能力建设研究[D].武汉理工大学,企业管理,2012,硕士.
[4]张琳达.跨太平洋伙伴关系协议(TPP)对中国未来对外贸易影响分析[D].吉林大学,国际贸易学,2013,硕士.
[5]陈艳.论完善我国公司社会责任的法律实现机制[D].上海师范大学,法律(专业学位),2013,硕士.
[6]陈新晖.论创新型幼儿教师的成长与培养[D].广西师范大学,教育经济与管理,2003,硕士.
[7]雷铃敏.农村留守少年生存与发展状况研究[D].湖南师范大学,人口学,2014,硕士.
[8]穆菊梅.我国环境污染责任保险发展的制度构想[D].云南财经大学,保险(专业学位),2014,硕士.
[9]刘全成.中小型加工制造企业薪酬体系构建研究[D].安徽大学,工商管理,2012,硕士.
[10]王俊.明星代言虚假广告法律责任问题探析[D].云南财经大学,法律(专业学位),2014,硕士.
[11]刘清德.论贝克莱的观念学说[D].兰州大学,外国哲学,2014,硕士.
[12]唐雯.想象的中国—东方主义视角下华裔美国文学在美国主流社会的接受[D].西南交通大学,外国语言学及应用语言学,2014,硕士.
[13]刘广生.基于价值链的区域产业结构升级研究[D].北京交通大学,2011.
[14]罗尧晴.汉英翻译中的合句译法[D].湖南师范大学,翻译(专业学位),2014,硕士.
[15]王艺芳.房地产上市公司管理能力与盈余质量的关系研究[D].西南交通大学,会计学,2014,硕士.
[16]赵岩.八年级数学欣赏活动的设计[D].苏州大学,课程与教学论,2014,硕士.
[17]金磊.“没文化”的建筑呼唤建筑文化[J].中外建筑.2002(01)
[18]黄磊,张艳华,涂铭旌.锂离子电池中石墨烯基金属氧化物负极材料的制备和应用[J].功能材料,2014,08:8013-8019.
[19]邱頔.景德镇方家弄历史文化街区的保护与更新研究[D].北京建筑大学,建筑设计及其理论,2013,硕士.
[20]王瑾.我国承接金融服务外包的影响因素分析[D].云南财经大学,国际贸易学,2014,硕士.
[21]伍海浪.社会网络关系抽取及其协同推荐算法[D].华中科技大学,通信与信息系统,2013,硕士.
[22]李岩.海洋风场仿真及探测方法研究[D].哈尔滨工业大学,物理电子学,2013,硕士.
[23]何宗玉.云南抚仙湖沉积环境及其对人为扰动的响应[D].中国海洋大学,2003.
[24]刘荣丽.保健食品中原花青素的分析及缓解视疲劳功效研究[D].福建中医药大学,药物分析学,2014,硕士.
[25]纪诚.从国家本位到个人本位[D].苏州大学,法律,2003,硕士.
[26]薛英林,李普明,徐政,黄莹,黎小林.同塔双回高压直流工程交流滤波器设计[J].电力系统自动化,2010,17:50-54.
[27]晋美.全胸腔镜体外循环下房室间隔缺损修补术与常规手术的比较研究[D].河北医科大学,外科学(专业学位),2014,硕士.
[28]郭以贺.中压电力线通信关键技术研究[D].华北电力大学,电力电子与电力传动,2014,博士.
[29]贾伟.康县—武都断裂新活动性及其地震危险性研究[D].中国地震局兰州地震研究所,构造地质学,2012,硕士.
[30]马超飞.基于转移熵的神经电信号分析研究[D].华东理工大学,控制科学与工程,2013,硕士.
[31]李丹.未成年人犯罪的矫治制度[D].吉林大学,法律,2012,硕士.
[32]韩娜娜.汉语儿童产品广告的语用预设研究[D].山东大学,英语语言文学,2013,硕士.
[33]冷翠婷.聚吡咯/二异氰酸酯改性磺酸盐型有机硅导电材料的合成与性能研究[D].陕西科技大学,有机化学,2013,硕士.
[34]王海龙.大鼠寡霉素敏感相关蛋白(OSCP)基因在大肠杆菌中的克隆和表达[D].山西医科大学,病原生物学,2003,硕士.
[35]侯红胜,刘卫国.基于混合驱动的无刷直流电机特性研究[J].电气传动,2014,12:3-7.
[36]胡彬,欧阳密,张玉建,项文勤,张诚.具有双极性端枝的3D结构化合物的合成及光学性能[J].高等学校化学学报,2012,01:82-89.
[37]王鹤静.高校图书馆校园文化建设研究[D].吉林大学,图书情报,2013,硕士.
[38]王雪金.利用AVO曲线极性反转反演岩性[J].石油地球物理勘探,1989,06:682-685+736.
[39]谢记科.汽车消费贷款保证保险合同实务问题研究[D].上海大学,法律,2013,硕士.
[40]陈杨军,刘湘圣,王海波,王寅,金桥,计剑.生物医用纳米颗粒表面的两性离子化设计[J].化学进展,2014,11:1849-1858.
[41]姜联合.植物生态学研究论文中常用的法定计量单位、拉丁学名及专业术语缩写符号书写标准规范[J].植物生态学报,2004,05:730-733.
[42]李莎莎.陕西省循环经济发展水平与工业生态园区管理策略研究[D].西北大学,管理科学与工程,2014,硕士.
[43]蒋薇.现代化进程中城市居民消费方式研究——以苏州市为案例的分析[D].苏州大学,社会学,2003,硕士.
[44]刘晓佩.论我国竞业禁止法律制度的完善[D].江西财经大学,经济法,2013,硕士.
[45]沙巍.新疆哥老会研究[D].新疆大学,中国近现代史,2013,硕士.
[46]王博.论保罗·奥斯特《幻影书》之不确定性分析[D].南昌大学,英语语言文学,2012,硕士.
[47]应叶青.喜树种源试验与叶用园营建关键技术研究[D].南京林业大学,森林培育学,2004,硕士.
[48]刘英利.基于SCOR模型的BL公司供应链绩效评价指标构建研究[D].中国地质大学(北京),工商管理,2013,硕士.
[49]廖玉平.基于SCP的转轨时期建筑业组织研究[D].北京交通大学,2011.
[50]卢莹.卡铂-PECE水凝胶大鼠腹腔药物代谢动力学研究[D].遵义医学院,妇产科学,2014,硕士.

相关推荐
更多