基于手势识别的认知训练系统研制

发布时间：2017-06-29 05:17

  本文关键词：基于手势识别的认知训练系统研制，由笔耕文化传播整理发布。

【摘要】：认知是指通过形成概念、知觉、判断或想象等心理活动来获取知识的过程。执行功能作为高级的认知能力,已经成为国际心理学研究的一个热点。执行功能与多种能力的发展有关系,涉及决策、概念形成、认知转换、监控动作等方面,因此执行功能的研究对人类认知发展具有重要的理论和实践意义。近年来的一些研究表明,执行功能训练可有效提高儿童的认知绩效。通过相应的认知训练任务,儿童在智力水平等方面可以得到有效的提高,特别是对患有孤独症谱系障碍的儿童的认知训练具有借鉴价值和实用价值。目前已有的认知训练大多是以行为训练和传统计算机为平台,不够便捷,更不适用于儿童,且计算机化的认知训练所用的交互方式为传统的使用键盘鼠标的交互方式,儿童需要将一部分精力转移到操作过程中,损耗了儿童过多的关注点。针对上述问题,本课题主要研究了以自然人机交互为基础的认知训练系统,采用动作感应传感器、手势识别技术、客户端呈现技术、WEB技术等,设计研发以静态动态两种手势动作为交互基础,以自然人机交互为交互手段,同时具有用户管理,参数设置等功能的计算机化认知训练系统；并根据执行功能核心成分设计了二个用于训练儿童青少年工作记忆与认知灵活性的任务。并将此系统应用于孤独症的干预过程,检验其对认知能力的改善作用。本文首先介绍了认知训练系统的课题背景,并介绍了认知训练的研究现状,对国内外的研究情况进行了调研,在探讨了认知训练缺乏精细的自然的人机交互方式之后,提出本文的课题使用LeapMotion进行人机交互。之后,本文对认知训练系统的各个模块进行了分析设计；其次,本文详细介绍了基于手势识别的认知训练系统的前端设计与实现,包括数据帧的预处理,静态,动态手势识别方法与交互设计。并对认知训练任务进行了详细介绍,介绍了数字连线任务与图形匹配任务的交互方式,及其设计与实现；再次,对系统后端的设计进行了详细介绍,包括数据库设计,服务器后台架构,服务化接口,服务器监控等。最后将本课题开发的认知训练系统应用于孤独症儿童的训练中,经过4周的训练方案实施,对训练前后的数据进行统计分析,探讨实验结果,证明该系统的训练合理有效,达到预期效果。综上所述,系统实现了互联网化的训练,通过自然的人机交互,可有效提高儿童的执行功能中的工作记忆与认知灵活性成分,本课题所取得的研究成果为今后的认知训练方法和手段提供了一定的实用价值和借鉴意义,并展示了自然人机交互在儿童发展等领域的美好应用前景。
【关键词】：LeapMotion 认知训练 手势识别 互联网训练系统
【学位授予单位】：东南大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP391.41;R318
【目录】：

• 摘要5-6
• Abstract6-11
• 第一章 绪论11-17
• 1.1 课题研究背景和意义11-12
• 1.2 课题研究现状12-13
• 1.2.1 儿童自然人机交互研究现状12-13
• 1.2.2 认知训练研究现状13
• 1.3 本课题主要研究内容13-14
• 1.4 论文组织结构14-17
• 第二章 认知训练系统总体设计17-31
• 2.1 系统分析17-22
• 2.1.1 设计目标17-18
• 2.1.2 系统需求分析18-22
• 2.2 架构设计22-24
• 2.2.1 系统整体架构22-23
• 2.2.2 系统模块划分23-24
• 2.3 核心技术研究24-28
• 2.3.1 手势识别相关技术研究24
• 2.3.2 客户端相关技术研究24-27
• 2.3.3 服务器相关技术研究27-28
• 2.3.4 数据库相关技术研究28
• 2.4 本章小结28-31
• 第三章 认知训练系统客户端设计与实现31-67
• 3.1 客户端架构分析31
• 3.2 手势识别31-49
• 3.2.1 手势的分类32
• 3.2.2 LeapMotion32-37
• 3.2.3 数据预处理37-38
• 3.2.4 静态手势识别38-43
• 3.2.5 动态手势识别43-48
• 3.2.6 交互设计48-49
• 3.3 认知训练任务模块49-62
• 3.3.1 数字连线训练模块设计与实现50-56
• 3.3.2 图形匹配模块设计与实现56-62
• 3.4 用户相关功能62-65
• 3.4.1 参与者管理62-64
• 3.4.2 参与者参数管理64-65
• 3.5 训练结果查询模块65-66
• 3.6 本章小结66-67
• 第四章 认知训练系统服务端的设计与实现67-83
• 4.1 系统服务端总体设计67-68
• 4.2 数据库设计68-72
• 4.2.1 MongoDB数据库管理系统68-69
• 4.2.2 系统数据库设计69-72
• 4.3 服务器程序设计72-81
• 4.3.1 服务端编程简介73-74
• 4.3.2 服务端业务逻辑74-75
• 4.3.3 视图层75-77
• 4.3.4 业务逻辑层77-79
• 4.3.5 数据访问层79-80
• 4.3.6 其他模块设计80-81
• 4.4 本章小结81-83
• 第五章 应用与数据分析83-95
• 5.1 研究对象及方法83-84
• 5.1.1 研究目的83
• 5.1.2 研究对象83
• 5.1.3 研究方法83
• 5.1.4 研究流程83-84
• 5.2 实验结果84-91
• 5.2.1 工作记忆评测结果84-86
• 5.2.2 认知灵活性评测结果86-87
• 5.2.3 抑制能力评测结果87-89
• 5.2.4 BRIEF量表评测结果89-91
• 5.3 讨论91-92
• 5.4 本章小结92-95
• 第六章 总结与展望95-97
• 6.1 本文主要工作总结95
• 6.2 课题不足及研究未来展望95-97
• 致谢97-99
• 参考文献99-103
• 作者攻读硕士学位期间发表的论文103

【相似文献】

中国期刊全文数据库 前2条

1 余明洁;;论学生数学问题解决中的元认知训练[J];吉林省教育学院学报;2006年04期

2 ;[J];;年期

中国重要会议论文全文数据库 前10条

1 程素萍;;元认知训练提高学生解题能力的实验研究[A];第八届全国心理学学术会议文摘选集[C];1997年

2 时国臣;张继玉;徐福年;焦志宏;;头穴透刺结合认知训练对中风后轻度认知功能障碍的影响[A];2011中国针灸学会年会论文集（摘要）[C];2011年

3 冯威;吴文源;成燕;陈优;李春波;;综合认知训练对社区健康老人认知功能的影响:5年随访[A];中华医学会精神病学分会第九次全国学术会议论文集[C];2011年

4 时国臣;张继玉;徐福年;焦志宏;;头穴透刺结合认知训练对中风后轻度认知功能障碍的影响[A];中国针灸学会临床分会全国第十九届针灸临床学术研讨会论文集[C];2011年

5 李冰;李会杰;王鹏云;李娟;;综合认知训练与记忆训练对老年人记忆的影响[A];增强心理学服务社会的意识和功能——中国心理学会成立90周年纪念大会暨第十四届全国心理学学术会议论文摘要集[C];2011年

6 朱琳;宋为群;岳月红;刘霖;;计算机辅助的认知训练对脑损伤患者认知功能和抑郁的影响[A];中国康复医学会脑血管病专业委员会换届暨第十五次全国脑血管病康复学术年会、湖南省康复医学会神经康复专业委员会2012学术年会论文集[C];2012年

7 薛志强;冯威;李春波;吴文源;;对健康老人认知训练干预的近期效果[A];中华医学会精神病学分会第七届学术年会论文摘要集[C];2006年

8 陈少贞;张保峰;赵江莉;黄东锋;;脑卒中患者平衡功能的认知因素及认知训练对平衡的干预效应[A];第十一届全国神经病学学术会议论文汇编[C];2008年

9 张新安;陈佩杰;刘琳;;有氧运动结合认知训练对早、中期老年痴呆症患者精神症状及认知功能的影响[A];2013年中国生理学会运动生理学专业委员会年会暨“运动与健康”学术研讨会论文摘要汇编[C];2013年

10 尹述飞;朱心怡;王鹏云;李娟;;多模态干预对老年人认知能力和幸福感的影响[A];第七届全国心理卫生学术大会论文汇编[C];2014年

中国重要报纸全文数据库 前1条

1 张梦然;计算机化认知训练程序可治抑郁症[N];科技日报;2014年

中国硕士学位论文全文数据库 前10条

1 叶海程;针刺结合计算机辅助认知训练改善脑卒中患者认知功能的临床研究[D];福建中医药大学;2015年

2 朱志勇;元认知训练对高一函数解题能力影响的个案研究[D];苏州大学;2015年

3 霍杰章;高一学生数学元认知训练的实验研究[D];闽南师范大学;2015年

4 黄权柳;元认知训练对高一学生化学学科成绩的影响研究[D];华中师范大学;2015年

5 林延敏;计算机辅助认知训练对非痴呆型血管性认知障碍患者认知功能及P300的影响[D];青岛大学;2015年

6 童玉婷;元认知训练对高中生英语写作能力的影响研究[D];西安外国语大学;2016年

7 王鹿桐;正念认知训练对抑郁状态下大学生睡眠问题的干预效果研究和心理机制探讨[D];山西医科大学;2016年

8 姜萍;武警机要人员认知训练系统的建立与评估[D];第四军医大学;2016年

9 李杨韬;基于手势识别的认知训练系统研制[D];东南大学;2016年

10 严宏达;益肾醒脑针法结合认知训练治疗卒中后轻度认知功能障碍的临床研究[D];广州中医药大学;2009年

  本文关键词：基于手势识别的认知训练系统研制，由笔耕文化传播整理发布。

，

本文编号：496708