盲人智能终端触摸屏的手势操作研究

摘要

尽管越来越多有高级功能的智能终端出现，但是大部分的盲人还在使用落后过时的手机。因为他们更熟悉这些手机的界面布局，手机上的触摸按钮也给他们操作手机提供了帮助。带有触摸屏的智能终端没有可触摸按钮，信息输入时需要精确的定位。给盲人操作带来极大不便，容易使他们在操作过程中迷失。
　　智能终端支持的可访问方式包括语音输入，振动、语音输出反馈，然而对于盲人来说，发现智能终端上的功能并能有效的输入仍然是个很大的挑战。虽然现在的智能终端已经支持语音输入的命令，但是在嘈杂的环境里，智能终端很难分辨语音命令，因此这时的操作效率低下而且不准确。
　　随着触摸屏技术的不断发展，智能终端配备复杂的手势识别传感器。智能终端手势的研究受到更多的关注，也相信通过手势盲人可以更高效的操作智能终端。目前，在各个平台上如:iOS平台、Android平台等已经实现了盲人使用智能终端的手势操作。但是各个平台上的手势不尽相同，部分手势过于复杂，难以学习与记忆，不利于盲人操作智能终端。现在有更多的公司逐渐重视人文关怀，他们希望自己的产品能给盲人的生活和学习带来帮助。因此需要形成一定的手势操作规范帮助盲人操作智能终端。
　　基于以上原因提出盲人智能终端触摸屏手势操作的研究。研究内容主要包括三点:(1)确定盲人使用智能终端的基本系统手势需求，这些手势应该容易学习不会增加盲人的记忆负担。(2)在需求基础上设计手势操作规范，根据设计的规范开发接口原型，用来连接Android系统与其它应用软件。(3)进行验证实验，验证手势操作规范的易学性及接口原型的实用性。收集实验过程中的数据，以进行规范的修订和接口原型的改进。
　　研究过程中首先学习并借鉴iOS平台、Android平台及以永德软件为代表的盲人应用软件。学习它们的手势操作，根据这些手势设计盲人使用智能终端的系统手势操作规范。主要通过简单的点击，滑屏，摇晃来操作智能终端，手势操作成功后均以振动的方式提供反馈。根据设计的手势操作规范，开发手势操作的接口原型。
　　进行验证实验，让被测试者通过接口原型，使用研究中设计的手势操作智能终端。实验的结果证明了手势操作规范的易学性与接口原型的可用性。但仍然有很多不足之处，需要根据被测试者的反馈，修订手势操作规范，优化改进接口原型，为盲人更好的使用智能终端提供帮助。

目录

声明

摘要

第1章 绪论

1．1 研究背景和意义

1．1．1 研究背景

1．1．2 研究意义

1．2 研究内容和目标

1．2．1 研究内容

1．2．2 研究目标

1．3 本文工作和内容安排

1．3．1 本文的主要工作

1．3．2 本文的内容安排

第2章 国内外研究现状

2．1 概念界定

2．1．1 智能终端

2．1．2 触摸屏

2．1．3 手势

2．1．4 语音合成

2．2 盲人触摸屏手势操作研究

2．2．1 理论基础

2．2．2 手势设计

2．3 各平台盲人手势操作设计

2．3．1 iOS平台手势设计

2．3．2 Android平台手势设计

2．3．3 第三方应用软件手势设计

2．4 触摸屏交互方式手势研究

2．4．1 理论基础

2．4．2 手势设计

2．5 触摸屏手势识别研究

2．5．1 理论基础

2．5．2 手势识别

2．6 本章小结

第3章 相关核心技术

3．1 研究技术路线

3．2 Android平台手势API

3．2．1 Android平台手势介绍

3．2．2 Android平台手势API

3．3 Android平台摇晃、振动API

3．3．1 Android平台摇晃、振动介绍

3．3．2 Android平台摇晃、振动API

3．4 科大讯飞公司语音库

3．4．1 科大讯飞公司语音库介绍

3．4．2 科大讯飞公司语音库API

3．5 时间应用开发模式和框架

3．5．1 Hybrid App开发模式

3．5．2 AngularJS框架介绍

3．6 本章小结

第4章 手势操作规范及接口原型实现

4．1 手势操作规范介绍

4．2 接口原型介绍

4．3 接口原型的实现

4．3．1 接口原型的开发流程

4．3．2 单指操作接口

4．3．3 双指操作接口

4．3．4 摇晃、振动操作

4．3．5 使用语音合成API

4．4 时间应用软件开发

4．4．1 Hybrid App运行原理

4．4．2 基于Bybrid App模式应用软件开发

4．4．3 Native与Web Page的交互

4．5 本章小结

第5章 实验验证和结果分析

5．1 实验目的和方案

5．1．1 实验目的

5．1．2 实验方案

5．2 实验样本的选择和获取

5．2．1 实验样本的选择

5．2．2 实验样本的获取

5．3 实验的实施

5．3．1 实验准备

5．3．2 实验开始

5．3．3 实验结束

5．4 实验数据的处理和分析

5．4．1 实验定量数据的处理

5．4．2 实验定量数据的分析

5．4．3 实验访谈调查数据的处理

5．4．4 实验访谈调查数据的分析

5．5 实验的不足和建议

5．6 本章小结

第6章 总结和展望

6．1 本文工作总结

6．2 进一步研究工作展望

参考文献

致谢