当今社会科学技术的进步推动了人工智能的飞速发展,使之成为研究热点,它不断革新人与机器的互动方式。纵观科学技术发展史,每一次变革都伴随着交互技术的革新,鼠标和键盘打开了我们使用PC机时代的大门;触摸屏打开了我们移动互联时代的大门;语音交互、人脸识别、手势识别等多模态智能交互技术带我们走进全新的AI时代。本课程在制作过程中得到了中国工程院院士、中国人工智能学会理事长、北京联合大学机器人学院院长李德毅院士,中国人工智能学会智能驾驶专委会副主任、人工智能与机器人系列教材编委会主任、北京联合大学鲍泓教授等专家的指导和支持,课程将较全面地讲解智能交互技术及其应用,包括基本概念、智能交互原型设计、基于移动设备的智能交互软件开发、智能语音交互、交互技术设计与评价方法以及智能交互技术的前沿应用领域等内容,充分体现“智能+交互”。
本课程配有机械工业出版社出版“十三五”国家重点出版物规划项目教材《智能交互技术与应用》,并以自动驾驶作为主要应用场景介绍智能交互技术,设计了大量实践教学环节和习题,帮助同学们在学习完理论内容后进行复习并通过实践环节加深对智能交互技术的掌握与应用,特别适合智能科学与技术、人工智能、计算机科学与技术、软件工程、机器人工程、数字媒体等专业本科生学习,也可作为从事交互设计、人工智能应用、用户界面设计、移动软件开发等相关技术人员学习的课程。
课程主讲教师为北京联合大学机器人学院马楠、工科中心徐歆恺和智慧城市学院张欢,三位教师是学校无人车智能交互团队骨干成员,在交互设计与实现方面具有一定的科研和实践教学经验。
“智创未来,未来已来”,让我们张开双臂迎接人工智能时代,并衷心地希望同学们通过对《智能交互技术》课程的学习,学有所获。
为积极响应国家低碳环保政策, 2021年秋季学期开始,中国大学MOOC平台将取消纸质版的认证证书,仅提供电子版的认证证书服务,证书申请方式和流程不变。
电子版认证证书支持查询验证,可通过扫描证书上的二维码进行有效性查询,或者访问 https://www.icourse163.org/verify,通过证书编号进行查询。学生可在“个人中心-证书-查看证书”页面自行下载、打印电子版认证证书。
完成课程教学内容学习和考核,成绩达到课程考核标准的学生(每门课程的考核标准不同,详见课程内的评分标准),具备申请认证证书资格,可在证书申请开放期间(以申请页面显示的时间为准),完成在线付费申请。
认证证书申请注意事项:
1. 根据国家相关法律法规要求,认证证书申请时要求进行实名认证,请保证所提交的实名认证信息真实完整有效。
2. 完成实名认证并支付后,系统将自动生成并发送电子版认证证书。电子版认证证书生成后不支持退费。
第1章 人机交互技术发展
1.1 人机交互的历史和发展
1.2 智能交互的研究内容
1.3 智能交互技术与相关学科
第1章 知识点总结
第1章 课后作业
第2章 感知认知和交互技术
2.1 知觉和认知
2.2 输入/输出设备
2.3 交互技术
2.4 基于感知技术的人车交互
第2章 知识点总结
第2章 课后作业
第3章 交互设计准则
3.1 用户体验和交互设计流程
3.2 交互设计的原则
3.3 桌面软件
3.4 桌面系统应用界面设计原则
3.5 实验一:思维导图与产品功能设计
第3章 知识点总结
第3章 课后作业
第4章 交互原型设计
4.1 交互设计体系
4.2 交互原型设计工具简介
4.3 国内常用原型设计工具
4.4 实验二:手机App原型开发设计
第4章 知识点总结
第4章 课后作业
第5章 移动交互设计
5.1 本周内容概述
5.2 移动设备及交互方式
5.3 APP的界面设计风格
5.4 移动应用平台规范
5.5 实验三:H5轻应用交互
第5章 知识点总结
第5章 课后作业
第6章 移动终端的交互设计实战
6.1 Android系统简介
6.2 图形化编程开发Android程序
6.3 实验四:移动端网络接口调用的实现
6.4 实验五:移动端人脸检测
6.5 实验六:猪猪识别
第6章 课后作业
第7章 语音交互设计
7.1 语音交互简史
7.2 语音交互的优缺点
7.3 实验七:语音交互和语音合成
7.4 实验八:语音翻译App的制作
7.5 对话设计
7.6 实验九:图灵聊天机器人
7.7 实验十:对话交互
第7章 课后作业
第8章 智能交互技术的设计与评价
8.4 智能交互产品设计的质量评价
8.5 智能交互设计的测试
8.6 智能交互界面设计的评价
8.1 本章内容概述
8.2 智能交互技术设计思路
8.3 智能交互产品设计的相关因素
第8章 课后作业
第9章 智能交互技术前沿问题
9.1 智能交互前沿技术概述
9.2 无人驾驶中的交互认知
9.3 智能交互技术在智能网联汽车环境下的应用
9.4 基于云机器人平台的智能交互及其应用
9.5 实验11 虚拟仿真智能小车语音交互控制实验
第9章 课后作业
[1] 马楠,徐歆恺,张欢.智能交互技术与应用[M].北京:机械工业出版社,2019.
[2] 顾振宇著.交互设计:原理与方法[M].北京:清华大学出版社,2016年第1版.
[3] 李四达著.交互与服务设计:创新实践二十课[M] .北京:清华大学出版社,2017年第1版.
[4] 5 Trends Emerge in the Gartner Hype Cycle for Emerging Technologies, 2018[EB/OL]. [2019-02-28]. https://www.gartner.com/smarterwithgartner/5-trends-emerge-in-gartner-hype-cycle-for-emerging-technologies-2018/.
[5] 唐小成.增强现实系统中的三维用户界面设计与实现[D]. 电子科技大学, 2008.
[6] 董威,文艳军, 李暾,齐治昌. 软件工程专业在线课程建设思考[J].计算机教育, 2015(06): 51–55.
[7] 陈毅能.中国科学院大学, 2016. 基于生理计算的多通道人机交互技术研究[D]. 2016.
[8] 史忠植.认知科学[M].合肥:中国科学技术大学出版社, 2008.
[9] 黄希庭,郑涌. 心理学导论[M]. 北京:人民教育出版社, 2015.
[10] 认知(词语释义)_百度百科[EB/OL]. [2018-08-03]. https://baike.baidu.com/item/%E8%AE%A4%E7%9F%A5/1262721?fr=aladdin.
[11] Dean J. Monsters Illusion[J]. Mighty Optical Illusions, 2006.
[12] Bruner J S, Minturn A L. Perceptual Identification and Perceptual Organization[J]. The Journal of General Psychology, 1955, 53(1): 21–28.
[13] 郑南宁.认知过程的信息处理和新型人工智能系统[J]. 中国基础科学, 2000(08): 11–20.
[14] 你和小伙伴们是怎么被惊呆的?[EB/OL]. , 2013(2013-07-29)[2019-03-22]. https://tech.hexun.com/2013-07-29/156579849.html.
[15] 管连荣.美国著名心理学家H·A·西蒙教授来华访问[J].心理科学, 1982(1): 62–63.
[16] 秦裕林.认知心理学与计算机科学的研究与教学——介绍西蒙教授的认知心理学讲学[J].心理学动态, 1984(01): 63-64+48.
[17] 余淼.谈图形用户界面设计中的交互性信息传递[J]. 中国包装工业, 2015(06): 147.
[18] 李枫,徐韬. 智能语音交互技术在呼叫中心中的应用[J]. 2016电力行业信息化年会论文集, 2016: 5.
[19] 席乐.浅谈多点触摸技术在产品操作界面设计中的应用[J]. 科教导刊(上旬刊), 2013(03): 176–177.
[20] 马楠,高跃, 李佳洪,李德毅. 自驾驶中的交互认知[J].中国科学:信息科学, 2018(8).
[21] L Scapin D, Senach B, Trousse B, Pallot M. User Experience: Buzzword or New Paradigm?[J]. ACHI 2012 - 5th International Conference on Advances in Computer-Human Interactions, 2012.
[22] 丁一,郭伏, 胡名彩,孙凤良. 用户体验国内外研究综述[J].工业工程与管理, 2014(04): 92-97.
[23] 五步走,带你了解交互设计流程| 人人都是产品经理[EB/OL]. [2017-09-28]. https://www.woshipm.com/ucd/577334.html.
[24] Cooper A, Reimann R M. 软件观念革命[M].詹剑锋, 译,张知非, 译. 北京:电子工业出版社, 2005.
[25] 拿不定设计?让经典的尼尔森十大可用性原则帮你!(附案例)[EB/OL]. [2017-09-27]. https://www.uisdc.com/nelson-usability-design-principles.
[26] 设计基础:细说“十大可用性原则” | 人人都是产品经理[EB/OL]. [2017-09-27]. https://www.woshipm.com/ucd/730477.html.
[27] Wixon D. Book review: PRINCIPLES AND GUIDELINES IN SOFTWARE USER INTERFACE DESIGN by Deborah J . Mayhew (Prentice Hall, 1992)[J]. Acm Sigchi Bulletin, 1993, 25(2): 51–53.
[28] 是时候,聊一聊交互设计的知识体系了![EB/OL].简书[2017-10-03]. https://www.jianshu.com/p/7399791c5f8f.
[29] 赵佳,赵铭, 李昌华.分级网格服务的Apache ab测试分析[J].电子设计工程, 2009, 17(03): 22–24.
[30] 2018年,你一定要选对这些原型工具-UI中国-专业用户体验设计平台[EB/OL]. [2018-08-21]. https://www.ui.cn/detail/322892.html.
[31] 电商类Web原型制作分享——天猫[EB/OL]. [2019-03-21]. https://www.mockplus.cn/sample/post/1065.
[32] 所谓原型,是个什么东西?| 人人都是产品经理[J]. .
[33] 15款优秀移动APP产品原型设计工具| 人人都是产品经理[EB/OL]. [2018-06-24]. https://www.woshipm.com/rp/64741.html.
[34] 周剑辉,顾新建. 移动设备在工作流管理系统中的应用[J].机电工程, 2004(12): 42–45.
[35] 浅说移动端与pc端交互设计的区别||观点|shaozhurong - 设计文章/教程分享- 站酷 (ZCOOL)[EB/OL]. [2018-06-24]. https://old.zcool.com.cn/article/ZNTY4MTI0.html.
[36] Steven Hoober. How Do Users Really Hold Mobile Devices? :: UXmatters[EB/OL]. , 2013(2013-02-18)[2019-03-02]. https://www.uxmatters.com/mt/archives/2013/02/how-do-users-really-hold-mobile-devices.php.
[37] This Is How Far the Average Set of Thumbs Will Reach on the New iPhone 6 | HYPEBEAST[EB/OL]. , 2014(2014-09-20)[2019-02-23]. https://hypebeast.com/2014/9/realistically-this-is-how-far-the-average-set-of-thumbs-will-reach-on-the-new-iphone-6.
[38] 关于移动端和PC端的交互的区别- Erichain - 博客园[EB/OL]. [2018-06-24]. https://www.cnblogs.com/erichain/p/4678163.html.
[39] App界面设计风格| App界面交互设计规范[EB/OL]. [2017-10-08]. https://www.iamue.com/8754.
[40] 卡卡的人生哲学. App界面设计风格[EB/OL]. , 2015(2015-08-24)[2019-03-03]. https://www.woshipm.com/ucd/193763.html.
[41] Colour Assignment - Preferences[EB/OL]. , 2013(2013-03-23)[2019-03-01]. https://www.joehallock.com/edu/COM498/preferences.html.
[42] Themes - iOS - iOS - Human Interface Guidelines - Apple Developer[EB/OL]. [2018-10-06]. https://developer.apple.com/design/human-interface-guidelines/ios/overview/themes/.
[43] H5轻应用技术,未来无限可能[EB/OL]. [2018-06-24]. www.sohu.com/a/64107789_379442.
[44] 1.1 Android平台简介· App Inventor - 零基础Android移动应用开发[EB/OL]. [2018-06-24]. https://minghuiwu.gitbooks.io/appinventor/content/11_android_ping_tai_jian_jie.html. [45] 平台架构. Android Developers[EB/OL] .[2019-03-02]. https://developer.android.google.cn/guide/platform/
[46] 1.2 App Inventor简介 · App Inventor - 零基础Android移动应用开发[EB/OL]. [2018-06-24]. https://minghuiwu.gitbooks.io/appinventor/content/12_appinventor_jian_jie.html.
[47] 终极入门教程—— 5 分钟学会 App Inventor 2 - AppInventor汉化版[EB/OL]. [2018-06-24]. https://www.wxbit.com/?p=157.
[48] 人工智能:语音开启全新交互时代[EB/OL]. [2018-12-09]. https://www.cs.com.cn/gppd/hyyj/201705/t20170512_5280029.html.
[49] 语音革命元年来了:BBC、FT等媒体要点亮哪些全新技能树[EB/OL]. [2018-12-09]. https://new.qq.com/omn/20180312/20180312A07ECH.html.
[50] GUI和VUI到底有哪些区别?来看这篇超全面的总结! - 优设-UISDC[EB/OL]. [2018-12-11]. https://www.uisdc.com/gui-vui-differences.
[51] 「语音交互设计」之VUI简析| L-insights_用户[EB/OL]. [2018-12-11]. www.sohu.com/a/251671898_610473.
[52] 曾丽霞,康佳美, 孙甜甜,孙传祥. 语音办公助手VUI交互设计研究[J].工业设计研究(第六辑), 2018: 7.
[53] 语音识别的前世今生| 深度学习彻底改变对话式人工智能[EB/OL]. [2018-12-10]. https://www.cnetnews.com.cn/2017/0821/3097159.shtml.
[54] 语音识别技术里程碑:微软已将识别错误率降至5.1% - 语音识别,人工智能,微软研究院- IT之家[EB/OL]. [2018-12-12]. https://www.ithome.com/html/it/322227.htm.
[55] 微软语音识别词错字率低至5.9%,已达到人类专业速记员水平- 超能网[EB/OL]. [2018-12-10]. https://www.expreview.com/50100.html.
[56] 为什么说语音交互是未来的主流交互方式之一?| 人人都是产品经理[EB/OL]. [2018-12-10]. https://www.woshipm.com/pd/816580.html.
[57] 语音交互的基本概念和设计实践[EB/OL]. [2018-12-09]. https://www.woshipm.com/pd/1039577.html.
[58] 干货| IDC发布对话式人工智能白皮书[EB/OL]. [2018-11-12]. https://www.qianjia.com/html/2018-03/21_287657.html.
[59] 1.3 人机对话交互基础概念(1)简书[EB/OL]. [2018-12-17]. https://www.jianshu.com/p/f927075b5c47
[60] 程彬,陈婧, 乌兰.智能人机交互产品的服务设计思路探讨[J]. 设计, 2016(09): 156–157.
[61] Salvendy 董建明、傅利民、饶培伦、[希腊]CONSTANTINE STEPHANIDIS、[美]GAVRIEL.清华大学出版社, 2016. 人机交互:以用户为中心的设计和评估[M].第5版. , 2016北京: .
[62] 科大讯飞公布汽车产品布局战略:推出飞鱼OS和开放三大平台[EB/OL]. [2019-02-23]. https://www.sohu.com/a/271415691_122982.
[63] Pierre-Yves O. The production and recognition of emotions in speech: features and algorithms[J]. International Journal of Human-Computer Studies, 2003, 59(1): 157–183.
[64] Turk M. Springer US, 2014. Gesture Recognition[G]//IKEUCHI K. Computer Vision: A Reference Guide. , 2014Boston, MA: : 346–349.
[65] Wang J J, Singh S. Video analysis of human dynamics—a survey[J]. Real-Time Imaging, 2003, 9(5): 321–346.
[66] Yang M-H, Kriegman D J, Ahuja N. Detecting Faces in Images: A Survey[J]. IEEE Trans. Pattern Anal. Mach. Intell., 2002, 24(1): 34–58.
[67] Duchowski A T. A breadth-first survey of eye-tracking applications[J]. Behavior Research Methods, Instruments, & Computers, 2002, 34(4): 455–470.
[68] Jaimes A, Sebe N. Multimodal human–computer interaction: A survey[J]. Computer Vision and Image Understanding, 2007, 108(1): 116–134.
[69] Porta M. Vision-based user interfaces: methods and applications[J]. International Journal of Human-Computer Studies, 2002, 57(1): 27–73.
[70] Duric Z, Gray W D, Heishman R, Rosenfeld AND A, Schoelles M J, Schunn C, Wechsler H. Integrating perceptual and cognitive modeling for adaptive and intelligent human-computer interaction[J]. Proceedings of the IEEE, 2002, 90(7): 1272–1289.
[71] Dondi P, Lombardi L, Porta M. Development of gesture-based human–computer interaction applications by fusion of depth and colour video streams[J]. IET Computer Vision, 2014, 8(6): 568–578.
[72] 刘心雨.交互界面设计在虚拟现实中的研究与实现[D]. 北京邮电大学, 2018.
[73] 郭莹洁.关于虚拟现实技术人机交互的研究[J]. 信息记录材料, 2018, 19(08): 247–248.
[74] 田远霞.浙江大学, 2015. 增强现实下多通道交互模型研究与实现[D]. , 2015.
[75] Malkawi A M, Srinivasan R S. ACTA PressMultimodal Human-Computer Interaction for Immersive Visualization: Integrating Speech-Gesture Recognitions and Augmented Reality for Indoor Environments[C]//.
[76] 赵永惠.人机交互研究综述[J]. 信息与电脑(理论版), 2017(23): 24-25+28.
[77] 赵沁平.虚拟现实中的10个科学技术问题[J].中国科学:信息科学, 2017, 47(06): 800–803.
[78] Huisman D, Freling R, Wagelmans A P M. A Robust Solution Approach to the Dynamic Vehicle Scheduling Problem[J]. Transportation Science, 2004, 38(4): 447–458.
[79] Colijn P, Herbach J S, Mcnaughton M P. 2017-08-15Determining pickup and destination locations for autonomous vehicles: 中国, 9733096[P]. , 2017.
[80] 苏景颖.关于智能汽车车联网系统分析[J]. 时代汽车, 2018(02): 125–126.
[81] 浅谈车联网的应用场景及发展趋势_车联网功能_车联网体系结构-电子发烧友网[EB/OL]. [2019-02-23]. https://m.elecfans.com/article/603252.html.
[82] 王世宝.基于5G技术车联网的发展趋势及应用前景分析[J].时代汽车, 2018(06): 169–170.
[83] Kehoe B, Matsukawa A, Candido S, Kuffner J, Goldberg K. Cloud-based robot grasping with the google object recognition engine[C]//2013 IEEE International Conference on Robotics and Automation. , 2013: 4263–4270.
[84] 赵连翔,王全玉, 贾金苗,陆峥玲. 机器人云操作平台的实现研究[J].华中科技大学学报(自然科学版), 2012(S1 vo 40): 161–164.
[85] 交互设计快速检查清单Interaction Design Quick Checklist[EB/OL]. [2017-10-05]. https://www.iamue.com/18702.
[86]中国互联网的今年和明年,你必须知道这些事[EB/OL]. [2019-08-25]. www.sohu.com/a/118096152_358836.
Q : 课程是否会涉及大量编程,没有编程基础可以学习吗?
A : 课程会涉及一些零门槛的图形化编程,不需要任何编程基础。
Q : 课程会涉及python编程,深度学习调参之类的吗?
A : 课程不涉及python编程。会涉及少量深度学习的内容,但也以调用第三方平台为主。
Q : 课程会涉及人工智能打游戏吗?我想学。
A : 抱歉,不涉及呢。
Q : 课程会有什么有趣的实验吗?
A : H5海报、人脸识别、语音互动、自已训练出一个猪八戒识别系统、智能交互仿真车控制……
Q : 本课程的制作目的和受众是怎样的?
A : 课程主要针对高校低年级学生,没有编程门槛的限制,非计算机专业学生一样可以学习。本课程以思维训练为主,编程和技术并非我们考量的主要目标。