随着车联网的各个方面越来越多地进入我们日常生活的许多方面，用户正在与汽车之间进行多模式互动。目前，在移动互联网的背景下，利用物联网与汽车智能化技术，多模式交互技术已经被识别和试验来适应汽车环境。
现在，基于语音的交互与视觉、触觉界面的交互较为引人注目，但它仅仅是我们在当今汽车中以多模式交互方式的一部分。事实上，汽车制造商正致力于研究多模式交互，从而满足人们对于汽车安全和科技感的追求。
多模式交互概念
多模式交互是为用户提供多种与系统交互的模式。多模式系统可以处理两种或多种组合用户输入模式，如文字、语音、视觉、动作、环境、触摸和多媒体系统输出协调一致的学习。
通过多种方式进行人机交互，充分模拟人与人之间的交互方式。这一交互方式复合机器人类产品的形态特点和用户期待，打破了传统PC式的键盘输入和智能手机的点触式交互模式。多种模式旨在共同工作，使互动更多直观和自然。
多模式交互分类
多模式交互大致可以分为3类。多模态输入的融合使用一种模式的优势来弥补其他设计时间和运行时间等缺点。
-
顺序多模式：意味着用户必须在交互模式之间切换，但不能一起使用模式。
-
同时多模式：允许用户一次使用多种模式与系统进行交互。例如：在路径查找器应用程序中，用户可以使用触摸在屏幕上的地图上指示两个位置，并说“显示从这里到这里的最快路线”。
-
输入/输出模式：多模式交互围绕具有某些模式，采用各种形式输入（视觉、触觉、语音），将它们无缝地组合在一起，处理并以一种或另一种输出模式（文本、音频、学习）给出反馈或输出。
车载多模式交互的必要性
1. 减少驾驶员分心
分心驾驶是任何可能会将人的注意力从主要活动驾驶任务分离的行为。所有分心都会危及司机，乘客和旁观者的安全。这些分心的类型包括：
-
使用手机或智能手机，发短信
-
调整车内设施，如车窗
-
吃喝
-
与乘客交谈
-
梳理
-
阅读，包括地图
-
使用导航系统
-
观看视频
-
调整收音机，CD播放机或MP3播放器“
-
驾驶员疲劳驾驶
-
心情不佳，导致状态不加，容易分心走神
2. 减少认知负荷
由于驾驶员对于很多功能理解欠缺。人的工作记忆的容量有限，一次只能存储5-9条基本信息。所以，在使用过程中一次只能处理2-3条信息，从而减少了一次处理的信息数。因此，急需有多模式交互系统做相关提醒和建议。比如说ADAS系统的应用。
△ADAS系统
车载多模式交互的应用和研发
尽管近年来多模式交互系统取得了重大进展，但在复杂的多模式交互成为普遍现象之前，还有许多工作要做。目前，汽车行业主要是在语音交互、HUD、触摸屏等方面的研究比较多。但是下一代人机交互（HCI）设计需要包含能力识别用户，在很多情况下，人机交互将更加注重情感交流和未来科技的研发。
1. 在方向盘上结合语音和手势
通过使用语音识别功能，我们利用汽车中物体的可见性（例如镜像）以及简单访问等功能。使用手势进行操作，我们提供简单的控制，即时反馈并轻松撤消操作。
2. 多模式情感智能界面设计
基于深度神经网络的机器人行为多模态综合学习，在每次驱动之前，使用屏幕校准注视矢量必须根据每个驾驶员的身高和位置进行验证。多模态情绪识别框架，结合了驾驶员的脑电波和眼球运动。开发智能车载系统，提供实时帮助或回顾性反馈以减轻基于驾驶员状态/行为以及交通的分心。
3. 车载HUD原型手势识别界面
汽车内的各种信息娱乐设备的通知能够集中在一起，从而使驾驶员专注开车，而无需将注意力放在仪表盘和中控。移动通信和导航数据识别能够更好的获取道路交通情况。
5.全息技术的应用
全息技术在之前的文章里已经有所陈述，在这里就不一一介绍了。
6. 多主体多通道交互模型
在进行基于汽车的交互设计与用户界面设计之前，有必要建立一个新的交互模型，即基于汽车的多主体多通道交互模型。
7. “Put That There”
put that there 是麻省理工学院建筑机器组实施的语音和手势互动系统。它允许用户在大型视频显示器上构建和修改图形数据库。这项研究的目标是与复杂的计算机交互的简单对话界面。
8. 汽车安全注意事项
目前，电子安全是所有人关心的主要问题之一。黑客，反社会组织可能针对自动车辆和智能系统采取行动，从而导致交通问题和事故。因此，确保汽车收到的信息不侵犯个人隐私是首要责任。
车联网的技术发展给我们的研究提供了跨学科、跨领域的新可能性，在以汽车为中心的移动信息平台的框架下，多模式交互方式给今后的汽车设计又提出了新的挑战。
参考： humancarinteraction：MULTIMODAL INTERACTION Richa Mittal：In-vehicle Multimodal Interactionan Approach to Mitigate Driver Distraction Wei-Long Zheng ：EmotionMeter: A Multimodal Framework for Recognizing Human Emotions KuniakiNoda：Multimodal integration learning of robot behavior using deep neural networks Vikicfp:MMAutomotive 2018 : Multimodal Interaction in Automotive Applications
本文来源：pursuerHMI设计
未来汽车内的每一个表面都可以是智能表面，包括门饰板、仪表板、方向盘、天窗模块、照明系统等等，这些表面现已由装饰作用向机电一体化用户界面发展。现在智能表面技术正处于市场导入及成长阶段，发展潜力巨大，如何把智能表面技术做到更好，需要主机厂、方案设计、零部件供应商、材料企业等的共同努力，现艾邦建有汽车智能表面微信群，长城、一汽、长安、绿驰、东风、大陆、敏实、科世达、库尔兹、日写、东丽等企业均已加入，欢迎产业链上下游的朋友入群探讨，共谋进步。
推荐阅读：
活动推荐：
汽车智能表面高峰论坛
Automotive Smart Surface Industry Forum
时间：2018 年7月12~13 日
地点：上海汽车城-昆山维景国际酒店
（花桥镇花桥国际商务城兆丰路2号，步行5分钟可达上海地铁11号线安亭站）
论坛议题&嘉宾（拟邀请）：
|
序No. |
议题 Topics |
演讲嘉宾Speakers |
|
1 |
汽车智能表面产业链分析Automobile Smart Surface Industry Chain Analysis |
艾邦高分子：江耀贵Aibang CEO |
|
2 |
平板显示及在交通系统中的应用Flat panel display and its application in traffic system |
复旦大学：谷至华Fudan Professor & Ph.D. |
|
3 |
宝龙油墨的汽车智能表面解决方案Proell Ink Automotive Smart Surface Solution |
德国宝龙油墨：吴张永Proell Manager & Ph.D. |
|
4 |
汽车智能驾驶舱的发展趋势Development Trend of Intelligent Car Cockpit |
吉利集团：刘景林Geely new business strategy Director |
|
5 |
汽车智能表面技术探索与案例分享Intelligent Surface Technology Exploration and real project Sharing |
长安汽车：秦宇志Changan Auto Development Director |
|
6 |
汽车触控解决方案介绍Automotive Touch Solutions iinroduction |
赛普拉斯：宫江海Cypress Marketing manager |
|
7 |
智能表面3D图案变形控制技术Smart Surface 3D Pattern Deformation Control Technology |
浙江工业大学：董星涛ZJUT Professor |
|
8 |
基于智能语音的多模态车载体验新范式A New Paradigm of Multimodal Vehicle Experience based on Intelligent Voice |
阿里巴巴集团：王一行Alibaba group Senior UX designer |
|
9 |
碳纳米棒在汽车智能表面的应用Application of Carbon Nanorods in Smart Car Surfaces |
CANATU：颜国义Canatu Greter China sales Director |
|
10 |
光学微纳纹理在汽车CMF方面的新技术介绍Introduction of new technologies for optical micro-nano texture in automotive CMF |
苏州印象镭射科技有限公司：胡祖元GZ laser CEO |
|
11 |
KURZ汽车智能表面的实施案例KURZ car smart surface implementation case |
库尔兹：Kenny LAMKURZ Markteting Director |
|
12 |
集成功能和装饰的表面处理工艺技术Integrated functional and decorative surface treatment process technology |
上海科世达：范良照Kostal New process technology supervisor |
|
13 |
纳米银线在触控柔性方面及汽车智能表面的应用Application of nanosilver wire in touch flexibility and automotive smart surface |
C3nano：陈晓峰C3Nano Director& Ph.D. |
|
14 |
光学贴合在汽车LCD以及智能表面的应用Optical bonding on Automotive LCD and Smart Surface Applications |
伟亚光电：刘年虎VIA sales Director |
|
15 |
AFHC技术在汽车内外饰的抗指纹抗划伤应用 Application of AFHC Technology in Anti-fingerprint and Anti-scratch of Automobile |
智宇创鑫 熊何宇 市场总监Zhiyu Markteting Director |
|
16 |
薄膜技术在汽车智能表面的应用Application of Film Technology in Intelligent Car Surfaces |
Opening（IML/IMD、TOM supplier) |
|
17 |
FIM工艺在汽车智能表面的开发应用Development and Application of FIM Process in Intelligent Car Surface |
Opening (FIM or foil supplier) |
|
18 |
造车新势力对汽车智能表面的理解和需求New car builders understand and demand smart car surfaces |
Opening (新造车势力:NIO…) |
|
19 |
高压成型机在汽车智能表面的应用Application of High Pressure Molding Machine in Smart Car Surface |
Opening(HPF供应商) |
报名联系人：
方式1：在线报名
方式2：请加微信并发名片报名；
徐小姐：18617020032ab020@polytpe.com
江先生：18666186648 jyg@polytpe.com
仇小姐：15013545762 ab025@polytpe.com
阅读原文，即可报名
始发于微信公众号： 艾邦高分子
English 
Chinese