它主要是为了帮助聋人与不懂得手语的人进行交流。系统功能主要包括两个方面：一方面，它可以对聋人的手语进行识别，然后翻译成相应的语音或文字并计算机输出，另一方面，它可以将语音或者文字转化为相应的手语并用计算机图形显示。到目前为止，已有很多使用新一代交互技术的产品应运而生，如谷歌（Google Glass）、微软（Microsoft Kinect）等。

根据输入信息的方式不同，目前的手语识别技术可以分为基于穿戴式手语识别和基于计算机视觉手语识别两种。基于穿戴式手语识别是利用特制的数据手套、位置跟踪器来提取手的形状、位置、方向、运动轨迹等信息，对手势和动作，包括脸部表情进行识别和翻译。基于计算机视觉的手语识别是指用摄像机获取手语的视频和图像，然后利用图像处理、模式识别等相关领域的技术和算法，对手语进行识别。