专访简仁贤：如何用情感交互拯救智障的机器人？AI英雄( 二 )

在人脸识别方面，除了9种情绪之外，竹间智能还对人脸做了22种属性的识别，包括性别、肤色、皮肤质量、头发颜色、是否戴眼镜、长发还是短发、哪种胡子、年龄等等。
简仁贤称，皮肤质量公司最新做的人脸属性，可以识别斑点、黑斑、痘痘、黑眼圈、深皱纹、浅皱纹、晒伤、红斑、油性皮肤、干性皮肤等等，这部分已经得到了应用。
除了在人脸上进行情绪识别和属性的开发之外，竹间智能还做了22种语义的情绪（基于文字）和4种声音的情绪（基于声音）。人脸表情、语义文字、语音声波，三种情绪识别融合在一起构成了竹间智能最核心的情绪情感识别技术。
在数据积累上，简仁贤称情绪情感的数据是买不到的，市面上多是一些只能做正负向两个维度情绪的数据。为此，竹间智能除了少部分用公用数据外，大多数都是自己采集，从爬数据、清洗、标注，累积了大量的数据、数据集、训练集、测试集，以及算法的迭代。“因为情感情绪是非常难标注的，所以我们累积了两年，拥有超过100万张精确标准过的人脸。”简仁贤表示。
基于情感情绪做人机交互，这条路走得通吗？
情绪情感的识别理解是竹间智能的核心技术，在此之上，简仁贤把公司定位一家人机交互公司。
“竹间智能不是图像公司、也不是语义公司，而是基于情感情绪的人机交互公司。”简仁贤这样给自己的公司定位。
在简仁贤看来，要做到好的人机交互，必须要从人脸视觉上、语音识别、文字理解上都做到情绪情感的理解，并把三者融合起来。“只有这样才能让机器人，甚至是AI交互技术实现突破，实现深层的人机交互和理解。”
”在人脸识别方面，我们着重的是对于人脸的理解，有别于其它的视觉公司是做安防、人脸验证、刷脸等技术。“简仁贤称，竹间智能在人脸识别上只做情绪情感，其商业模式是在人脸识别上提供情绪情感的辨识和决策。
简仁贤表示，情绪情感的识别对机器人的语音识别、语义理解方面也有很大帮助。“我们有很多合作伙伴提供语料，都是用户讲了一大堆事情，关键词就超过十个，按照传统的方式无法匹配，还要让用户一遍遍地去做选择题。我们的做法是首先辨别情绪，如果情绪极端不满，不管你讲什么，先安抚和道歉，之后我再去判别你的意图。”
“比如说在机场的场景上，乘客可能会问“北京到上海的这个班机在哪里值机？”如果机器人通过摄像头识别出乘客很慌张，后台马上帮忙查询航班，然后可能会先安抚乘客别着急，还有一个半小时才起飞，时间还来得及，我帮您查到了，是在XX号值机窗口，从这边往右转。。。。简仁贤认为，这才是真正的人机交互。
机器人根本听不懂你在说什么？问题在上下文理解和记忆
对于目前人机交互最难的语义理解技术，简仁贤也发表了自己的看法。他说，当下很多对话机器人或聊天机器人也好，或者是QA问答系统也好，其实它是不理解语义的。
“比如说你跟机器人讲，某某明星好丑啊，然后机器人就说，是啊很丑。可是他不知道你是在讲谁。如果我把某某明星换成敏感人物，形象、性别敏感的人物，这样的就会造成言论的错误。”简仁贤表示，如果只是随便抓一条语料来回这个话，就很容易造成当下的一问一答关健词的回话。”仅依靠关键词匹配和后台搜索是做不好语义理解的，它只会导致聊天的效果是不可控的，失去了人机交互的黏性。“简仁贤揭了bot们的底。
简仁贤认为，语义理解应该是包括上下文的理解和记忆两部分。由上下文和记忆的理解再来理解情绪情感，然后识别意图，才有办法得到一个理解的结果。只有真正理解每句话的意图，机器人才有办法判断如何回话。