0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

姚小熊27 ? 来源:爱集微 ? 作者:爱集微 ? 2020-10-12 13:45 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

华为发明的机器人凝视追踪技术,通过显示模块来模拟真实的机器人面部输出,结合多种偏转角度测量方法,实现了平滑的凝视追踪效果,提高了机器人的拟人化程度。

集微网消息,在现代社会的家庭中,越来越多的父母不能时刻陪伴孩子,而此时可以使用智能机器人进行陪伴以及教育孩子。这种智能机器人可以与孩子进行交流,并且可以基于不同的对话内容学习、更新与孩子的交流方式,可以说非常的人性化。

拟人特性作为衡量机器人智能化的重要指标之一,在人机交互的过程中,目标跟随以及凝视跟踪行为的准确性则直接反映机器人的拟人化程度,技术人员往往通过提高机器人的拟人化程度来提高用户的使用体验。

而所谓的凝视追踪技术,就是在机器人和用户进行对话时捕捉用户的眼睛位置并进行凝视,因为人们在谈话时往往看着对方的眼睛,如果机器人也可以采用这样的技术,将会极大的提高其拟人化程度,并且带给用户极佳的交流体验。

为了实现这个目的,华为在5月8日申请了一项名为“一种机器人的控制方法、装置、机器人以及存储介质”的发明专利(申请号:202010382291.0),申请人为华为技术有限公司。

根据该专利目前公开的资料,让我们一起来看看华为的这项凝视追踪技术吧。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

如上图,为该专利中发明的机器人示意图,其中包括具有模拟人形形态的a型机器人、模拟动物形态的b型机器人以及非生物形态的c型机器人,这些机器人虽然形状各异,但是均具有运动功能,可以进行移动以及旋转等运动操作,其具体控制方法的实现如下图所示。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

可以看到,控制机器人运动的过程分为三步,首先需要获取目标对象的位置信息,其次根据这个位置信息来控制机器人转动。这个相对位置可以通过自动识别或者手动设置来确定,它是机器人与目标对象之间的相对位置,例如正前方、右侧等,也可以是具体多少角度的偏转,例如+60度或者-120度等。

有了相对位置信息后,机器人会根据自身的初始角度以及目标对象的位姿确定目标偏转角度,例如人形机器人可以以其面部为正面。为了实现凝视追踪的目的,可以将目标偏转角度设置为机器人看向的方向,这样就可以使得机器人的视线对准目标对象,从而完成凝视追踪。

并且值得一提的是,该专利采用显示模块的输出画面来完成凝视,这相比于马达驱动的硬件凝视具有更高的响应度,利用这种模拟的凝视界面,可以很好的实现平滑凝视追踪效果。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

具体的应用案例如上图所示,这是专利中提供的目标偏转角度的获取示意图,左侧为机器人,右侧为真人,对于凝视追踪而言,最重要的就是将机器人的视线与目标对象的视线进行交汇,即处于同一平面内,因此机器人需要确定自身当前的视线方向以及目标对象的视线方法,并且可以基于两个视线方向确定偏转角度。

该专利提供了三种技术用于确定这个偏转角度:基于距离传感器、基于拍摄图像以及基于语音信号的方式。基于距离传感器的方法就是通过距离探测单元采集的距离值构建机器人所处场景下的深度图,基于深度图来确定当前场景包含的对象,并根据目标的轮廓线来确定目标对象。

基于拍摄图像的方法是通过轮廓识别算法提取该场景图像内包括的轮廓信息,并基于轮廓信息对场景图像进行划分,通过主体类型识别来确定目标对象。而基于语音信号的方法则是基于语音分析结果来确定是否有激活口令,通过口令来确定目标对象。

这三种方式都可以用于完成凝视追踪,并且可以利用多种方法进行组合的方式来提高凝视追踪的准确率。此外,基于拍摄图像的方法还需要对摄像模块上采集的图像进行校准,从而在后续的凝视追踪时,可以使得机器人的眼部视线偏移到目标对象的中心位置。

以上就是华为发明的机器人凝视追踪方法,通过确定机器人与目标之间的偏转角度,并不断调整显示模块的输出内容以及旋转部件来实现凝视追踪。此外,该技术基于三种确定偏转角度的方法,无需借助马达来驱动硬件,响应时间较短,不仅实现了平滑凝视追踪行为,也提高了机器人的拟人化程度。
责任编辑:YYX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    29939

    浏览量

    214455
  • 华为
    +关注

    关注

    216

    文章

    35293

    浏览量

    256986
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    工业机器人的特点

    是实现工业互联网的基础,也是第一步。 三大优势:提高产品品质、提高产出、适用范围广 机器人在生产上的优势可以分为提高产品品质、提高产出以及适
    发表于 07-26 11:22

    盘点#机器人开发平台

    地瓜机器人RDK X5开发套件地瓜机器人RDK X5开发套件产品介绍 旭日5芯片10TOPs算力-电子发烧友网机器人开发套件 Kria KR260机器人开发套件 Kria KR260-
    发表于 05-13 15:02

    【「# ROS 2智能机器人开发实践」阅读体验】机器人入门的引路书

    ROS的全称:Robot Operating System 机器人操作系统 ROS的 目的 :ROS支持通用库,是通信总线,协调多个传感器 为了解决机器人里各厂商模块不通用的问题,让机器人快速开发
    发表于 04-30 01:05

    什么是机器人追踪机器人技术的发展和未来

    是一个可编程的机器,能够感知,处理信息,并自主或在一定程度上的人类指导下执行任务。与传统工具不同,机器人可以适应周围环境,并经常执行重复或危险的工作,让我们有时间从事更具创造性的工作。有一种常见的误解,即
    的头像 发表于 04-24 19:21 ?1420次阅读

    机器人Blue亮相 搭载英伟达最新GR00T N1机器人通用基础模型

    GR00T N1以及新的数据生成和机器人学习框架,我们将共同开启AI时代的新边疆。” 黄仁勋还强调其泛化能力和多任务执行潜力?。 机器人Blue由英伟达公司、谷歌DeepMind、迪士尼联合开发,行走动作流畅自然,声音设计可爱,具备
    的头像 发表于 03-20 10:50 ?1193次阅读
    <b class='flag-5'>机器人</b>Blue亮相 搭载英伟达最新GR00T N1<b class='flag-5'>人</b>形<b class='flag-5'>机器人</b>通用基础模型

    海康机器人布局关节机器人业务

    关节机器人领域迎来一位实力选手。继布局移动机器人机器视觉业务后,海康机器人正在拓展新的产品线。
    的头像 发表于 03-20 10:47 ?827次阅读

    大象机器人推出首款三指灵巧手myGripper H100

    在人工智能与机器人技术飞速发展的当下,人形机器人具身智能研究正成为科技领域的前沿热点。随着人形机器人的应用场景不断增多,如何使人形机器人实现更加拟人
    的头像 发表于 01-21 11:54 ?798次阅读
    大象<b class='flag-5'>机器人</b>推出首款三指灵巧手myGripper H100

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    ,一次生成深度信息。 自主机器人定位任务的本质是对机器人自身状态的估计问题,包括位置,朝向,速度等问题。 路径规划旨在找到从起点到目标区域的路径,确保路径的可行性和最优性。路径规划方法包括变分
    发表于 01-04 19:22

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    引入GPT这样的大模型后,情况发生了根本性的变化。只需提供适当的提示词以及封装好的机器人函数库,大模型便能灵活地生成控制代码,极大地简化了开发过程,并提高了自动化水平。 此外,大模型凭借强大的推理能力
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    现状和前沿研究,详细介绍大模型的构建方法、训练数据、模型架构和优化技术。 第4部分(第10章到第13章)深入探讨提升机器人计算实时性、算法安全性、系统可靠性及具身智能数据挑战的具身智能机器人系统研究
    发表于 12-28 21:12

    《具身智能机器人系统》第7-9章阅读心得之具身智能机器人与大模型

    将自然语言理解与运动规划融为一体。这种端到端的方法使机器人能够直接从人类指令生成动作序列,大幅简化了控制流程。该项目的工作流程包含设计并封装一个人机器人函数库、编写清晰地描述提示词、在仿真环境中执行
    发表于 12-24 15:03

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    机器人领域货币化的重要工具,在互联网领域,公司主要将用户数据用于定向广告和个性化内容。这种有针对性的方法不仅可以增加销售额,还可以提高用户参与度,从而导致更高的订阅费用或增加使用量。同时,在EAI领域
    发表于 12-24 00:33

    【「具身智能机器人系统」阅读体验】+初品的体验

    提高机器人的自适应性和自主性,赋能机器人在多种场景中的应用。例如在家庭自动化领域,具身智能机器人能够感知家庭成员的日常习惯和需求,自动执行清洁、整理或其他家务任务。它们通过观察家庭成员
    发表于 12-20 19:17

    鸿蒙机器人与鸿蒙开发板联动演示

    鸿蒙机器人与鸿蒙开发板联动演示,机器人的角色为迎宾机器人,开发板负责人宾客出现监听
    发表于 12-02 14:55

    国内外部分人形机器人企业一览

    人形机器人的定义人形机器人是一种仿生机器人,指形状及尺寸与人体相似,能够仿人类运动、表情、互动及动作的机器人,并具有一定程度的认知和决策智能
    的头像 发表于 10-22 17:05 ?1945次阅读
    国内外部分人形<b class='flag-5'>机器人</b>企业一览