0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

解锁机器人视觉与人工智能的潜力,从“盲人机器”改造成有视觉能力的机器人(上)

东胜物联 ? 2024-10-12 09:56 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

→点击右侧栏头像,进入我的电子发烧友主页咨询

正如人类依赖眼睛和大脑来解读世界,机器人也需要自己的视觉系统来有效运作。没有视觉,机器人就如同蒙上双眼的人类,仅能执行预编程的命令,容易碰撞障碍物,并犯下代价高昂的错误。这正是机器人视觉发挥作用的地方,它赋予机器“看”并解释周围环境的能力。通过使用相机作为“眼睛”和高级AI作为“大脑”,机器人视觉为机器人提供了感知环境、智能移动、实时反应和执行复杂任务所需的能力。在本文中,我们将深入探讨构成机器人视觉的组件,探讨它与计算机视觉的区别,并揭示AI如何将这项技术转变为真正革命性的存在。

什么是机器人视觉?

尽管机器人和视觉技术已存在多年,但将两者结合却创造了一个动态的组合,极大地增强了机器人的能力。根据美国制造工程师学会机器视觉分会的定义,机器人视觉是指通过光学设备和非接触式传感器自动接收和处理真实物体图像的设备。这个定义不仅限于相机——例如,激光雷达(LiDAR)传感器也属于这一范畴。本质上,机器视觉使机器人能够复制人类的视觉能力,使它们能够承担制造业及其他领域中的复杂、乏味和关键任务。

机器人视觉的核心在于通过视觉数据感知和解释周围环境,这些数据通常通过相机或图像传感器收集。这个领域融合了计算机视觉、机器学习和机器人学的元素,以实现动态环境中的对象识别、导航和操控等基本功能。机器人视觉通常涉及图像采集(使用二维、三维或深度相机捕捉信息)、通过高级算法(包括深度学习)进行处理和分析,以识别物体或动作。此外,机器人还经常将视觉系统与其他传感器(如LiDAR)结合使用,以创建详细的地图并利用同时定位与地图构建(SLAM)技术确定自身位置。机器人视觉的应用横跨各个行业,从自动驾驶汽车和无人机工业机器人和服务机器人,推动了质量控制、自主导航和物体处理等领域的创新。

agv-products.jpgAGV机器人产品示意图

机器人视觉的组成部分

机器人视觉需要硬件进行数据采集和软件进行处理。

硬件

硬件组件包括以下几个部分:

镜头:捕捉图像并控制呈现给传感器的光量。

图像传感器:拥有数百万个光敏像素,用于将捕捉到的光转换为电信号,然后传输到芯片进行处理(传感器中的像素越多,图像越清晰)。

图像采集卡:包含将传感器产生的电信号转换为数字图像所需的硬件,包括芯片。

I/O单元:这些硬件组件(传感器和采集卡)必须通过串行通信等方式相互传输信号数据。

控制设备:就像人类眼睛移动以观察不同位置一样,这些视觉系统也需要控制设备来调整相机以获得更好的视野(如果是人形机器人,头部也应可控以改变视野)。

照明:相机在光照不足的情况下表现不佳,因此这一组件对于在低光条件下提高可见性至关重要。

图像传感器和镜头构成了视觉系统中的相机,其质量取决于像素数量。硬件的整体质量、通信和协调也是使系统无缝运行的关键。先进的机器人视觉系统采用传感器融合以获得对周围环境的更好理解,因此有些系统可能配备了激光雷达、雷达和超声波传感器以改善视觉效果。另一种可以增强视觉的硬件组件是3D视觉传感器(立体视觉),因为它能提供前方物体的高精度距离测量。

软件

图像采集卡中的软件负责将传感器产生的电信号解码为数字图像,并确定前方情况。除了图像和信号处理外,其他计算机算法由AI驱动。

如前所述,机器视觉试图模仿人类,因此从捕获的图像中获取有意义信息的最佳方式是通过智能,尽管在这里是人工智能。这些AI算法包括:

语义分割:这种深度学习算法将RGB图像分割,并将每个像素与图像中的一个类别或标签相关联,以实现精细感知。

语义识别:智能地识别图像像素中的对象类别和人物,以理解前方环境。

语义SLAM:SLAM是同时定位与地图构建的缩写,是一种利用语义信息构建环境地图以实现自我定位的深度学习算法。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    29829

    浏览量

    213544
  • 机器视觉
    +关注

    关注

    163

    文章

    4603

    浏览量

    123139
  • 嵌入式主板
    +关注

    关注

    7

    文章

    6104

    浏览量

    36363
  • AGV
    AGV
    +关注

    关注

    27

    文章

    1444

    浏览量

    42474
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    工业机器人的特点

    点焊机器人、切割机器人可以完成危险的电焊、切割工作;搬运机器人搬运有害物料。近年来制造业工人工资不断攀升,而由于高危行业除了高企的工人工资还
    发表于 07-26 11:22

    盘点#机器人开发平台

    图,电子技术资料网站具身智能机器人****开发平台——Fibot广和通发布机器人开发平台-电子发烧友网NVIDIA Isaac 英伟达综合性机器人开发平台NVIDIA Isaac 是英
    发表于 05-13 15:02

    【「# ROS 2智能机器人开发实践」阅读体验】视觉实现的基础算法的应用

    的有效途径。 结语 本书第7章和第8章内容系统性强,基础理论到代码实践,为读者提供了机器人视觉与SLAM的完整知识框架。未来,我计划结合书中案例,进一步探索多传感器融合、自主导航等高级应用,争取在
    发表于 05-03 19:41

    【「# ROS 2智能机器人开发实践」阅读体验】机器人入门的引路书

    的非常好的,特别是一些流程图,很清晰的阐释了概念 很适合作为初学者入门的引路书 还能了解很多技术和框架,破除初学者的自负困境,让初学者知道功能是由很多开发者维护的,前人已经为各种产品搭建了完善的框架。避免陷入得一个单打独斗的错觉 一直蠢蠢欲动ros2和机器人的同学,
    发表于 04-30 01:05

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    具身智能机器人的基础模块,这个是本书的第二部分内容,主要分为四个部分:机器人计算系统,自主机器人的感知系统,自主机器人的定位系统,自主
    发表于 01-04 19:22

    【「具身智能机器人系统」阅读体验】+两本互为支持的书

    之极。 《计算机视觉之PyTorch数字图像处理》为《具身智能机器人系统》提供了感知和识别能力,而《具身智能
    发表于 01-01 15:50

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    近年来,人工智能领域的大模型技术在多个方向上取得了突破性的进展,特别是在机器人控制领域展现出了巨大的潜力。在“具身智能机器人大模型”部分,作
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    与未来,涵盖如基于行为的人工智能、生物启发的进化人工智能及认知机器人技术的发展。这一历史背景为随后的大模型驱动的具身智能讨论奠定了基础,随着人工智能
    发表于 12-28 21:12

    【「具身智能机器人系统」阅读体验】1.全书概览与第一章学习

    非常感谢电子发烧友提供的这次书籍测评活动!最近,我一直在学习大模型和人工智能的相关知识,深刻体会到机器人技术是一个极具潜力的未来方向,甚至可以说是推动时代变革的重要力量。能参与这次活动并有机会深入
    发表于 12-27 14:50

    《具身智能机器人系统》第7-9章阅读心得之具身智能机器人与大模型

    将自然语言理解与运动规划融为一体。这种端到端的方法使机器人能够直接人类指令生成动作序列,大幅简化了控制流程。该项目的工作流程包含设计并封装一个人机器人函数库、编写清晰地描述提示词、在仿真环境中执行
    发表于 12-24 15:03

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    嵌入式人工智能(EAI)将人工智能集成到机器人等物理实体中,使它们能够感知、学习环境并与之动态交互。这种能力使此类机器人能够在人类社会中有效
    发表于 12-24 00:33

    【「具身智能机器人系统」阅读体验】+初品的体验

    动态互动的。 该理论强调智能行为源于智能体的物理存在和行为能力智能体必须具备感知环境并在其中执行任务的能力。具身
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    ,互联网行业占成熟经济体的GDP增长的21%,世界经济正面向数字经济转型的大趋势。具身智能机器人集成人工智能、高端制造、新材料等技术,其核心在于通过智能体与环境的动态互动实现
    发表于 12-19 22:26

    市场角度对机器人的基本解读

    人工智能机器人发展至今,几乎都是学术方面对机器人进行定义诠释。现今机器人市场化发展程度已逐步进入多领域不同场景的融合应用,对实际市场已经
    的头像 发表于 12-07 01:06 ?620次阅读
    <b class='flag-5'>从</b>市场角度对<b class='flag-5'>机器人</b>的基本解读

    名单公布!【书籍评测活动NO.51】具身智能机器人系统 | 了解AI的下一个浪潮!

    进行动态互动实现的。 这种理论强调,智能行为源于智能体的物理存在和行为能力智能体必须具备感知环境并在其中执行任务的能力。 具身
    发表于 11-11 10:20