0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于3D相机组装家具

广州虹科电子科技有限公司 ? 来源:广州虹科电子科技有限公 ? 作者:广州虹科电子科技 ? 2022-08-08 14:07 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

虹科智能感知事业部专注于智能感知与机器视觉领域,已经和ID?????????S,Blickfeld和Gidel等有着重要地位的国际公司展开深度的技术合作。我们的解决方案包括3D激光雷达,工业相机,视觉处理平台,图像采集卡及视觉系统集成等。虹科的工程师积极参与国内外专业协会和联盟的活动,我们非常重视技术培训和积累,公司定期与国内外专家团队进行交流和培训。

相信大家都经历过一件事:组装新家具。把零件按顺序排列好,查看安装说明,发现要花费的时间比预期要长!

新加坡南洋理工大学(NTU Singapore)的科学家们研制了一种机器人,可以独立组装椅子的各个零件。该机器人由一个HK Ensenso N35 3D相机和两个能抓取物体的机器臂组成。?????????

应用

为了帮助机器人组装宜家的椅子,来自“机械与航空工程学院”的团队用三个不同的开源库对算法进行编码。机器人的硬件设计是为了模拟人们如何安装物体:“眼睛”为3D摄像头,“手臂”为能够在六个轴上运动的工业机械臂。每只机械臂都有抓手来抓取物体。手腕上安装了力传感器,以确定“手指”的握力以及它们使物体相互接触的强度。

机器人开始组装过程时,会拍摄地面上各部件的3D图像,生成各部件估计位置的地图,由HK Ensenso 3D相机完成。相机的工作原理是模仿人类视觉的“投影纹理立体视觉”(stereo vision)。两台相机从两个不同的位置获取同一场景的图像。虽然摄像机看到的场景内容是相同的,但根据摄像机的投影射线得到的物体位置不同。特殊的匹配算法比较两幅图像,搜索相应的点,并在视差图中可视化所有点的位移。虹科提供软件可以确定每个单独的图像像素或物体点的三维坐标,以便于完成椅子的组装。

难点

难点是在混乱的环境中尽可能精确、快速、可靠地定位组件。虹科3D相机依赖大功率投影仪足以满足这些需求。即使在艰难的光线条件下,投影仪也能通过图像掩模在物体表面产生高对比度的纹理。投射的纹理补充了宜家椅子组件上薄弱或不存在的物体表面结构。

这个应用利用了虹科N35系列相机中独有的FlexView投影仪技术,投影在组件物体表面上的模式可以改变表面上的纹理,检测得到的深度信息非常精确完整,该项技术是通过获取同一目标场景的不同纹理的多幅图像融合成一帧图像得到。另一个优势是HK Ensenso软件提供机器人手眼标定功能。使用一个标定板,它确保相机坐标系(在这种情况下是相机是静止的)的位置是相对于基础坐标系(组件的位置)确定的。这使得机器人的手能够准确地对图像信息做出反应,并准确地到达目的地。

“对于一个机器人来说,把椅子精确的拼凑比人为工作更复杂”南洋理工大学的Pham Quang Cuong教授解释道。“必须分解成不同的步骤,比如识别不同的椅子部件在哪里,抓住这些部件所需要的力量,以及确保机械手臂在移动时不会相互碰撞。通过相当大的工程努力,我们开发了算法,使机器人能够自行组装椅子。”结果是南洋理工大学的机器人只用了8分55秒就安装好宜家的“斯第芬”椅子。

前景

据Pham Quang Cuong教授介绍,人工智能将使这一应用在未来更加独立和有前途:“我们希望在这种方法中融入更多的人工智能,使机器人更加自主,这样它就可以通过人类演示或阅读安装手册,甚至从组装产品的图片中学习组装椅子的不同步骤。”

新加坡南洋理工大学的科学家开发的机器人被用于对机敏操作的研究,这是一个需要精确控制专用机器人手或手指的力量和运动的机器人领域。这需要所有硬件和软件组件的完美交互。使用虹科3D相机进行三维图像处理是解决问题的关键。它在准确性上、经济和速度方面都令人信服。

这标志着家具组装的真正进步,且不止于此。

虹科Ensenso N35

快速和精确的3D视觉

●GigE接口-灵活多样

● 紧凑,坚固的铝外壳

● IP65/67

●全局曝光CMOS传感器和点图案激光器,可选蓝色或红外led

●最大帧率(3D):10

●工作距离最远3000mm(N35)且可调节

●输出单个3D点云

●提供手眼标定步骤指引,易于设置

●带有标定板的机器人手眼标定集成功能

●可集成uEye工业摄像头的软件,例如,捕捉附加的颜色信息或条形码

●灵活的数据和帧率的采样和叠加

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2568

    文章

    53295

    浏览量

    770266
  • 3D
    3D
    +关注

    关注

    9

    文章

    2965

    浏览量

    111395
  • 机器视觉
    +关注

    关注

    163

    文章

    4620

    浏览量

    123367

原文标题:【虹科案例】基于3D相机组装家具

文章出处:【微信号:Hongketeam,微信公众号:广州虹科电子科技有限公司】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    如何提高3D成像设备的部署和设计优势

    3D视觉技术正快速普及,其增长得益于成本下降和软件优化,应用场景从高端工业扩展到制造、物流等领域。该技术通过1-2台3D相机替代多台2D设备,显著提升效率并降低成本。目前主流
    的头像 发表于 08-06 15:49 ?115次阅读
    如何提高<b class='flag-5'>3D</b>成像设备的部署和设计优势

    3D 工业相机解析:轴向、平面、重复、线性精度到底哪个更重要?

    3D 工业相机选型时,“精度” 往往是用户最先关注的指标,但面对参数表上的 “轴向精度 ”“平面精度”“重复精度”“线性精度”,很多工程师都会陷入困惑:这些参数到底代表什么?为什么同一台设备会有多个精度数值?在实际检测中,哪个参数才是决定成败的关键?
    的头像 发表于 07-29 17:18 ?806次阅读
    <b class='flag-5'>3D</b> 工业<b class='flag-5'>相机</b>解析:轴向、平面、重复、线性精度到底哪个更重要?

    3D工业相机价格是?这种3D工业相机性价比最高

    3D 工业相机市场,一场价格与质量的博弈已然展开。企业在选择时面临着艰难困境,国际品牌筑起高高的价格壁垒,国产品牌又深陷低价低质的怪圈。我们该如何为打破这一局面?
    的头像 发表于 07-29 11:25 ?175次阅读
    <b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>价格是?这种<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>性价比最高

    3D打印能用哪些材质?

    3D打印的材质有哪些?不同材料决定了打印效果、强度、用途乃至安全性,本文将介绍目前主流的3D打印材质,帮助你找到最适合自己需求的材料。
    的头像 发表于 07-28 10:58 ?483次阅读
    <b class='flag-5'>3D</b>打印能用哪些材质?

    国产品牌的3D工业相机为什么更受欢迎?

    早期在视觉检测领域,国际品牌如基恩士和康耐视凭借先发优势,积累了深厚的研发经验,迅速占领3D工业相机的全球市场。如今,这一格局正发生显著变化——中国本土品牌强势崛起
    的头像 发表于 07-25 10:26 ?212次阅读
    国产品牌的<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>为什么更受欢迎?

    中国3D引导类相机市场与竞争分析

    3D技术区别于2D技术的一个显著特征是,除了显示对象的X和Y值外,还可以提供记录场景或对象的深度值。这为解决复杂任务提供了全新的可能,特别是在机器人、工厂自动化和医疗领域。
    的头像 发表于 06-28 16:27 ?808次阅读
    中国<b class='flag-5'>3D</b>引导类<b class='flag-5'>相机</b>市场与竞争分析

    迁移科技推出全新3D智能相机

    工业视觉领域迎来里程碑式突破!迁移科技正式发布全系升级的3D智能相机,将强悍算力直接嵌入相机内部,替代传统 “相机 + 工控机 + 显卡” 的系统架构。通过集成化设计,在空间节省、成本
    的头像 发表于 05-29 13:58 ?461次阅读

    3D AD库文件

    3D库文件
    发表于 05-28 13:57 ?6次下载

    2025年3D工业相机选型及推荐

    3D工业相机的选型
    的头像 发表于 05-21 16:49 ?508次阅读
    2025年<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>选型及推荐

    3D闪存的制造工艺与挑战

    3D闪存有着更大容量、更低成本和更高性能的优势,本文介绍了3D闪存的制造工艺与挑战。
    的头像 发表于 04-08 14:38 ?1250次阅读
    <b class='flag-5'>3D</b>闪存的制造工艺与挑战

    英伦科技裸眼3D便携屏有哪些特点?

    英伦科技裸眼3D便携屏采用了领先的光场裸眼3D技术,无需佩戴3D眼镜即可观看,给用户带来裸眼看3D视频的体验,为用户带来更加便捷和自由的视觉享受。
    的头像 发表于 02-06 14:20 ?582次阅读
    英伦科技裸眼<b class='flag-5'>3D</b>便携屏有哪些特点?

    SciChart 3D for WPF图表库

    SciChart 3D for WPF 是一个实时、高性能的 WPF 3D 图表库,专为金融、医疗和科学应用程序而设计。非常适合需要极致性能和丰富的交互式 3D 图表的项目。 使用我们
    的头像 发表于 01-23 13:49 ?755次阅读
    SciChart <b class='flag-5'>3D</b> for WPF图表库

    腾讯混元3D AI创作引擎正式发布

    近日,腾讯公司宣布其自主研发的混元3D AI创作引擎已正式上线。这一创新性的创作工具将为用户带来前所未有的3D内容创作体验,标志着腾讯在AI技术领域的又一重大突破。 混元3D AI创作引擎凭借其强大
    的头像 发表于 01-23 10:33 ?693次阅读

    腾讯混元3D AI创作引擎正式上线

    近日,腾讯公司宣布其自主研发的混元3D AI创作引擎已正式上线。这一创新性的创作工具,标志着腾讯在3D内容生成领域迈出了重要一步。 混元3D AI创作引擎的核心功能极为强大,用户只需通过简单的提示词
    的头像 发表于 01-22 10:26 ?686次阅读

    透明塑料件喷粉3D扫描CAV全尺寸检测逆向3D建模设计服务-CASAIM

    3D建模
    中科院广州电子
    发布于 :2024年08月30日 10:04:53