AI+低延迟低带宽,解决巡检机器人控制和视频传输难题

我的美好生活 2026-01-14 阅读数 26 #生活大爆笑

巡检机器人现如今正慢慢取代传统的人工巡检,成为巡检领域的主力军。

在机器人中,只有大量采用不同类型的传感器技术,才能追求类人化的意识、行为、动作、功能和生物感知特征,同时具有人所不能及的独特优势和场景适应能力。

而图像处理模块的存在,则是让机器人具备识别、检测周边物体的能力,让其能够实现精准操作、避障等功能。

85a1e07c-f066-11f0-8ce9-92fbcf53809c.jpg

这些AI功能慧视光电开发的Viztra-HS063 AI图像处理板就可以实现,板卡采用RK3588s开发而成,作为RockChip全新一代旗舰AIoT处理器,它具备8nm LP 制程,搭载八核64位CPU,主频高达2.4GHz。内置AI加速器NPU,可提供6Tops算力,支持主流的深度学习框架。经过我司开发,植入检测算法,基于输入的可见光或者红外视频流实现对周边目标的检测识别。

将机器人和板卡深度结合,例如在铁路巡检中,小巧的机器人在轨道中滑行巡检,AI板卡就能够实时进行AI检测识别,精准找到一颗颗松动的螺栓,遗留的垃圾等,效率比人工巡检高出好几倍。

板卡整体尺寸为55*40*10.67mm左右,重量仅24.5g(不含散热器),小巧精致的外形不会占用过多的设计空间。设计双模拟输入接口,一路MIPI接口,提供多种选择,适应不同行业。

此外,在机器人作业时,高清视频的采集、编解码、传输一直是一个难点。该板卡能够集成LLSM低延迟低带宽流媒体传输系统,在延迟方面,板卡能够实现编解码5ms的极致压缩,整个采集、编解码、传输全流程延迟控制在100ms以内。实现低延迟控制巡检机器人进行远程作业。

在带宽控制方面,能够通过高效的编码算法和信号优化,以最低500K带宽占用控制多个机器人进行作业,同时回传高清视频,这在偏远地区多设备作业环境中,能够有效增强巡检机器人的稳定性。

AI参数指标

性能指标

跟踪帧率

60 Hz(随相机输入帧率,最高可支持到100Hz)

最小跟踪目标

2×2 像素(质心跟踪)

8×8 像素(相关跟踪)

跟踪精度

≤ 1 像素

跟踪速度

≥ 64 像素/帧

最小目标对比度(质心目标)

≥ 5%

最大跟踪目标数量(多目标跟踪)

≤ 64

识别帧率

25 Hz

最小识别目标

10×10 像素

识别性能(基于开源数据集:VisDrone2019-DET-test-dev)

0.616(mAP@0.5)

功能参数

支持的跟踪算法

质心跟踪、相关跟踪、多目标跟踪、智能跟踪

支持的检测算法

AI识别、质心搜索、模板匹配、运动目标检测

图像压缩编码格式

H.264、H.265

视频流输出格式

RTSP、UDP、RTMP、HLS等

视频流可配置参数

码率、I帧间隔、QP值

控制交互方式

RS422/RS232/UDP/TCP

硬件接口/参数

视频输入

1路 MIPI(需定制适配),2路 CVBS(PAL)

视频输出

1路 网络

串口

1路 RS422,1路 UART

网络

1路 百兆网口(默认输出RTSP视频流)

内存容量

32 G(可定制扩展)

视频压缩存储能力

≥ 2h(码率4M)

机械/电气参数

功耗

< 6W

工作电压

12V DC ± 2V

外形尺寸

55mm×40mm

环境适应性

工作温度

-20℃ ~ +60℃

存储温度

-20℃ ~ +65℃

  • 随机文章
  • 热门文章
  • 热评文章
热门