多目标跟踪是指在连续的图像中,通过目标检测算法识别出每一帧中的目标,并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化,而且还会有目标出现和消失的情况,再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况(例如无人机高空检测),就会给多目标跟踪造成一定的困难。由于我们不能控制目标,所以只能从视频采集端维护跟踪的稳定性。因此,成都慧视针对于多目标检测跟踪抖动丢失的优化方法是:1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述,利用深度学习提取更高级别的语义特征,这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型,在算法中加入对摄像头运动的估计,通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略,设计更灵活的数据关联算法,允许更大的距离阈值来匹配候选目标。HDMI相机目标识别用图像处理板。福建目标识别软件
RK3588作为瑞芯微国产化旗舰级芯片,用在目标跟踪领域,通常情况下跟踪帧率都在50Hz左右,这已经足够满足大多数应用领域的需求。但在许多特殊领域,如军备、边防,高帧频的视频输出能够在极短的时间内捕捉到更多的画面,实现高速动态场景的连续拍摄。高帧频的目标跟踪则能够获得更多的目标细节,便于做出下一步判断。许多中低端性能的由于算力等因素无法达到这样的需求,但RK3588作为性能怪,6.0TOPS的算力开发潜力无限。成都慧视就针对于这样的需求场景,在硬件的支持下,定制开发出能够支撑100Hz跟踪算法,从而打造出能够稳定实现100Hz目标跟踪的整合方案。福建目标识别软件Viztra-LE034是采用RV1126开发而成的AI识别模块。
经过算法的不断升级验证,Viztra-LE026图像处理板能够以30Hz的帧率跟踪像素为2*2的目标,能够识别**小像素为12*12的目标,整个延迟不高于100ms,识别精度能够大于85%。无人机作业,续航是使用者首要考虑的。Viztra-LE026的设计正是考虑了这项因素,首先重量上就不会给无人机增加过多负担,尺寸方面也无需过多空间,低于4W的功耗对于整个无人机的续航影响也是微乎其微。综合这些特点,可见Viztra-LE026图像处理板和无人机的完美契合,将是各领域打造智能无人机的得力助手。
而维修机器人则能够通过图像识别、精细远程控制技术,实现远程快速维修,通过加装高性能图像处理板,机器人能够精细电网缺陷以及损坏程度,并通过摄像头实时回传高清画面,工程师只需要远程操控机器人进行修补,实现精细缝合。整个过程只需要极少数的人员参与,整个巡检维修的时间能够从7小时缩减到1小时,极大地保障了电力供应。成都慧视光电采用RK3588开发而成的Viztra-HE030图像处理板,具备八核处理器,采用BTB传输接口,拥有极强传输能力,成都慧视能够凭借丰富的经验,快速集成开发SDI、CVBS、DVP、LVDS、cameralink等接口以及金属外壳和散热器。通过6.0TOPS的算力,以及丰富的接口定制,板卡能够快速适配不同的无人机和机器人,用在我国西部电力运维领域,将是工程师打造智能化维护的关键技术。如何打造一个完整的目标识别方案?
东北虎作为生活在我国东北地区的保护动物,时不时会闯入居民区,给居民生命安全造成威胁,此前不就黑龙江七台河市勃利县一村落就出现了东北虎伤人事件,伤人后东北虎不知去向,消防和公安紧急寻找。值得关注的是,公安采用了无人机进行巡查,这种方式不仅比传统的地毯式搜索效率更高,而且面对东北虎这样危险的生物,安全性也更高。但是传统的无人机需要手动操控观察,同样费时费力,想要更进一步提升效率,则可以通过无人机智能化建设实现。成都慧视定制的RK3588系列AI识别模块能够快速集成于无人机吊舱中。上海企业目标识别经验丰富
鸟类识别的模块定制。福建目标识别软件
目前,采用图像识别技术来实现无人机规避其他障碍物是一个有效的方法。通过在无人机上植入图像识别模块,这个模块由图像处理板和相机组合而成,通过算法的赋能,就能针对不同物体实现快速AI识别,然后实现规避。而在图像处理板的选择上,成都慧视开发的Viztra-LE026图像处理板就十分合适。这块板卡采用了RV1126开发设计而成,外形呈圆形,体积小巧,尺寸为Ф38mm*12mm,重量只有12g,用在无人机上不会过多占用空间。此外,该板卡功耗≤4W,也不会增加无人机的续航负担。福建目标识别软件