无人机主导下的低空经济在物流运输、应急救援、智能巡检、农林植保等领域有着突出应用,而在辅助无人机进行运转的设备中,吊舱很重要。无人机吊舱中集各类传感器于一体,能够在无人机执行任务时,实时识别画面中的物体,帮助操控者进行信息收集,做出判断。而为了让无人机进一步智能化,慧视光电通过在吊舱中植入高性能的图像处理板,来实现AI和无人机的有机结合。这就是慧视VIZ-GT05V三轴双可见光惯性稳定吊舱,它搭载一颗千万级可见光CMOS传感器和一颗星光级可见光CMOS传感器,具备大小两个视场角,能够实时输出1080P的高清可见光视频,可实现夜间微弱光线下的目标观测。AI算法训练帮助工具SpeedDP。河南研发AI智能应用
今年各地陆陆续续出现大范围的强降雨,不少城市更是出现内涝的情况,而乡镇农村更是洪峰过境。突然降临的洪水内涝让受灾地不少人被困,同时也给防汛救援造成了不小的难题,为了尽可能节约救援时间,增加搜救率,前期的信息收集工作十分重要。这项工作交给无人机是当下比较高效的解决方案。无人机便捷灵活,能够轻松到达许多内涝区域搜集信息。搭载光电吊舱则能够实时回传现场画面,不少吊舱具备红外和可见光双光成像的能力,夜间工作也能够清晰成像。除了搜集洪水信息,无人机还可以通过智能化吊舱实现AI智能识别,例如高空飞行作业的无人机通过盘旋扫描,能够识别是否存在被困人员,识别被困人员数量。从而展开精细的救援转移,保障人民生命财产安全。河南研发AI智能应用利用成都慧视推出的SpeedDP能够帮助训练AI识别算法。
要解决小目标难以追踪的这个难题,慧视光电的算法工程师给出了小目标识别算法的方案,通过加强目标特征、数据增广、放大输入图像、使用高分辨率的特征、设计合适的标签分配方法,以让小目标有更多的正样本、利用小目标所处的环境信息或者其他容易检测的物体之间的关系来辅助小目标的检测。此外,利用自研的深度学习算法开发平台,通过不断的深度学习,能够让AI更加精细的识别目标。这个方法在瑞芯微RK3588、RV1126、RK3399pro等系列图像跟踪板上得到了较好地验证。因此,将这个算法用在无人机高空识别领域,完全能够弥补传统算法的不足,达到更加稳定锁定跟踪的目的。
SpeedDP包含如下五个模块:1.数据集管理:采集并制作用于训练和测试的数据集;2.项目配置:根据项目的实际情况,对调整相关配置参数进行定制化开发;3.模型训练:完成训练参数配置,开始模型训练并监控训练过程,损失精度可接受时,暂停训练;4.模型测试:使用数据集或实际业务场景图像视频数据进行模型评估;5.模型部署:模型测试结果达到预期,进行模型转化和部署。据客户反馈,使用了慧视光电的SpeedDP后,初步提升效率在80%以上,开发周期缩短,同时可售可租的模式,也让企业的选择更加灵活,为所在单位降本增效提供帮助。AI算法训练标注一体平台SpeedDP。
这个过程中,如何让无人机理解并提取分析图像很关键,这就需要高精尖的目标识别算法。成都慧视开发的AI智能算法分析是一种计算机的“分析”和“识别”技术,是一种计算机“视觉”科技,也就是把摄像机当作人的“眼睛”,智能设备终端作为人的“大脑”,让视频系统具有人一样的判断危险或者其他特殊情况发生的能力。图像处理板和这样的目标识别算法的合力之下,就可实时对目标进行识别或者人为的的锁定,同时可以根据输出目标的靶量信息,对目标进行实时跟踪。这就是无人机实现智能识别的一种高效方法,通过实时的目标识别处理无人机获取的数据,让无人机的工作更加高效。如何提升无人机识别跟踪的精度?河南研发AI智能应用
数据标注很麻烦,所以需要AI介入。河南研发AI智能应用
例如是飞过来的杂物,还是闯入的人或者动物,如果摄像头能够智能识别,那么就可以实现上述目的。而要实现这样的功能,一个很简单的方法就是在传统摄像头的基础上植入高性能的AI图像处理板。图像处理板通过定制接口和摄像头连接,在目标识别算法的赋能下,就能够对摄像头获取的物体进行AI识别分类,从而对摄像头发出指令是否锁定跟踪目标,从而转动摄像头。成都慧视开发的Viztra-ME025图像处理板,是慧视光电采用瑞芯微RK3399pro芯片开发而成的高性能板卡,芯片基于双Cortex-A72+四Cortex-A53大小核CPU结构;CPU主频1.8GHz;高性能+强大的算力3.0TOPS,GPU采用Mali-T860MP4,支持1080P视频编解码、H.265硬解码。河南研发AI智能应用