重磅!海康威视视觉大模型系列摄像机来了
作为国内知名的图像监控厂商,海康威视把大模型能力直接部署到端侧,推出了一系列视觉大模型摄像机。 视觉大模型摄像机的成像画质更佳,更为关键的是,它突破了场景普适性差、复杂目标难以识别等瓶颈,进一步提高了目标检出率,极大地减少了误报。即使在零样本的情况下,也能够对目标进行识别检测,可检测的目标种类也更为丰富。

大幅降低误报检出率,实现检准率双提升 在实际应用场景下,智能摄像机受到多种因素影响,不同的场景、光照条件以及天气状况等,都会产生大量误报警告。这不仅会使运维成本增加,还会导致用户体验变差,降低对事件响应的信任度。
海康威视在视频领域深耕20余年,凭借在各类场景中积累的丰富行业知识,构建了预训练大模型。在预训练阶段,该模型加入了各种真实动态场景的干扰数据,包括雨雪雾天气、强光闪烁、动物移动、振动抖动等,针对不同条件进行数据增强,从而极大地提高了智能识别的检出率和检准率。
此外,海康威视构建了完备的大模型部署技术体系。在模型结构设计和量化技术方面,从模型轻量化、计算效率提升、计算资源节省等维度展开研究,并创新研发出更适配场景的视觉大模型摄像机。
例如在周界应用领域,海康威视已经推出了球机、IPC、多摄等大模型警戒系列摄像机。与传统视频周界产品相比,大模型警戒系列摄像机的识别距离进一步提升,误报率根据项目实测数据下降了90%以上。

在相同的测试场景中,使用4mm镜头进行测试时,视觉大模型相机能够在70米处检测到人员入侵,而以往基于深度学习算法的相机在40米处才可检测到,传统的smart算法相机则要到20米处才能检测到。
同一场景下,采用4mm镜头测试,传统smart算法检出人员入侵的同时持续检出小鸟入侵,视觉大模型相机可精准过滤小鸟误报,仅检出人员入侵。
在交通事件检测中,海康威视推出雷视一体机、事件检测摄像机、FOD雷视检测一体机等视觉大模型摄像机。在高速公路交通事件检测领域,有效解决复杂场景下抛洒物、停车、行人等事件的误报、漏报难题。

在交通卡口应用中,推出卡口抓拍单元、非机动车抓拍单元、雷云船舶卡口一体机等视觉大模型摄像机产品。如在驾驶室特征识别应用中,识别安全带时,有效过滤低对比度、遮挡、复杂姿态等产生的误报;识别打电话时,有效过滤对抬手、握物等产生的误报。

支持零样本开放识别
目标识别种类更丰富
传统智能应用的落地,千行百业智能需求各不相同,针对不同目标需训练特定的识别算法,存在样本采集成本高、类别拓展难、训练周期较长等问题。
通过在摄像机部署开放式目标检测大模型,采用自研的统一模态学习方案,将视觉识别的图像特征对齐语义特征,实现目标的精准检出与定位,海康威视推出”描述即识别”的智能摄像机应用模式,即输入一个词、一句话可按需快速灵活生成模型,无需样本训练即可识别目标。

场景定义画质
精准自适应调优
视觉大模型摄像机深度融合“硬件 + 算法”,全方位提升全场景画质。凭借专业的大光圈镜头以及高感光传感器设计能力,加之在低照度场景方面积累的丰富经验,构建起端到端的智能大模型算法。该算法能够精准区分图像中的信号与噪声,从而实现精准去噪,有效提升夜视监控画面的信噪比。
在暴雨、雾霾、过曝、偏色等特殊场景下,这种摄像机可根据场景来定义画质,使得图像细节更为丰富,色彩也更加真实,进而为智能应用提供更为优质的视频图像支持。
从能够“看得见”,到进一步“看得清”,再到如今的“看得懂”,大模型的出现让海康威视的技术和产品创新能力更上一层楼。我们将不断深入各个场景,切实为客户解决实际问题,推动千行百业的智能化应用实现升级。