算法視頻分析服務(wù)平臺(以下簡稱IAS100)由和普威視自主研發(fā),該平臺內(nèi)部采用基于傳統(tǒng)機器學(xué)習(xí)+深度學(xué)習(xí)融合的智能分析算法,可高效實現(xiàn)對關(guān)注事物如人、車、船、無人機、動物等目標(biāo)的結(jié)構(gòu)化信息提取,為應(yīng)用軟件系統(tǒng)提供有效的智能分析結(jié)果,為24小時無人值守的監(jiān)控場景提供智能化手段、節(jié)省人力和物力。平臺采用Socket+Http+RestAPI實現(xiàn)了對傳入視頻幀中的關(guān)注目標(biāo)進行檢測、分類、跟蹤等智能化的分析,實現(xiàn)可見光、熱像雙光視頻的智能分析,并以結(jié)構(gòu)化信息輸出檢測結(jié)果。
在傳統(tǒng)算法上主要涉及背景建模、報警入侵、單目標(biāo)跟蹤、多目標(biāo)軌跡分析和全景拼接,深度學(xué)習(xí)方面通過對水、陸、空等常見目標(biāo)的訓(xùn)練,已具備檢測識別人、車、船、無人機等不下于45種目標(biāo)和動作。通過在邊防線、軍事基地、沙漠、湖泊、海洋等各個場景的應(yīng)用和錘煉,平臺已具備較強的環(huán)境適應(yīng)能力,可有效應(yīng)對雨、雪、風(fēng)、沙、煙霧等各種弱視覺的環(huán)境。
公司基于光電技術(shù)領(lǐng)域的優(yōu)勢,提供遠距離目標(biāo)觀瞄光電設(shè)備的同時,在視頻圖像處理上具備對遠距離小目標(biāo)的算法檢測和識別技術(shù),并結(jié)合光電控伺服制技術(shù)有效利用在了邊海防、基地、化工、林業(yè)等各種行業(yè)領(lǐng)域,并對各個領(lǐng)域進行了深耕細化,使得算法技術(shù)更能切合實際使用的場景,發(fā)揮出巨大的價值。同其他廠家對比,我司的算法技術(shù)傾向于可見光、熱成像的小目標(biāo)檢測和識別,并能基于場景做深入的優(yōu)化,在同類行業(yè)中具有領(lǐng)先的優(yōu)勢。
1)動目標(biāo)強化檢測:支持采用目標(biāo)識別、目標(biāo)軌跡跟蹤的方式強化極大和極小目標(biāo)的運動檢測、拌線檢測和區(qū)域入侵檢測;
2)人體動作多樣性檢測:支持人體在蹲、走、跑、跳、匍匐、游泳等各種動作下的極大和極小目標(biāo)檢測;
3)多種類目標(biāo)檢測:支持檢測人、車、船、動物、鳥、無人機、空飄物、飛機、起落架等各種目標(biāo);
4)雙光視頻檢測:支持可見光、熱成像視頻同步同規(guī)則、同步異規(guī)則、錯時同規(guī)則和錯時異規(guī)則的檢測方式;
5)遠距離小目標(biāo):支持對5*5像素以下的小目標(biāo)實現(xiàn)入侵告警檢測;支持對15*15像素以下的超小目標(biāo)進行檢測識別;
6)云邊端多形態(tài)部署:支持整體的系統(tǒng)解決方案,實現(xiàn)軟件+算法的業(yè)務(wù)整合;支持后端算法分析平臺、智能算法分析套件和算法模型授權(quán)的合作方式。
廣泛應(yīng)用于人車目標(biāo)檢測,森林、油庫、化工廠、園區(qū)煙火檢測,機場、核電站、城市低空無人機檢測,港口、碼頭、湖泊、海洋船舶檢測。
型號名稱 | IAS100 AI算法視頻分析服務(wù)平臺 | |
適用設(shè)備 | 光電轉(zhuǎn)臺、光電云臺、電子哨兵、 通用安防攝像機 | |
系統(tǒng)性能 | 單服務(wù)支持不少于16路視頻實時檢測(具體路數(shù)受限于硬件配置) 單服務(wù)支持不少于100路視頻分時檢測(具體路數(shù)受限于硬件配置) | |
圖像分析 | 1. 目標(biāo)跟蹤:支持單目標(biāo)和多目標(biāo)的跟蹤算法、目標(biāo)軌跡實時顯示;支持目標(biāo)識別自動跟蹤(選配)、目標(biāo)入侵區(qū)域自動跟蹤、目標(biāo)撞線自動跟蹤、手動選擇目標(biāo)跟蹤、跟蹤目標(biāo)算法識別(選配)、跟蹤過程自動變倍、目標(biāo)丟失自動找回;支持水、陸、空場景下的目標(biāo)跟蹤;支持KCF、光流跟蹤法算法;支持可見光視頻跟蹤、熱成像視頻跟蹤、轉(zhuǎn)臺類設(shè)備角速度跟蹤和PID跟蹤、云臺類設(shè)備速度等級跟蹤 2. 全景拼接:支持可見光全景拼接、熱成像全景拼接;支持水平360°、俯仰≥50°的無縫全景拼接;支持全景圖上傳、下載的功能 3. 語義分割:支持可見光視頻語義分割、熱成像視頻語義分割;支持基于deeplabv3系列的語義分割、基于DNANet的目標(biāo)分割模型;支持對人、車、船、無人機、動物等目標(biāo)、物體的像素級分割;支持天空和地面的分離、小目標(biāo)和雜亂背景的分離 4. 動目標(biāo)檢測:支持運動目標(biāo)檢測、目標(biāo)拌線檢測、區(qū)域入侵檢測;支持采用目標(biāo)識別(選配)、目標(biāo)軌跡跟蹤的方式強化極大和極小目標(biāo)的運動檢測、拌線檢測和區(qū)域入侵檢測;支持可見光視頻動目標(biāo)檢測、熱成像視頻動目標(biāo)檢測、運動目標(biāo)軌跡實時顯示 | |
運動目標(biāo)檢測能力 | 可見光1080P分辨率下支持檢測不小于5*5像素的目標(biāo) | |
熱成像D1分辨率下支持檢測不小于3*3像素的目標(biāo) | ||
增強后檢測準(zhǔn)確度達到95%以上 | ||
地面目標(biāo)識別服務(wù)(選配) | 1. 人員檢測:支持可見光視頻、熱成像視頻對人員目標(biāo)的檢測;支持人體在蹲、走、跑、跳、匍匐、游泳等各種動作下的極大和極小目標(biāo)檢測 2. 支持可見光視頻、熱成像視頻對人臉的檢測 3. 車輛檢測:支持可見光視頻、熱成像視頻對車輛目標(biāo)的檢測;支持檢測轎車、面包車、客車、卡車、皮卡、油罐車、三輪車、自行車、挖掘機、拖拉機、工程車等不同類型的車輛目標(biāo) 4. 動物檢測:支持可見光視頻、熱成像視頻對動物目標(biāo)的檢測;支持檢測牛、羊、馬、駱駝、貓、狗等各種動物的目標(biāo) 5. 煙火檢測:支持可見光視頻對煙和火目標(biāo)的檢測、熱成像視頻對火的檢測;支持太陽、反光、煙筒等常見熱源目標(biāo)的檢測 | |
檢測能力 | 可見光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于8*8,最大目標(biāo)像素不小于200*160 | ||
人、車、動物目標(biāo)像素高于30*30時,檢測準(zhǔn)確率可達96%以上 | ||
煙火目標(biāo)像素高于50*50時,檢測準(zhǔn)確率可達90%以上 | ||
單顯卡支持不低于100幀/s的檢測速度 單服務(wù)支持不少于4張顯卡同時檢測 | ||
水面目標(biāo)識別服務(wù)(選配) | 1. 船舶檢測:支持可見光視頻、熱成像視頻對船舶目標(biāo)的檢測;支持檢測客輪、貨船、漁船、快艇、艦艇、采砂船等不同類型的船舶目標(biāo) 2. 支持熱成像視頻對水面上人體游泳目標(biāo)的檢測 3. 支持可見光視頻、熱成像視頻對垂釣?zāi)繕?biāo)的檢測(選配) 4. 支持可見光視頻、熱成像視頻對漂浮物目標(biāo)的檢測(選配) | |
檢測能力 | 可見光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于15*15,最大目標(biāo)像素不小于200*160 | ||
船舶目標(biāo)像素高于30*30時,檢測準(zhǔn)確率可達95%以上 | ||
游泳、垂釣?zāi)繕?biāo)素高于35*35時,檢測準(zhǔn)確率可達85%以上 | ||
漂浮物目標(biāo)素高于50*50時,檢測準(zhǔn)確率可達85%以上 | ||
單顯卡支持不低于100幀/s的檢測速度 單服務(wù)支持不少于4張顯卡同時檢測 | ||
低空目標(biāo)識別服務(wù)(選配) | 1. 無人機檢測:支持可見光視頻、熱成像視頻對無人機目標(biāo)的檢測;支持檢測四旋翼、六旋翼、固定翼等低空無人機目標(biāo) 2. 空飄物檢測:支持可見光視頻對風(fēng)箏、氣球等空飄物目標(biāo)的檢測;支持熱成像視頻對氣球目標(biāo)的檢測 3. 支持可見光視頻、熱成像視頻對低空中鳥的檢測 4. 飛機檢測:支持可見光視頻、熱成像視頻對飛機目標(biāo)的檢測;支持直升機、民航、起落架、戰(zhàn)斗機(選配)等目標(biāo)的檢測 | |
檢測能力 | 可見光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于8*8,最大目標(biāo)像素不小于200*160 | ||
無人機目標(biāo)像素高于30*30時,檢測準(zhǔn)確率可達95%以上 | ||
空飄物目標(biāo)像素高于30*30時,檢測準(zhǔn)確率可達80%以上 | ||
單顯卡支持不低于100幀/s的檢測速度 單服務(wù)支持不少于4張顯卡同時檢測 | ||
視頻處理 | 1. 拉流解碼:支持設(shè)備直連取流、流媒體轉(zhuǎn)發(fā)取流的視頻解碼;支持1080P、1280*1024、720P、D1、640*512等常見視頻分辨率視頻的解碼、裁剪和壓縮;支持一處解碼供多模型、多算法同步使用 2. 視頻編碼:支持解碼視頻和推理信息的融合編碼;支持編碼視頻的壓縮、視頻服務(wù)發(fā)布和定向推送 3. 推理回放:支持視頻幀的模型推理、目標(biāo)標(biāo)記、遮擋、屬性提取、目標(biāo)信息存儲、推理視頻存儲和目標(biāo)告警推送;支持1幀/Ns—25幀/s的推理幀率控制;支持推理記錄、視頻的查詢、回放和下載 4. 模型管理:支持模型上傳、刪除、升級等管理操作;支持增加、刪除、瀏覽、更名、隱藏等推理標(biāo)簽的管理操作;支持多進程、多模型的算法業(yè)務(wù)調(diào)度;支持手動上傳視頻、圖片測試算法模型的推理效果 | |
硬件適配 | 1. 支持海思芯片、atlas、寒武紀(jì)、英偉達等各類芯片、GPU的算法移植和適配 2. 支持云、邊、端的形式部署;支持后端服務(wù)分布式組網(wǎng)、邊端智能1+N檢測以及端側(cè)小模型移植適配 | |
接口協(xié)議 | 1. 接入?yún)f(xié)議: RTSP、GB28181(選配)視頻協(xié)議接入;支持海康、大華、宇視等主流廠家設(shè)備協(xié)議接入 2. 二次開發(fā):支持SDK二次開發(fā);支持Restful API平臺對接;支持提供RTSP格式的推理視頻流 |