openvino 英特爾提供的模型介紹

介紹如下模型:

 

OpenVINO 軟件包提供一系列預訓練模型,你可以用來進行學習,或者進行參考設計;

OpenVINO 的版本會在 Github_open_model zoo 上面進行維護;

這些模型也可以通過模型下載器 (<OPENVINO_INSTALL_DIR>/deployment_tools/open_model_zoo/tools/downloader) 下載,或者在 01.org 進行手動下載;

 

*(補充)Classification / 分類Detection / 檢測Semantic Segmentation / 語義分割Instance Segmentation / 實例分割 區別

 

Object Detection Models / 目標檢測模型

OpenVINO 提供一系列熱門目標,如人臉/人/汽車等等的檢測模型;大多數網絡都是基於 SSD (Single Shot MultiBox Detector),而且準確度和性能都不錯;

針對於檢測相同類型目標的網絡(比如 face-detection-adas-0001 和 face-detection-retail-0004),能夠以較小的性能代價,讓我們達到更高的精度和更廣的適用範圍;

因此你可以期待一個更大的神經網絡,來更好的檢測相同類型的對象;

模型名稱 複雜度 (GFLOPS) 大小(MP) 人臉 汽車 自行車 車牌 產品
faster-rcnn-resnet101-coco-sparse-60-0001 364.21 52.79   X X X    
face-detection-adas-0001 2.835 1.053 X          
face-detection-adas-binary-0001 0.819 1.053 X          
face-detection-retail-0004 1.067 0.588 X          
face-detection-retail-0005 0.982 1.021 X          
face-detection-0100 0.785 1.828 X          
face-detection-0102 1.767 1.842 X          
face-detection-0104 2.405 1.851 X          
face-detection-0105 2.853 2.392 X          
face-detection-0106 339.597 69.920 X          
person-detection-retail-0002 12.427 3.244   X        
person-detection-retail-0013 2.300 0.723   X        
person-detection-action-recognition-0005 7.140 1.951   X        
person-detection-action-recognition-0006 8.225 2.001   X        
person-detection-action-recognition-teacher-0002 7.140 1.951   X        
person-detection-raisinghand-recognition-0001 7.138 1.951   X        
pedestrian-detection-adas-0002 2.836 1.165   X        
pedestrian-detection-adas-binary-0001 0.945 1.165   X        
pedestrian-and-vehicle-detector-adas-0001 3.974 1.650   X X      
vehicle-detection-adas-0002 2.798 1.079     X      
vehicle-detection-adas-binary-0001 0.942 1.079     X      
person-vehicle-bike-detection-crossroad-0078 3.964 1.178   X X X    
person-vehicle-bike-detection-crossroad-1016 3.560 2.887   X X X    
vehicle-license-plate-detection-barrier-0106 0.349 0.634     X   X  
product-detection-0001 3.598 3.212           X
person-detection-asl-0001 0.986 1.338   X        
yolo-v2-ava-0001 29.38 48.29   X X X    
yolo-v2-ava-sparse-35-0001 29.38 48.29   X X X    
yolo-v2-ava-sparse-70-0001 29.38 48.29   X X X    
yolo-v2-tiny-ava-0001 6.975 15.12   X X X    
yolo-v2-tiny-ava-sparse-30-0001 6.975 15.12   X X X    
yolo-v2-tiny-ava-sparse-60-0001 6.975 15.12   X X    

 

Object Recognition Models / 目標識別模型

目標識別模型用來進行 Classification / 分類Regression / 迴歸Charcter recognition / 特徵識別

針對某種特徵進行檢測之後,再使用這些神經網絡進行檢測/識別(比如在人臉識別之後,再進行年齡/性別的識別);

模型名稱 複雜度 (GFLOPS) 大小 (MP)
age-gender-recognition-retail-0013 0.094 2.138
head-pose-estimation-adas-0001 0.105 1.911
license-plate-recognition-barrier-0001 0.328 1.218
vehicle-attributes-recognition-barrier-0039 0.126 0.626
emotions-recognition-retail-0003 0.126 2.483
landmarks-regression-retail-0009 0.021 0.191
facial-landmarks-35-adas-0002 0.042 4.595
person-attributes-recognition-crossroad-0230 0.174 0.735
gaze-estimation-adas-0002 0.139 1.882

 

Reidentification Models / 再識別模型

在視頻中,進行精準的目標追蹤是計算機視覺的典型應用場景;

它通常會因爲一系列的事情而變得相對比較複雜,這些事情可以描述爲 "Relatively long absence of an object" / 一個對象相對較長的缺失;

比如,可能由於 occlusion / 遮擋 或者 out-of-frame movement / 框外移動 導致的;

針對這種情況,最好將目標視爲 "seen before" / 先前見過的,而不管其在圖像中的當前位置,或者距離上次識別出位置經過多長時間;

下面的網絡用在以上這種情況,這些網絡獲取一個人的圖像,然後將這個人的特徵在高維空間中進行評估;這些特徵向量會進行進一步評估:通過比較歐式距離來確定是否是同一個人;

這裏提供了幾種模型,在性能和精確度之間進行權衡(模型更大,性能更好):

模型名稱 複雜度 (GFLOPS) 大小 (MP) RANK-1 ON MARKET-1501 數據集
person-reidentification-retail-0031 0.028 0.280 92.11%
person-reidentification-retail-0248 0.174 0.183 84.3%
person-reidentification-retail-0249 0.564 0.597 92.9%
person-reidentification-retail-0300 3.521 5.289 96.3%

 

模型名稱 複雜度 (GFLOPS) 大小 (MP) RANK-1 ON MARKET-1501 數據集
face-reidentification-retail-0095 0.588 1.107 99.33%

 

Semantic Segmentation Models / 語義分割模型

語義分割可以歸爲目標檢測的拓展問題;

返回的不是特徵框,語義分割模型返回輸入圖像(圖像中每個像素的顏色代表着特定的類別)的 Painted version / 塗色塊

這些網絡比目標檢測網絡要複雜的多,但是提供了一個像素級別的分類,屬於同一類的像素會被歸爲一類(塗上相同顏色),而且可以檢測到複雜圖形中的空間(比如道路中的可用區域);

模型名稱 複雜度(GFLOPS) 大小 (MP)
road-segmentation-adas-0001 4.770 0.184
semantic-segmentation-adas-0001 58.572 6.686
unet-camvid-onnx-0001 260.1 31.03
icnet-camvid-ava-0001 151.82 25.45
icnet-camvid-ava-sparse-30-0001 151.82 25.45
icnet-camvid-ava-sparse-60-0001 151.82 25.45

 

Instance Segmentation Models / 實例分割模型

實例分割模型是目標檢測和語義分割的拓展;

實例分割模型不是對每個目標實例進行特徵框預測分析,而是爲每個實例生成像素級別的遮罩;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
instance-segmentation-security-1025 30.146 26.69
instance-segmentation-security-0050 46.602 30.448
instance-segmentation-security-0083 365.626 143.444
instance-segmentation-security-0010 899.568 174.568

 

Human Pose Estimation Models / 人類姿勢估計模型

人體姿勢估計任務用來預測姿勢:對於輸入的圖像或者視頻,推斷出帶有特徵點和特徵點之間連接的身體骨骼;特徵點是身體器官:比如耳朵,眼睛,鼻子,胳膊,膝蓋等等;

有兩種主要的分類:top-down / 從上往下, bottom-up / 從下往上

第一種方法在給定的幀中,檢測出人,然後裁剪和調整,運行姿勢估計網絡爲每個檢測出來的人,這種方法很精確;

第二種找到給定的幀中,所有的特徵點,然後根據人的實例進行分類,因此比第一種更快,因爲網絡只運行了一次;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
human-pose-estimation-0001 15.435 4.099

 

Image Processing / 圖像處理

深度學習模型在圖像處理中應用來提高輸出質量:

模型名稱 複雜度 (GFLOPS) 大小 (MP)
single-image-super-resolution-1032 11.654 0.030
single-image-super-resolution-1033 16.062 0.030
text-image-super-resolution-0001 1.379 0.003

 

Text Detection / 文本檢測

深度學習模型在文本檢測中進行應用:

模型名稱 複雜度 (GFLOPS) 大小 (MP)
text-detection-0003 51.256 6.747
text-detection-0004 23.305 4.328

 

Text Recognition / 文本識別

深度學習模型在文本識別中應用;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
text-recognition-0012 1.485 5.568
handwritten-score-recognition-0003 0.792 5.555
handwritten-japanese-recognition-0001 117.136 15.31

 

Text Spotting / 文本定位識別

深度學習模型用於文本檢測識別;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
text-spotting-0002-detector 185.169 26.497
text-spotting-0002-recognizer-encoder 2.082 1.328
text-spotting-0002-recognizer-decoder 0.002 0.273

 

Action Recognition Models / 動作識別模型

動作識別模型對一個視頻短片(通過堆疊來自輸入視頻的採樣幀得到的張量)預測動作;

一些模型從不同的視頻片段中提取(比如 driver-action-recognition-adas-0002 可能會使用預計算的高維度)特徵(嵌入) 然後整合到一個臨時模型中,用分類分數來預測一個向量;

計算嵌入的模型稱爲 encoder / 編碼器,用來預測真實標籤的模型稱爲 decoder / 解碼器;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
driver-action-recognition-adas-0002-encoder 0.676 2.863
driver-action-recognition-adas-0002-decoder 0.147 4.205
action-recognition-0001-encoder 7.340 21.276
action-recognition-0001-decoder 0.147 4.405
asl-recognition-0004 6.660 4.133

 

Image Retrieval / 圖像檢索

深度學習模型用來進行圖像檢索(根據相似度對圖像進行排序);

模型名稱 複雜度 (GFLOPS) 大小 (MP)
image-retrieval-0001 0.613 2.535

 

Compressed Models / 壓縮模型

深度學習壓縮模型;

模型名稱 複雜度 (GFLOPS) 大小 (MP)
resnet50-binary-0001 1.002 7.446
resnet18-xnor-binary-onnx-0001 - -

原帖: https://www.cnblogs.com/AdaminXie/p/12695801.html

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章