Visual Tracker Benchamark

問題  1

1  在調用main.m跑TRE和SRE時,因爲會生成相應的.mat數據文件,如果跑完以後發現自己算法生成的.mat文件有問題,那麼要把該文件刪除,待找到錯誤原因後,重新生成相應的.mat文件。因爲程序中寫的是如果已經存在了.mat文件,例如已經存在car4_STC.mat文件,即使該文件中的數據有錯誤,但是重新跑時會默認該文件中的數據寫完,不會重新寫入數據

 

問題  2

 benchmark中 一共有三個指標OPE、TRE和SRE,當前論文中需要列放的只是OPE結果圖,所以在畫曲線圖時只需要跑OPE即可,步驟:

(1)程序中的代碼表示在:main_running.m中的20行

evalType='OPE';

(2)然後調用perfPlot.m畫精度曲線圖,因爲只需要得到OPE結果圖,所以在perfPlot.m的103行修改爲

evalTypeSet = 'OPE';

 

140行:

for j=1:length(evalTypeSet)

end 

 需要註釋掉;因爲只跑OPE所以不用循環了

142行修改爲:

     evalType = evalTypeSet;%SRE, TRE, OPE

 

(3)做完上述(1)(2)後 調用perfPlot.m畫出來的曲線圖只有成功率圖,而並沒有精確度圖

這時需要做的是:

將105行修改爲:

rankingType = 'threshold';(如果參數是源程序中的‘AUC’的話  跑出來的圖是隻有成功率圖(success)而沒有精度圖(precision))

修改完後 再跑一遍perfPlot.m,此時得到的圖像既有success又有precision

問題 3

在跑完perfplot.m後,如果生成的曲線圖不正確或者不理想,想要重新畫曲線圖,此時需要把文件夾../perfMat/overall下的所有.mat文件刪除,原因和問題1中的一樣

問題 4

 

我在跑TRE時,查看我的算法生成的.mat文件,發現有些數據並沒有寫進去,本來每個.mat文件中有20組數據,可是得到的結果中有的數據是空的,例如:

這個錯誤的原因我沒有找到,但是並不影響後面的工作。因爲我想要的只是OPE結果,而每個.mat文件中的第一列數據就是OPE的數據,而我跑出來的結果沒有缺失第一列數據的所以並沒有影響。(我猜測是跟蹤框出邊界了)

問題 5

(1)在大部分論文中附上的跟蹤結果圖都是隻有5、6個算法的結果,而調用完drawResultBB.m得到的結果圖中有好多算法的結果,很混亂(因爲太多了),怎麼辦?

這時就需要人爲的去標定 限定5、6種算法去畫圖,具體步驟:

在drawResultBB.m文件的15行後面加上:

 

trks = configTrcakers;

Aaa = [1 2 3 4 (選中的算法的編號)........];

trks = trks(Aaa );

這樣的話程序只會跑Aaa中的幾個算法。

同樣的方法適用於選擇想要的序列去跑(但是這種做法有點學術造假的嫌疑)

(2)得到的曲線圖,在benchmark中默認的是前10名算法的結果,如果在和所有的算法跑時你的算法並沒有進到前10名,怎麼辦?

這個問題最好的解決方法是繼續優化算法,在理論程序上下功夫,以達到算法效果提高的目的。但是,有個小技巧(也有作弊的嫌疑),就是和(1)的解決方法一樣,選擇幾個菜的算法,數目固定在10個,這樣的話你的算法肯定在前10名裏邊!!!!

問題 6

文章中把數據集分爲了11類,包括(illumination variation、low resolution等),但是可能你的算法可能並不具備所有方面的能力,例如:out of view 超出視野 你的算法並不具有再檢測的能力,這樣造成在做綜合測評時(perfplot.m),會影響整體成績,所以可以不測試這項(這樣做不算作弊,這個可以直接在論文中明說)

具體操作:

繼續用'out of view'來做例子

1 在perfplot.m文件的第9行:

 

attName={'illumination variation'   'out-of-plane rotation' 'scale variation'   'occlusion' 'deformation'   'motion blur'   'fast motion'   'in-plane rotation' 'out of view'   'background clutter' 'low resolution'};

這個順序是固定的,而'out of view'是倒數第三個

將該項刪掉:

attName={'illumination variation'   'out-of-plane rotation' 'scale variation'   'occlusion' 'deformation'   'motion blur'   'fast motion'   'in-plane rotation'  'background clutter' 'low resolution'};

2 文件夾../anno/att下的一系列txt文件,是11中屬性分類的標誌,順序是按照attName中的順序

例如:basketball.txt文件中的是1,1,0,1,1,0,0,0,0,1,0

數字是1的說明basketball是屬於該類的,比如說basketball屬於光照變化、平面外旋轉、遮擋、變形、背景複雜5項。按照attName的順序對號入座即可

 

接着1中的操作,因爲'out of view'是倒數第三個,那麼需要把att下的每一個txt文件中的倒數第三個數字刪掉

例如:

Basketball.txt就變成 1,1,0,1,1,0,0,0,1,0

按照1、2操作完後,再跑perfplot.m,會發現得到的一系列圖中沒有'out of view'的圖了

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章