亲自reidentification距离度量学习从骗子人遭受巨大的挑战。大多数情况下,距离度量学习积极对之间的相似性最大化对骗子情态动词在不同的变换。此外,这些骗子了<我t一个lic> 画廊我t一个lic>视图查询只样本,而画廊样品是完全忽略。在现实世界中,一个给定的查询和画廊体验不同姿势的变化,观点,和照明。因此,只有从骗子<我t一个lic> 画廊我t一个lic>视图可以不是最优最大化他们的相似之处。因此,为了解决这些问题,我们提出了一个骗子弹性复合指标(IRM3)。IRM3学到每个模态变换在图像空间和使用冒名顶替者<我t一个lic> 探针我t一个lic>和<我t一个lic> 画廊我t一个lic>视图来有效地限制大量的骗子。学到IRM3然后评估在三个基准数据集,蝰蛇CUHK01, CUHK03,显示了许多以前的方法相比,性能显著改善。
人reidentification (Re-ID)匹配一个给定的人在一个大的不重叠的网络摄像机(
大多数Re-ID方法主要可以分为两类:健壮的特征提取(
三个情态动词<我nline-formula>
此外,在图
改善骗子阻力共同利用变换情态动词(
与我们IMR3方法显著提高性能获得在当地Multikernel Fisher判别分析(MK-LFDA) [
图
骗子有弹性的多通道reidentification度量学习(IRM3)人。
RGB, HSV,实验室、YCbCr SCNCD直方图提取根据类似的设置
让<我nline-formula>
在(
现在,我们计算的数量最近的邻居每个人考虑在训练集上面的两个条件。为了这个目的,我们使用两个探测器<我nline-formula>
我们现在将获得使用这个矩阵<我nline-formula>
在图像空间中得到不同的情态动词之后<我nline-formula>
我们也使用消极的画廊样本(上天)学习指标<我nline-formula>
CVI的集合<我nline-formula>
把三胞胎从<我nline-formula>
从图
我们IRM3评估指标在三个基准数据集:毒蛇,CUHK01, CUHK03。我们遵循评价协议(
彻底分析的性能IRM3我们设计了三个评价策略。这些策略评估IRM3性能与不同数量的发现了情态动词<我nline-formula>
IRM3只:这是基本的多通道指标,只有学习<我t一个lic> 消极的画廊样品我t一个lic>(门店)。
IRM3 + GVI (<我nline-formula>
IRM3 + CVI (<我nline-formula>
所有的门店,样本GVI, CVI包含了一个人的最困难的情况下,随机抽样离线的,之前训练指标。在所有上述三种策略中,我们有图像空间分区<我nline-formula>
匹配比较毒蛇。
|
|
||||
|---|---|---|---|---|
|
|
|
|
|
|
| F | LOMO [ |
40.0 | - - - - - - | 80.51 |
|
|
48.0 | 76.8 | 85.4 | |
| 高格( |
49.7 | 79.7 | 88.7 | |
|
|
||||
| DF | SIR-CIR [ |
35.76 | 68.38 | 82.9 |
|
|
||||
| 静息状态 | GS-CNN [ |
37.8 | 66.9 | 77.4 |
| DGD [ |
38.6 | - - - - - - | - - - - - - | |
| LSTM [ |
42.4 | 68.7 | 79.4 | |
| MuDeep [ |
43.03 | 74.36 | 85.76 | |
| E2E-CAN [ |
47.2 | 79.2 | 89.2 | |
| DLPA [ |
48.7 | 74.7 | 85.1 | |
| Quadruplet-net [ |
49.05 | 73.10 | 81.96 | |
| JLML [ |
50.2 | 74.2 | 84.3 | |
|
|
||||
| 米 | ITL [ |
15.2 | 34.2 | 45.9 |
| LAFT [ |
29.6 | - - - - - - | 69.3 | |
| WARCA [ |
37.47 | 70.78 | - - - - - - | |
| 听( |
39.62 | 69.97 | 82.9 | |
| l - 1图( |
41.5 | - - - - - - | - - - - - - | |
| SS-SVM [ |
42.66 | 70.1 | 84.27 | |
| SCSP [ |
|
82.59 | 91.49 | |
|
|
45.92 | 82.90 | 91.63 | |
|
|
50.39 |
|
|
|
|
|
52.81 |
|
|
|
最后,图
两个查询显示,<我t一个lic>
查询1我t一个lic>和<我t一个lic>
查询2我t一个lic>,其检索结果使用XQDA [
顶级CUHK01匹配比较。
|
|
||||
|---|---|---|---|---|
|
|
|
|
|
|
| F | LOMO [ |
49.2 | 75.7 | 84.2 |
|
|
64.6 | 84.9 | 90.6 | |
| 高格( |
57.8 | 79.1 | 86.2 | |
|
|
||||
| 静息状态 | MCP-CNN [ |
53.7 | 84.3 | 91.0 |
| DGD [ |
66.6 | - - - - - - | - - - - - - | |
| E2E-CAN [ |
67.2 | 87.3 | 92.5 | |
| DLPA [ |
75.0 | 93.5 | 95.7 | |
| Quadruplet-net [ |
62.55 | 83.44 | 89.71 | |
| JLML [ |
69.8 | 88.4 | 93.3 | |
|
|
||||
| 米 | CVAML [ |
57.3 | 81.2 | 86.5 |
| WARCA [ |
58.34 | 79.76 | - - - - - - | |
| l - 1图( |
50.1 | - - - - - - | - - - - - - | |
|
|
68.24 | 88.71 | 94.31 | |
|
|
72.91 |
|
|
|
|
|
|
|
|
|
顶级CUHK03匹配比较。
|
|
||||
|---|---|---|---|---|
|
|
|
|
|
|
| F | LOMO [ |
52.2 | 82.23 | 92.14 |
| 高格( |
67.3 | 91.0 | 96.0 | |
|
|
||||
| DF | DCAF [ |
74.21 | 94.33 | 97.54 |
|
|
||||
| DFM | DGD [ |
75.3 | - - - - - - | - - - - - - |
| Quadruplet-net [ |
75.53 | 95.15 | 99.16 | |
| MuDeep [ |
76.87 | 96.12 | 98.41 | |
| E2E-CAN [ |
77.6 | 95.2 | 99.3 | |
| JLML [ |
83.2 | 98.0 | 99.4 | |
| DLPA [ |
85.4 | 97.6 | 99.4 | |
|
|
||||
| 米 | SS-SVM [ |
57.0 | 85.7 | 94.3 |
| 零Sp。 |
62.55 | 90.05 | 94.80 | |
| 舰导弹( |
76.6 | 94.6 | 98.0 | |
| WARCA [ |
78.38 | 94.55 | - - - - - - | |
|
|
78.83 | 95.97 | 98.37 | |
|
|
83.32 |
|
|
|
|
|
|
|
|
|
|
|
||||
|
|
||||
|
|
|
|
|
|
|
|
||||
| F | LOMO [ |
46.25 | 78.9 | 88.55 |
| 高格( |
65.5 | 88.4 | 93.7 | |
|
|
||||
| DF | SIR-CIR [ |
52.17 | 83.7 | 90.4 |
| DCAF [ |
67.99 | 91.04 | 95.36 | |
|
|
||||
| DFM | LSTM [ |
57.3 | 80.10 | 88.3 |
| GS-CNN [ |
68.1 | 88.1 | 94.6 | |
| E2E-CAN [ |
69.2 | 88.5 | 94.1 | |
| MuDeep [ |
75.64 | 94.36 | 97.46 | |
| JLML [ |
80.6 | 96.9 | 98.7 | |
| DLPA [ |
|
|
|
|
|
|
||||
| 米 | l - 1图( |
39.0 | - - - - - - | - - - - - - |
| SS-SVM [ |
51.2 | 80.8 | 89.6 | |
| 零Sp。 |
54.70 | 84.75 | 94.80 | |
| 舰导弹( |
72.7 | 92.4 | 96.1 | |
|
|
72.98 | 91.7 | 93.02 | |
|
|
78.68 | 95.60 | 98.09 | |
|
|
80.77 | 96.94 | 98.67 | |
在表
多通道转换效果+骗子阻力(毒蛇,<我nline-formula>
| 方法 |
|
|
|
|---|---|---|---|
|
|
45.27 | 82.16 | 91.1 |
|
|
|
82.90 | 91.63 |
|
|
48.88 | 85.33 | 95.37 |
|
|
|
85.79 | 95.73 |
|
|
52.10 | 87.14 | 96.87 |
|
|
|
87.95 | 97.29 |
此外,我们还可以看到一个积极的结果当骗子从增量<我t一个lic>
画廊我t一个lic>视图还在学习指标。两个(<我nline-formula>
有趣的是,在我们的工作这个骗子电阻可以进一步加强。这是通过使用<我t一个lic>
交叉观点骗子我t一个lic>(CVI)。从表
最后,在图
表现在rank@1中心<我nline-formula>
我们的运行时计算IRM3方法使用MK-LFDA [
运行时比较CUHK03(以秒为单位)。
| 方法 | MK-LFDA [ |
XQDA [ |
K-LFDA [ |
|---|---|---|---|
| 培训 | 171.26 | 174.7 | 160.03 |
| 测试 | 28.8 | 30.23 | 32.45 |
本文提出一种度量学习方法,利用多通道转换和交叉观点骗子改善的能力度量不同人之间的区分,以及增强抑制能力下降大量现实世界多样化的骗子。在现实世界中大多数行人图像是多通道,在公共场所几个人分享相似的衣服;因此,我们IRM3 reidentification学会解决这些问题,在公共场所人跟踪。广泛的实验三个挑战性的数据集(毒蛇,CUHK01 CUHK03)证明的有效性我们IRM3指标已超过此前的许多先进的指标。此外,我们打算进一步扩展我们的方法用于测试在真实世界场景中,打算解决其他问题的实时实现。
作者宣称没有利益冲突。