CIN 计算智能和神经科学 1687 - 5273 1687 - 5265 Hindawi 10.1155 / 2021/9968716 9968716 研究文章 Quadruplet-Based跨通道深处散列 黄ydF4y2Ba 1 https://orcid.org/0000 - 0002 - 3836 - 6396 1 年兽 2 发烟 1 https://orcid.org/0000 - 0001 - 6198 - 489 x Xitao 1 Raşit 1 重点实验室智能信息处理和控制 重庆市高等教育机构 重庆三峡大学 重庆40044 中国 sanxiau.edu.cn 2 电子与计算机工程系 哥伦比亚特区的大学 华盛顿特区。 SC 20008 美国 udc.edu 2021年 2 7 2021年 2021年 18 3 2021年 24 5 2021年 14 6 2021年 2 7 2021年 2021年 版权©2021桓刘et al。 这是一个开放的文章在知识共享归属许可下发布的,它允许无限制的使用,分布和繁殖在任何媒介,提供最初的工作是正确的引用。

最近,受益于散列的存储和检索效率和深层神经网络强大的区别的特征提取能力,跨通道深处散列检索吸引了越来越多的关注。保护跨通道的语义相似实例在哈希映射过程中,大多数现有的跨通道深处散列方法通常用成对学习深哈希网络损失或三联体的损失。然而,这些方法可能没有完全探索跨形式的相似关系。为了解决这个问题,在这篇文章中,我们介绍一个成套的损失为跨通道深处散列和提出一个quadruplet-based跨通道深处散列(称为QDCMH)方法。广泛的实验在两个基准跨通道检索数据表明,我们建议的方法达到最先进的性能和展示在跨通道散列成套的效率损失。

1。介绍</t我tle> <p>随着大数据的时代,互联网上有大量的多媒体数据飙升,比如图像、视频和文本。这些数据通常存在于多样化的形式,例如,可能存在一个文本数据和音频数据描述视频数据或图像数据。由于数据从不同的方法可能有紧凑的语义相关性,跨通道检索(<xgydF4y2Baref ref-type="bibr" rid="B1"> 1</xgydF4y2Baref>,<xgydF4y2Baref ref-type="bibr" rid="B2"> 2</xgydF4y2Baref>]提出检索语义相似的数据从一个形态在查询数据从一个不同的形态。受益于高效率、低成本,hashing-based跨通道检索(跨通道散列)<xgydF4y2Baref ref-type="bibr" rid="B3"> 3</xgydF4y2Baref>- - - - - -<xgydF4y2Baref ref-type="bibr" rid="B6"> 6</xgydF4y2Baref>已经引起广泛的关注。跨通道散列的目标是将模态异构数据映射到一个共同的二进制空间和确保语义相似/不同的跨通道数据相似/不同的哈希码。跨通道散列方法通常可以实现性能优越;尽管如此,大多数现有的跨通道敏感哈希散列方法(如跨通道相似(CMSSH) [<xgydF4y2Baref ref-type="bibr" rid="B7"> 7</xgydF4y2Baref>)、语义相关性最大化(SCM) (<xgydF4y2Baref ref-type="bibr" rid="B8"> 8</xgydF4y2Baref>),semantics-preserving散列(SePH) [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>,广义的语义保留哈希(GSPH) [<xgydF4y2Baref ref-type="bibr" rid="B10"> 10</xgydF4y2Baref>学习])是基于手工制作的功能,不能有效地捕获异构的不同形式之间的相关性,从而可能导致低劣的性能。</p><p>gydF4y2Ba在过去的十年中,深卷积神经网络(<xgydF4y2Baref ref-type="bibr" rid="B11"> 11</xgydF4y2Baref>,<xgydF4y2Baref ref-type="bibr" rid="B12"> 12</xgydF4y2Baref>)已经成功地使用在许多计算机视觉任务,因此,一些研究者也将其部署在跨通道散列,如跨通道深处散列(DCMH) [<xgydF4y2Baref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>],成对关系指导深哈希(PRDH) [<xgydF4y2Baref ref-type="bibr" rid="B14"> 14</xgydF4y2Baref>),self-supervised敌对的散列(SSAH) [<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>],triplet-based深哈希(TDH) [<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>]。跨通道散列方法与深层神经网络有效整合学习和散列表示散列函数学习到一个端到端的框架,它可以更有效地获取异构跨通道之间的相关性,从而获得更好的跨通道检索性能。</p><p>gydF4y2Ba到目前为止,大多数跨通道深处散列方法利用成对损失(如[<xgydF4y2Baref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>- - - - - -<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>])或三联体损失(如[<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>)保持语义相关性在散列表示学习过程。然而,成对的损失和三重态通过散列方法遭受泛化能力薄弱从训练集与测试集(<xgydF4y2Baref ref-type="bibr" rid="B17"> 17</xgydF4y2Baref>,<xgydF4y2Baref ref-type="bibr" rid="B18"> 18</xgydF4y2Baref>),如图<xgydF4y2Baref ref-type="fig" rid="fig1a"> 1(一)</xgydF4y2Baref>。相反,成套的损失,提出了利用图像散列检索(<xgydF4y2Baref ref-type="bibr" rid="B17"> 17</xgydF4y2Baref>和人reidentification<xgydF4y2Baref ref-type="bibr" rid="B18"> 18</xgydF4y2Baref>),在这些作品中,已经证明,通过四症模型可以提高泛化能力。因此,跨通道散列组合成套的损失作为一个自然的解决方案来提高跨通道的性能散列,如图<xgydF4y2Baref ref-type="fig" rid="fig1b"> 1 (b)</xgydF4y2Baref>。</p><f我g-group id="fig1"> <label>图1</lgydF4y2Baabel> <p>(a)三联体通过跨通道散列方法受到疲软的泛化能力训练集和测试集,因为测试实例属于一类<我nl我ne-graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig-inline.001"></inline-graphic>紧凑,不能映射到二进制代码(见右下角)。(b)三联体通过跨通道散列方法可以项目测试实例,这属于一类<我nl我ne-graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig-inline.001"></inline-graphic>成二进制空间紧凑(见右下角)。</p><f我g我d="fig1a"> <label>(一)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.001a"></graphic> </fig> <fig id="fig1b"> <label>(b)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.001b"></graphic> </fig> </fig-group> <p>为此,在本文中,我们介绍了成套的损失为跨通道散列和提出一个quadruplet-based跨通道深处散列方法(QDCMH)。具体来说,QDCMH首先定义了一个quadruplet-based跨通道语义保护模块。后来,QDCMH集成了这个模块,散列表示学习,哈希代码生成到一个端到端的框架。最后,两个基准跨通道检索数据集进行实验来验证该方法的性能。我们提出的主要贡献QDCMH包括以下:<l我st> <list-item> <label>(我)</lgydF4y2Baabel> </list-item> </list></p> <p>我们引进成套的损失在跨通道检索并提出一种新颖的跨通道深处散列方法。我们所知,这是第一个工作将成套的损失引入跨通道散列检索。</p><l我st-item> <label>(2)</lgydF4y2Baabel> <p>我们进行广泛的实验基准跨通道检索数据集来调查我们的提议QDCMH的性能。</p></l我st-item> <p></p> <p>本文的其余部分组织如下。部分<xgydF4y2Baref ref-type="sec" rid="sec2"> 2</xgydF4y2Baref>阐述我们的提议quadruplet-based跨通道深处散列方法。部分<xgydF4y2Baref ref-type="sec" rid="sec3"> 3</xgydF4y2Baref>礼物QDCMH的学习算法。部分<xgydF4y2Baref ref-type="sec" rid="sec4"> 4</xgydF4y2Baref>实验结果和相应的分析。部分<xgydF4y2Baref ref-type="sec" rid="sec5"> 5</xgydF4y2Baref>总结我们的工作。</p></gydF4y2Basec> <sec id="sec2"> <title>2。该方法</t我tle> <p>在本节中,我们详细提出quadruplet-based跨通道深处散列(QDCMH)方法有以下部分:符号,quadruplet-based跨通道语义保护模块,功能学习网络和哈希函数的学习。图<xgydF4y2Baref ref-type="fig" rid="fig2"> 2</xgydF4y2Baref>介绍了我们提出的流程图QDCMH,配合quadruplet-based跨通道语义保护模块,散列表示学习,和哈希码生成到一个端到端的框架。在我们建议的QDCMH方法中,我们假设每个实例有两个模式,即。,an image modality and a text modality, but they can be easily applied to multimodalities.</p><f我g-group id="fig2"> <label>图2</lgydF4y2Baabel> <p>流程图的quadruplet-based跨通道深处散列(QDCMH)方法。QDCMH包括三个步骤:(1)quadruplet-based跨通道语义保护模块,(2)一个古典卷积神经网络用于学习image-modality特性和TxtNet SSAH [<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>]采用学习text-modality特性,和(3)联运成套的损失是用来有效地捕获相关的语义信息在学习过程特性和量化的损失是用来减少信息损失在哈希码生成程序。(一)成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M1"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>,它利用图像实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M2"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>检索三个文本实例:<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M3"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M4"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M5"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>。<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M6"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M7"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>至少有一个共同的标签,而<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M8"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M9"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M10"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M11"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M12"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M13"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个两两实例和每个成对的两个实例没有共同的标签。(b)成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M14"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>,利用文本实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M15"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>检索三个图像实例:<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M16"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M17"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M18"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>。<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M19"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M20"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>至少有一个共同的标签,而<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M21"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M22"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M23"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M24"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M25"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M26"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个两两实例和每个成对的两个实例没有共同的标签。</p><f我g我d="fig2a"> <label>(一)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.002a"></graphic> </fig> <fig id="fig2b"> <label>(b)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.002b"></graphic> </fig> </fig-group> <sec id="sec2.1"> <title>2.1。符号</t我tle> <p>假设训练数据组成<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M27"> <mml:mi> n</gydF4y2Bamml:mi> </mml:math> </inline-formula>图像文字对,即。,the original image features<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M28"> <mml:mi> V</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mi> R</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> v</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msup> </mml:math> </inline-formula>和原文功能<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M29"> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mi> R</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> t</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msup> </mml:math> </inline-formula>。除此之外,有一个标签向量与每一对图像文字和标签向量矩阵对所有培训实例构成标签<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M30"> <mml:mi> l</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mi> R</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> l</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msup> </mml:math> </inline-formula>。<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M31"> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> v</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M32"> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> t</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>相应的原始尺寸的图像特征和文本特征,分别和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M33"> <mml:msub> <mml:mrow> <mml:mi> d</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> l</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>类类别的总数。如果图像文字对<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M34"> <mml:mfenced open="{" close="}" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>连接到<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M35"> <mml:mi> j</gydF4y2Bamml:mi> </mml:math> </inline-formula>th类别,然后<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M36"> <mml:msub> <mml:mrow> <mml:mi> l</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mi> j</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 1</gydF4y2Bamml:mn> </mml:math> </inline-formula>,否则<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M37"> <mml:msub> <mml:mrow> <mml:mi> l</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mi> j</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 0</gydF4y2Bamml:mn> </mml:math> </inline-formula>。成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M38"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>表示,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M39"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>从图像形态是一个查询实例,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M40"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个检索实例的文本形态,在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M41"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M42"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>至少有一个共同的类别,而<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M43"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M44"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M45"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M46"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M47"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M48"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个两两实例和每个成对的两个实例没有共同的标签。</p><p>gydF4y2Ba与已知的成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M49"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>,我们的目标提出QDCMH是学习相应的哈希码<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M50"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>,在那里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M51"> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>实例的哈希码吗<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M52"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,分别。学习上面的哈希码,我们首先学习散列表示<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M53"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>从四胞胎之一<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M54"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>深层神经网络,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M55"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mi> f</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M56"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mi> g</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>散列表示的实例吗<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M57"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M58"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,分别。<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M59"> <mml:mi> f</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mo> 。</gydF4y2Bamml:mo> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M60"> <mml:mi> g</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mo> 。</gydF4y2Bamml:mo> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>散列表示学习函数图像形态和文本形态,分别。<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M61"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M62"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是深层神经网络的参数提取图像形态特征和文本形态,分别。其次,我们可以利用以下符号函数大约散列表示映射到相应的哈希码,即,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M63"> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mtext> 标志</gydF4y2Bamml:mtext> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M64"> <mml:msub> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mtext> 标志</gydF4y2Bamml:mtext> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>。同样,我们可以学到成套的哈希码<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M65"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>。为了方便起见,我们表示所有训练图像文字对的哈希码,所有训练图像的散列表示实例,和散列表示的训练文本实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M66"> <mml:mi> B</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mfenced open="{" close="}" separators="|"> <mml:mrow> <mml:mo> −</gydF4y2Bamml:mo> <mml:mn> 1,- 1</gydF4y2Bamml:mn> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:mi> k</gydF4y2Bamml:mi> </mml:mrow> </mml:msup> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M67"> <mml:mi> F</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mi> R</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:mi> k</gydF4y2Bamml:mi> </mml:mrow> </mml:msup> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M68"> <mml:mi> G</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mi> R</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mo> ×</gydF4y2Bamml:mo> <mml:mi> k</gydF4y2Bamml:mi> </mml:mrow> </mml:msup> </mml:math> </inline-formula>分别在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M69"> <mml:mi> k</gydF4y2Bamml:mi> </mml:math> </inline-formula>哈希码的长度是:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M70"> <mml:mtable> <mml:mlabeledtr id="EEq1"> <mml:mtd> <mml:mtext> (1)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:mi> y</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mrow> <mml:mfenced open="{" separators="|"> <mml:mrow> <mml:mtable class="cases"> <mml:mtr columnalign="left"> <mml:mtd columnalign="left"> <mml:mrow> <mml:mn> 1</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mrow> </mml:mtd> <mml:mtd columnalign="left"> <mml:mrow> <mml:mtext> 如果</gydF4y2Bamml:mtext> <mml:mi> x</gydF4y2Bamml:mi> <mml:mo> ></gydF4y2Bamml:mo> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:mi> x</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:mi> R</gydF4y2Bamml:mi> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mrow> </mml:mtd> </mml:mtr> <mml:mtr columnalign="left"> <mml:mtd columnalign="left"> <mml:mrow> <mml:mo> −</gydF4y2Bamml:mo> <mml:mn> 1</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mrow> </mml:mtd> <mml:mtd columnalign="left"> <mml:mrow> <mml:mtext> 如果</gydF4y2Bamml:mtext> <mml:mi> x</gydF4y2Bamml:mi> <mml:mo> <</gydF4y2Bamml:mo> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:mi> x</gydF4y2Bamml:mi> <mml:mo> ∈</gydF4y2Bamml:mo> <mml:mi> R</gydF4y2Bamml:mi> <mml:mo> 。</gydF4y2Bamml:mo> </mml:mrow> </mml:mtd> </mml:mtr> </mml:mtable> </mml:mrow> </mml:mfenced> </mml:mrow> </mml:mtd> </mml:mlabeledtr> </mml:mtable> </mml:math> </disp-formula></p> </sec> <sec id="sec2.2"> <title>2.2。Quadruplet-Based跨通道语义保护模块</t我tle> <p>在跨通道散列检索给定图像实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M71"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和一个文本实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M72"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> j</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,棘手的散列码学习过程保持语义相对论形式穿越巨大的语义鸿沟。为了解决这个问题,DCMH [<xgydF4y2Baref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>)定义成对损失相似/不同的图像文字对映射到相似/不同的哈希码。TDH [<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>)利用三联体丧失学习类似的哈希码类似的跨通道实例和为语义无关紧要的跨通道实例生成不同的哈希码。成对的损失和三重态损失都可以保存在原始实例空间相关性;然而,成对的损失——和三联体通过散列方法常常遭受较弱的泛化能力从训练集与测试集(<xgydF4y2Baref ref-type="bibr" rid="B17"> 17</xgydF4y2Baref>,<xgydF4y2Baref ref-type="bibr" rid="B18"> 18</xgydF4y2Baref>]。为了解决这个问题,在这一节中,语义保留quadruplet-based跨通道模块提出了提高泛化能力和更好的保护跨通道的语义相关性散列。</p><p>gydF4y2Ba对于一个成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M73"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>期间,我们应该保持语义相关性不变的散列表示学习,也就是说,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M74"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>应该是类似于<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M75"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M76"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>应该是不同的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M77"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M78"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M79"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>应该是不同的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M80"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>。因此,我们可以定义以下成套的损失跨通道散列:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M81"> <mml:mtable> <mml:mlabeledtr id="EEq2"> <mml:mtd rowspan="2"> <mml:mtext> (2)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:msubsup> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 四胞胎之一</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msubsup> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> <mml:mo> =</gydF4y2Bamml:mo> <mml:mstyle displaystyle="true"> <mml:munder> <mml:mo stretchy="true"> ∑</gydF4y2Bamml:mo> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:munder> <mml:mrow> <mml:mi mathvariant="normal"> 马克斯</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> −</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> +</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> </mml:mstyle> </mml:mtd> </mml:mlabeledtr> <mml:mtr> <mml:mtd> <mml:mo> +</gydF4y2Bamml:mo> <mml:mstyle displaystyle="true"> <mml:munder> <mml:mo stretchy="true"> ∑</gydF4y2Bamml:mo> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:munder> <mml:mrow> <mml:mi mathvariant="normal"> 马克斯</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> −</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> +</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> </mml:mstyle> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mtd> </mml:mtr> </mml:mtable> </mml:math> </disp-formula>在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M82"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是一个查询实例的图像形态,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M83"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M84"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M85"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个检索实例的文本形态和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M86"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M87"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>语义相似。而<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M88"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M89"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M90"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M91"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M92"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M93"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>三个两两的实例,每个成对的两个实例具有不同的语义。方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq2"> 2</xgydF4y2Baref>)表示,类似的跨通道成对的散列表示实例的距离应该小于不同的成对的实例(从通道间和intramodalities)与积极的保证金<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M94"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mtext> </mml:mtext> <mml:mtext> 或</gydF4y2Bamml:mtext> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>。这可以确保类似的跨通道实例相似而不同情况下具有不同的哈希散列表示表示。通过这成套的损失,跨通道语义相关性可以保存在散列表示学习阶段。</p><p>gydF4y2Ba同样,成套的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M95"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>,我们可以有以下跨通道成套的损失:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M96"> <mml:mtable> <mml:mlabeledtr id="EEq3"> <mml:mtd rowspan="2"> <mml:mtext> (3)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:msubsup> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 四胞胎之一</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msubsup> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> <mml:mo> =</gydF4y2Bamml:mo> <mml:mstyle displaystyle="true"> <mml:munder> <mml:mo stretchy="true"> ∑</gydF4y2Bamml:mo> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:munder> <mml:mrow> <mml:mi mathvariant="normal"> 马克斯</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> −</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> +</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 3</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> </mml:mstyle> </mml:mtd> </mml:mlabeledtr> <mml:mtr> <mml:mtd> <mml:mo> +</gydF4y2Bamml:mo> <mml:mstyle displaystyle="true"> <mml:munder> <mml:mo stretchy="true"> ∑</gydF4y2Bamml:mo> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:munder> <mml:mrow> <mml:mi mathvariant="normal"> 马克斯</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mn> 0</gydF4y2Bamml:mn> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> −</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> −</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> +</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 4</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> </mml:mstyle> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mtd> </mml:mtr> </mml:mtable> </mml:math> </disp-formula>在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M97"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是一个查询实例的文本形态,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M98"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M99"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M100"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>从图像形态,是三个检索实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M101"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M102"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M103"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M104"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:math> </inline-formula>散列表示实例吗<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M105"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M106"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M107"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M108"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>分别为,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M109"> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 3</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M110"> <mml:msub> <mml:mrow> <mml:mi> α</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mn> 4</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是两个积极的利润。方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq3"> 3</xgydF4y2Baref>)不同方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq2"> 2</xgydF4y2Baref>)查询实例的形态和检索实例的形态是逆。</p></gydF4y2Basec> <sec id="sec2.3"> <title>2.3。学习和散列表示散列码学习</t我tle> <p>为每个成套的训练集,很容易学习他们的散列表示,充分保护的语义相似度高于quadruplet-based跨通道语义相关性保护模块,我们有以下学习损耗散列表示:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M111"> <mml:mtable> <mml:mlabeledtr id="EEq4"> <mml:mtd> <mml:mtext> (4)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:msub> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 表示</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mfrac> <mml:mn> 1</gydF4y2Bamml:mn> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfrac> <mml:msubsup> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 四胞胎之一</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msubsup> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> <mml:mo> +</gydF4y2Bamml:mo> <mml:mfrac> <mml:mi> β</gydF4y2Bamml:mi> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfrac> <mml:msubsup> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 四胞胎之一</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msubsup> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mtd> </mml:mlabeledtr> </mml:mtable> </mml:math> </disp-formula>在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M112"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是利用图像检索文本的四胞胎,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M113"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>是四胞胎的数量,利用文本检索图像,然后呢<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M114"> <mml:mi> β</gydF4y2Bamml:mi> </mml:math> </inline-formula>是一个hyperparameter平衡两个部分。</p><p>gydF4y2Ba此外,学习质量的哈希码,我们从学习生成哈希码散列表示的符号函数方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq1"> 1</xgydF4y2Baref>),最后哈希码矩阵生成所有训练图像文字对如下:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M115"> <mml:mtable> <mml:mlabeledtr id="EEq5"> <mml:mtd> <mml:mtext> (5)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:mi> B</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mtext> 标志</gydF4y2Bamml:mtext> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mfrac> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> <mml:mo> +</gydF4y2Bamml:mo> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mfrac> </mml:mrow> </mml:mfenced> <mml:mo> 。</gydF4y2Bamml:mo> </mml:mtd> </mml:mlabeledtr> </mml:mtable> </mml:math> </disp-formula></p> <p>作为<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M116"> <mml:mi> F</gydF4y2Bamml:mi> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M117"> <mml:mi> G</gydF4y2Bamml:mi> </mml:math> </inline-formula>是实值特性,减少信息损失的<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M118"> <mml:mi> F</gydF4y2Bamml:mi> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M119"> <mml:mi> G</gydF4y2Bamml:mi> </mml:math> </inline-formula>来<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M120"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>在方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq5"> 5</xgydF4y2Baref>),需要力量<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M121"> <mml:mi> F</gydF4y2Bamml:mi> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M122"> <mml:mi> G</gydF4y2Bamml:mi> </mml:math> </inline-formula>尽可能接近<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M123"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>;因此,我们引入量化损失如下:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M124"> <mml:mtable> <mml:mlabeledtr id="EEq6"> <mml:mtd> <mml:mtext> (6)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:msub> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 量化</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mfrac> <mml:mrow> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> <mml:mo> −</gydF4y2Bamml:mo> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> <mml:mo> +</gydF4y2Bamml:mo> <mml:msubsup> <mml:mrow> <mml:mfenced open="‖" close="‖" separators="|"> <mml:mrow> <mml:mi> B</gydF4y2Bamml:mi> <mml:mo> −</gydF4y2Bamml:mo> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mn> 2</gydF4y2Bamml:mn> </mml:msubsup> </mml:mrow> <mml:mrow> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> n</gydF4y2Bamml:mi> <mml:mi> k</gydF4y2Bamml:mi> </mml:mrow> </mml:mfrac> <mml:mo> 。</gydF4y2Bamml:mo> </mml:mtd> </mml:mlabeledtr> </mml:mtable> </mml:math> </disp-formula></p> <p>将散列表示损失和量化损失在一起,整个损失函数如下:<d我sp-formula> <mml:math display="block" xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M125"> <mml:mtable> <mml:mlabeledtr id="EEq7"> <mml:mtd> <mml:mtext> (7)</gydF4y2Bamml:mtext> </mml:mtd> <mml:mtd> <mml:mi> J</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 表示</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> <mml:mo> +</gydF4y2Bamml:mo> <mml:mi> γ</gydF4y2Bamml:mi> <mml:msub> <mml:mrow> <mml:mi> J</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 量化</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> </mml:mtd> </mml:mlabeledtr> </mml:mtable> </mml:math> </disp-formula>在哪里<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M126"> <mml:mi> γ</gydF4y2Bamml:mi> </mml:math> </inline-formula>是hyperparameter平衡损失和散列表示量化损失。</p></gydF4y2Basec> <sec id="sec2.4"> <title>2.4。特征提取的网络</t我tle> <p>在QDCMH,特征提取包括两个深层神经网络:一个经典的卷积神经网络用于提取图像的特点和多尺度融合模型是利用学习从文本功能。具体来说,对于图像形态,我们部署AlexNet [<xgydF4y2Baref ref-type="bibr" rid="B11"> 11</xgydF4y2Baref>]在ImageNet pretrained [<xgydF4y2Baref ref-type="bibr" rid="B19"> 19</xgydF4y2Baref>数据集。然后调整最后一层使用一种新的完全由散列连接层<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M127"> <mml:mi> k</gydF4y2Bamml:mi> </mml:math> </inline-formula>隐藏的节点。因此,学习已经嵌入深度特性<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M128"> <mml:mi> k</gydF4y2Bamml:mi> </mml:math> </inline-formula>维汉明空间。用于文本形态,TxtNet SSAH [<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>使用),包括一个三层前馈神经网络和多尺度(MS)融合模型<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M129"> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:mtext> 输入</gydF4y2Bamml:mtext> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mtext> 女士</gydF4y2Bamml:mtext> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mn> 4096年</gydF4y2Bamml:mn> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mn> 512年</gydF4y2Bamml:mn> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> k</gydF4y2Bamml:mi> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>。</p></gydF4y2Basec> </sec> <sec id="sec3"> <title>3所示。学习算法的QDCMH</t我tle> <p>QDCMH,我们利用交流学习策略参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M130"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>深层神经网络的图像形态和参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M131"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>深层神经网络的文本形态和哈希码矩阵<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M132"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>所有训练图像文字对。当我们学习之一<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M133"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M134"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M135"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>,我们保持其他两个固定。具体算法QDCMH中描述算法<xgydF4y2Baref ref-type="other" rid="alg1"> 1</xgydF4y2Baref>。</p><p我d="alg1"> <list list-content="algorithm"> <title><大胆>算法1:< /大胆> QDCMH: quadruplet-based深跨通道散列。</t我tle> <list-item> <label></label> </list-item> </list></p> <p> <bold> 输入:</gydF4y2Babold></p> <list-item> <label></label> <p>训练数据集:<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M136"> <mml:mfenced open="{" close="}" separators="|"> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> <mml:mo> ,</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ,</gydF4y2Bamml:mo> <mml:mi> l</gydF4y2Bamml:mi> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>。算法的最大数量的时代<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M137"> <mml:mtext> max_epoch</gydF4y2Bamml:mtext> </mml:math> </inline-formula>。Mini-batch大小<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M138"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 批处理</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 128年</gydF4y2Bamml:mn> </mml:math> </inline-formula>。</p></l我st-item> <list-item> <label></label> <p> <bold> 输出:</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M139"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M140"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>的深层神经网络,和相应的哈希码矩阵<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M141"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>。</p></l我st-item> <list-item> <label>(1)</lgydF4y2Baabel> <p>生成<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M142"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mtext> </mml:mtext> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>四胞胎(名为<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M143"> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>)从训练集生成<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M144"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mtext> </mml:mtext> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 问</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> p</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 1</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>四胞胎(名为<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M145"> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>从训练集)。</p></l我st-item> <list-item> <label></label> <p>(2)初始化深层神经网络参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M146"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M147"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>,整个训练图像散列表示<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M148"> <mml:mi> F</gydF4y2Bamml:mi> </mml:math> </inline-formula>散列表示,整个训练文本<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M149"> <mml:mi> G</gydF4y2Bamml:mi> </mml:math> </inline-formula>哈希码矩阵<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M150"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>,数字时代<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M151"> <mml:msub> <mml:mrow> <mml:mtext> batchnum</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> v</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mtext> batchnum</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> t</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mo> ⌈</gydF4y2Bamml:mo> <mml:mrow> <mml:mrow> <mml:mrow> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> +</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:mrow> <mml:mo> /</gydF4y2Bamml:mo> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mtext> 批处理</gydF4y2Bamml:mtext> </mml:mrow> </mml:msub> </mml:mrow> </mml:mrow> </mml:mrow> <mml:mo> ⌉</gydF4y2Bamml:mo> </mml:math> </inline-formula>。</p></l我st-item> <list-item> <label></label> <p>(3)<gydF4y2Babold> 重复</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>(4)<gydF4y2Babold> 为</gydF4y2Babold> <inline-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M152"> <mml:mi> j</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 1</gydF4y2Bamml:mn> <mml:mtext> </mml:mtext> <mml:mtext> 来</gydF4y2Bamml:mtext> <mml:msub> <mml:mrow> <mml:mtext> batchnum</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> v</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula> <bold> 做</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>(5)随机样本<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M153"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> v</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>图像<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M154"> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ∪</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>构建一个mini-batch图像。</p></l我st-item> <list-item> <label></label> <p>(6)为每一个实例<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M155"> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>mini-batch,计算<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M156"> <mml:msub> <mml:mrow> <mml:mi> F</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mi> f</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>向前传播。</p></l我st-item> <list-item> <label></label> <p>(7)更新<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M157"> <mml:mi> F</gydF4y2Bamml:mi> </mml:math> </inline-formula>。</p></l我st-item> <list-item> <label></label> <p>(8)计算的导数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M158"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>在方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq7"> 7</xgydF4y2Baref>)。</p></l我st-item> <list-item> <label></label> <p>(9)更新网络参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M159"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>利用反向传播。</p></l我st-item> <list-item> <label></label> <p>(10)<gydF4y2Babold> 结束了</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>(11)<gydF4y2Babold> 为</gydF4y2Babold> <inline-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M160"> <mml:mi> j</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 1</gydF4y2Bamml:mn> <mml:mtext> </mml:mtext> <mml:mtext> 来</gydF4y2Bamml:mtext> <mml:msub> <mml:mrow> <mml:mtext> batchnum</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> t</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula> <bold> 做</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>(12)随机样本<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M161"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> t</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>文本从<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M162"> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ∪</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mtext> 四</gydF4y2Bamml:mtext> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mn> 2</gydF4y2Bamml:mn> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>构建一个mini-batch文本。</p></l我st-item> <list-item> <label></label> <p>为每个实例(13)<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M163"> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>mini-batch,计算<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M164"> <mml:msub> <mml:mrow> <mml:mi> G</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mi> g</gydF4y2Bamml:mi> <mml:mfenced open="(" close=")" separators="|"> <mml:mrow> <mml:msub> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> ,</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:mrow> </mml:mfenced> </mml:math> </inline-formula>向前传播。</p></l我st-item> <list-item> <label></label> <p>(14)更新<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M165"> <mml:mi> G</gydF4y2Bamml:mi> </mml:math> </inline-formula>。</p></l我st-item> <list-item> <label></label> <p>(15)计算的导数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M166"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>在方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq7"> 7</xgydF4y2Baref>)。</p></l我st-item> <list-item> <label></label> <p>(16)更新网络参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M167"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>通过使用反向传播。</p></l我st-item> <list-item> <label></label> <p>(17)<gydF4y2Babold> 结束了</gydF4y2Babold></p> </list-item> <list-item> <label></label> <p>(18)更新<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M168"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>使用方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq5"> 5</xgydF4y2Baref>)。</p></l我st-item> <list-item> <label></label> <p>(19)<gydF4y2Babold> 直到</gydF4y2Babold>马克思时代数量<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M169"> <mml:mtext> max_epoch</gydF4y2Bamml:mtext> </mml:math> </inline-formula>。</p></l我st-item> <p></p> <sec id="sec3.1"> <title>3.1。更新< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M170 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > V < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >与< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M171 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > T < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >和< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M172 " > < mml: mi > B < / mml: mi > < / mml:数学> < / inline-formula >固定的</t我tle> <p>当<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M173"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M174"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>保持固定,我们利用随机梯度下降法和反向传播优化神经网络参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M175"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>。</p></gydF4y2Basec> <sec id="sec3.2"> <title>3.2。更新< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M176 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > T < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >与< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M177 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > V < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >和< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M178 " > < mml: mi > B < / mml: mi > < / mml:数学> < / inline-formula >固定的</t我tle> <p>当我们修复的值<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M179"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M180"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>,我们使用随机梯度下降法和反向传播学习深层神经网络参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M181"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>。</p></gydF4y2Basec> <sec id="sec3.3"> <title>3.3。更新< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M182 " > < mml: mi > B < / mml: mi > < / mml:数学> < / inline-formula >与< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M183 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > T < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >和< inline-formula > < mml:数学xmlns: mml = " http://www.w3.org/1998/Math/MathML " id = " M184 " > < mml: msub > < mml: mrow > < mml: mi >θ< / mml: mi > < / mml: mrow > < mml: mrow > < mml: mi > V < / mml: mi > < / mml: mrow > < / mml: msub > < / mml:数学> < / inline-formula >固定的</t我tle> <p>当深层神经网络的参数<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M185"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M186"> <mml:msub> <mml:mrow> <mml:mi> θ</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> V</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> </mml:math> </inline-formula>保持不变,哈希码矩阵<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M187"> <mml:mi> B</gydF4y2Bamml:mi> </mml:math> </inline-formula>可以优化方程(<xgydF4y2Baref ref-type="disp-formula" rid="EEq5"> 5</xgydF4y2Baref>)。</p></gydF4y2Basec> </sec> <sec id="sec4"> <title>4所示。实验</t我tle> <sec id="sec4.1"> <title>4.1。数据集</t我tle> <p>调查QDCMH的性能,我们进行实验两个基准跨通道检索数据集:MIRFLICKR-25K [<xgydF4y2Baref ref-type="bibr" rid="B20"> 20.</xgydF4y2Baref>)和微软COCO2014 (<xgydF4y2Baref ref-type="bibr" rid="B21"> 21</xgydF4y2Baref>),表中列出的数据集的简要描述<xgydF4y2Baref ref-type="table" rid="tab1"> 1</xgydF4y2Baref>。</p><tgydF4y2Baable-wrap id="tab1"> <label>表1</lgydF4y2Baabel> <p>实验数据集的简要描述。</p><tgydF4y2Baable> <thead> <tr> <th align="left">数据集</tgydF4y2Bah> <th align="center">使用</tgydF4y2Bah> <th align="center">火车</tgydF4y2Bah> <th align="center">查询</tgydF4y2Bah> <th align="center">检索</tgydF4y2Bah> <th align="center">标签尺寸</tgydF4y2Bah> <th align="center">标签</tgydF4y2Bah> </tr> </thead> <tbody> <tr> <td align="left">MIRFLICKR-25K</td><tdgydF4y2Baalign="center">20015年</td><tdgydF4y2Baalign="center">10000年</td><tdgydF4y2Baalign="center">2000年</td><tdgydF4y2Baalign="center">18015年</td><tdgydF4y2Baalign="center">1386年</td><tdgydF4y2Baalign="center">24</td></tgydF4y2Bar> <tr> <td align="left">MS-COCO2014</td><tdgydF4y2Baalign="center">122218年</td><tdgydF4y2Baalign="center">10000年</td><tdgydF4y2Baalign="center">5000年</td><tdgydF4y2Baalign="center">117218年</td><tdgydF4y2Baalign="center">2026年</td><tdgydF4y2Baalign="center">80年</td></tgydF4y2Bar> </tbody> </table> </table-wrap> </sec> <sec id="sec4.2"> <title>4.2。评价指标</t我tle> <p>在我们的实验中,我们利用意味着平均精度(地图)<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M188"> <mml:mi> N</gydF4y2Bamml:mi> </mml:math> </inline-formula>精密曲线(上<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M189"> <mml:mi> N</gydF4y2Bamml:mi> </mml:math> </inline-formula>曲线),precision-recall曲线曲线(PR)作为评价指标;这些评价指标的详细描述,请参考[<xgydF4y2Baref ref-type="bibr" rid="B22"> 22</xgydF4y2Baref>,<xgydF4y2Baref ref-type="bibr" rid="B23"> 23</xgydF4y2Baref>]。</p></gydF4y2Basec> <sec id="sec4.3"> <title>4.3。基线和实现细节</t我tle> <p>我们比较建议QDCMH方法有八个最先进的跨通道散列方法,包括四个手工制作的,即。,跨通道相似敏感哈希(CMSSH)方法(<xgydF4y2Baref ref-type="bibr" rid="B7"> 7</xgydF4y2Baref>),semantics-preserving散列(SePH) [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>)方法,语义相关性最大化(SCM)方法(<xgydF4y2Baref ref-type="bibr" rid="B8"> 8</xgydF4y2Baref>,广义的语义保留哈希(GSPH)方法(<xgydF4y2Baref ref-type="bibr" rid="B10"> 10</xgydF4y2Baref>)和四个深的特点,即。,deep cross-modal hashing (DCMH) method [<xref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>],成对关系指导深哈希(PRDH)方法(<xgydF4y2Baref ref-type="bibr" rid="B14"> 14</xgydF4y2Baref>),self-supervised敌对的散列(SSAH)方法(<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>],triplet-based深哈希(TDH)方法(<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>]。最基本的方法是仔细根据作者提供的代码实现。一些基线方法实现我们的建议和描述原始文件。</p><p>gydF4y2Ba所有的实验都使用开源的深度学习框架执行pytorch和NVIDIA GTX泰坦XP GPU服务器上运行。在我们的实验中,我们设置<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M190"> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:msub> <mml:mrow> <mml:mi> n</gydF4y2Bamml:mi> </mml:mrow> <mml:mrow> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:mrow> </mml:msub> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 10000年</gydF4y2Bamml:mn> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M191"> <mml:mtext> max_epoch</gydF4y2Bamml:mtext> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 500年</gydF4y2Bamml:mn> </mml:math> </inline-formula>,<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M192"> <mml:mi> λ</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:msup> <mml:mrow> <mml:mn> 10</gydF4y2Bamml:mn> </mml:mrow> <mml:mrow> <mml:mo> −</gydF4y2Bamml:mo> <mml:mn> 5</gydF4y2Bamml:mn> </mml:mrow> </mml:msup> </mml:math> </inline-formula>学习速率是初始化<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M193"> <mml:msup> <mml:mrow> <mml:mn> 10</gydF4y2Bamml:mn> </mml:mrow> <mml:mrow> <mml:mo> −</gydF4y2Bamml:mo> <mml:mn> 1。5</gydF4y2Bamml:mn> </mml:mrow> </mml:msup> </mml:math> </inline-formula>并逐步下降到<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M194"> <mml:msup> <mml:mrow> <mml:mn> 10</gydF4y2Bamml:mn> </mml:mrow> <mml:mrow> <mml:mo> −</gydF4y2Bamml:mo> <mml:mn> 6</gydF4y2Bamml:mn> </mml:mrow> </mml:msup> </mml:math> </inline-formula>500年时代。对于那些手工制作的基于功能的基线,每张图片的两个数据集是由一袋的话(弓)直方图或特征向量有512维度。整个实验中,我们使用<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M195"> <mml:mi> 我</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> T</gydF4y2Bamml:mi> </mml:math> </inline-formula>表示使用一个查询返回的文本和图像<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M196"> <mml:mi> T</gydF4y2Bamml:mi> <mml:mo> ⟶</gydF4y2Bamml:mo> <mml:mi> 我</gydF4y2Bamml:mi> </mml:math> </inline-formula>表示使用查询文本时返回一个形象。</p></gydF4y2Basec> <sec id="sec4.4"> <title>4.4。绩效评估和讨论</t我tle> <p>首先,我们调查QDCMH hyperparameters不同的性能<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M197"> <mml:mi> β</gydF4y2Bamml:mi> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M198"> <mml:mi> γ</gydF4y2Bamml:mi> </mml:math> </inline-formula>。为了这个目标,我们实验MIRFLICKR-25K散列码的长度<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M199"> <mml:mi> k</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 64年</gydF4y2Bamml:mn> </mml:math> </inline-formula>并记录相应的地图在不同的值<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M200"> <mml:mi> β</gydF4y2Bamml:mi> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M201"> <mml:mi> γ</gydF4y2Bamml:mi> </mml:math> </inline-formula>,如图<xgydF4y2Baref ref-type="fig" rid="fig3"> 3</xgydF4y2Baref>。我们发现时可以获得高绩效<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M202"> <mml:mi> β</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 1</gydF4y2Bamml:mn> </mml:math> </inline-formula>和<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M203"> <mml:mi> γ</gydF4y2Bamml:mi> <mml:mo> =</gydF4y2Bamml:mo> <mml:mn> 0.2</gydF4y2Bamml:mn> </mml:math> </inline-formula>。</p><f我g-group id="fig3"> <label>图3</lgydF4y2Baabel> <p>hyperparameters的敏感性分析。(一)Hyperparameter<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M204"> <mml:mi> β</gydF4y2Bamml:mi> </mml:math> </inline-formula>MIRFLICKR-25K数据集。(b) Hyperparameter<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M205"> <mml:mi> γ</gydF4y2Bamml:mi> </mml:math> </inline-formula>MIRFLICKR-25K数据集。</p><f我g我d="fig3a"> <label>(一)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.003a"></graphic> </fig> <fig id="fig3b"> <label>(b)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.003b"></graphic> </fig> </fig-group> <p>其次,验证QDCMH的性能,我们进行实验比较QDCMH基线方法而言,地图数据集MIRFLICKR-25K MS-COCO2014。表<xgydF4y2Baref ref-type="table" rid="tab2"> 2</xgydF4y2Baref>介绍了每种方法的映射为不同的散列码长度,即。16、32和64。DSePH代表的SePH方法由CNN-F原始图像的特征提取。从表<xgydF4y2Baref ref-type="table" rid="tab2"> 2</xgydF4y2Baref>下面,我们可以看到。(1)提出的地图QDCMH高于大多数基线的地图方法在大多数情况下,这表明QDCMH的优越性。我们也可以观察到SSAH优于比我们提出QDCMH在大多数情况下,这部分是由于SSAH考虑了self-supervised学习和生成对抗网络在散列表示学习过程。(2)地图QDCMH总是高于TDH的地图,这表明,成套的损失可以保留语义相关性比三联体损失跨通道散列检索。(3)地图DSePH总是高于SePH的地图,这表明深层神经网络的强大学习能力特性。(4)我们建议QDCMH可以实现更好的性能比MIRFlickr-25K MS-COCO 2014数据集的数据集,这部分是由于2014年MS-COCO实例数据集属于80个类别而MIRFlickr-25K数据集属于24类的实例,这使得产生的四胞胎MS-COCO 2014数据集有更好的泛化能力比四胞胎MIRFlickr-25K产生的数据集。</p><tgydF4y2Baable-wrap id="tab2"> <label>表2</lgydF4y2Baabel> <p>比较基线的映射在两个数据集:MIRFLICKR-25K,分别和微软COCO2014。最好的精度是粗体所示。</p><tgydF4y2Baable> <thead> <tr> <th align="left" rowspan="2">任务</tgydF4y2Bah> <th align="center" colspan="2" rowspan="2">方法</tgydF4y2Bah> <th align="center" colspan="3">MIRFlickr-25K</tgydF4y2Bah> <th align="center" colspan="3">MS-COCO</tgydF4y2Bah> </tr> <tr> <th align="center">16位</tgydF4y2Bah> <th align="center">32位</tgydF4y2Bah> <th align="center">64位</tgydF4y2Bah> <th align="center">16位</tgydF4y2Bah> <th align="center">32位</tgydF4y2Bah> <th align="center">64位</tgydF4y2Bah> </tr> </thead> <tbody> <tr> <td align="left" rowspan="10">我<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M206"> <mml:mo> ⟶</gydF4y2Bamml:mo> </mml:math> </inline-formula>T</td><tdgydF4y2Barowspan="4" align="center">手工制作的方法</td><tdgydF4y2Baalign="center">CMSSH [<xgydF4y2Baref ref-type="bibr" rid="B7"> 7</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.5600</td><tdgydF4y2Baalign="center">0.5709</td><tdgydF4y2Baalign="center">0.5836</td><tdgydF4y2Baalign="center">0.5439</td><tdgydF4y2Baalign="center">0.5450</td><tdgydF4y2Baalign="center">0.5410</td></tgydF4y2Bar> <tr> <td align="center">SePH [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6740</td><tdgydF4y2Baalign="center">0.6813</td><tdgydF4y2Baalign="center">0.6803</td><tdgydF4y2Baalign="center">0.4295</td><tdgydF4y2Baalign="center">0.4353</td><tdgydF4y2Baalign="center">0.4726</td></tgydF4y2Bar> <tr> <td align="center">SCM (<xgydF4y2Baref ref-type="bibr" rid="B8"> 8</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6354</td><tdgydF4y2Baalign="center">0.6407</td><tdgydF4y2Baalign="center">0.6556</td><tdgydF4y2Baalign="center">0.4252</td><tdgydF4y2Baalign="center">0.4344</td><tdgydF4y2Baalign="center">0.4574</td></tgydF4y2Bar> <tr> <td align="center">GSPH [<xgydF4y2Baref ref-type="bibr" rid="B10"> 10</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6068</td><tdgydF4y2Baalign="center">0.6191</td><tdgydF4y2Baalign="center">0.6230</td><tdgydF4y2Baalign="center">0.4427</td><tdgydF4y2Baalign="center">0.4733</td><tdgydF4y2Baalign="center">0.4840</td></tgydF4y2Bar> <tr> <td rowspan="6" align="center">深的方法</td><tdgydF4y2Baalign="center">DCMH [<xgydF4y2Baref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7316</td><tdgydF4y2Baalign="center">0.7343</td><tdgydF4y2Baalign="center">0.7446</td><tdgydF4y2Baalign="center">0.5228</td><tdgydF4y2Baalign="center">0.5438</td><tdgydF4y2Baalign="center">0.5419</td></tgydF4y2Bar> <tr> <td align="center">PRDH [<xgydF4y2Baref ref-type="bibr" rid="B14"> 14</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6952</td><tdgydF4y2Baalign="center">0.7072</td><tdgydF4y2Baalign="center">0.7108</td><tdgydF4y2Baalign="center">0.5238</td><tdgydF4y2Baalign="center"> <bold> 0.5521</gydF4y2Babold></td> <td align="center"> <bold> 0.5572</gydF4y2Babold></td> </tr> <tr> <td align="center">SSAH [<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center"> <bold> 0.7745</gydF4y2Babold></td> <td align="center"> <bold> 0.7882</gydF4y2Babold></td> <td align="center"> <bold> 0.7990</gydF4y2Babold></td> <td align="center">0.5127</td><tdgydF4y2Baalign="center">0.5256</td><tdgydF4y2Baalign="center">0.5067</td></tgydF4y2Bar> <tr> <td align="center">TDH [<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7423</td><tdgydF4y2Baalign="center">0.7478</td><tdgydF4y2Baalign="center">0.7512</td><tdgydF4y2Baalign="center">0.5164</td><tdgydF4y2Baalign="center">0.5222</td><tdgydF4y2Baalign="center">0.5276</td></tgydF4y2Bar> <tr> <td align="center">DSePH [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7128</td><tdgydF4y2Baalign="center">0.7285</td><tdgydF4y2Baalign="center">0.7422</td><tdgydF4y2Baalign="center">0.4621</td><tdgydF4y2Baalign="center">0.4958</td><tdgydF4y2Baalign="center">0.5112</td></tgydF4y2Bar> <tr> <td align="center">QDCMH</td><tdgydF4y2Baalign="center">0.7635</td><tdgydF4y2Baalign="center">0.7688</td><tdgydF4y2Baalign="center">0.7713</td><tdgydF4y2Baalign="center"> <bold> 0.5286</gydF4y2Babold></td> <td align="center">0.5313</td><tdgydF4y2Baalign="center">0.5371</td></tgydF4y2Bar> <tr> <td align="left" colspan="9"> <hr></td> </tr> <tr> <td align="left" rowspan="10">T<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M207"> <mml:mo> ⟶</gydF4y2Bamml:mo> </mml:math> </inline-formula>我</td><tdgydF4y2Barowspan="4" align="center">手工制作的方法</td><tdgydF4y2Baalign="center">CMSSH [<xgydF4y2Baref ref-type="bibr" rid="B7"> 7</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.5726</td><tdgydF4y2Baalign="center">0.5776</td><tdgydF4y2Baalign="center">0.5753</td><tdgydF4y2Baalign="center">0.3793</td><tdgydF4y2Baalign="center">0.3876</td><tdgydF4y2Baalign="center">0.3899</td></tgydF4y2Bar> <tr> <td align="center">SePH [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7139</td><tdgydF4y2Baalign="center">0.7258</td><tdgydF4y2Baalign="center">0.7294</td><tdgydF4y2Baalign="center">0.4348</td><tdgydF4y2Baalign="center">0.4606</td><tdgydF4y2Baalign="center">0.5195</td></tgydF4y2Bar> <tr> <td align="center">SCM (<xgydF4y2Baref ref-type="bibr" rid="B8"> 8</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6340</td><tdgydF4y2Baalign="center">0.6458</td><tdgydF4y2Baalign="center">0.6541</td><tdgydF4y2Baalign="center">0.4118</td><tdgydF4y2Baalign="center">0.4183</td><tdgydF4y2Baalign="center">0.4345</td></tgydF4y2Bar> <tr> <td align="center">GSPH [<xgydF4y2Baref ref-type="bibr" rid="B10"> 10</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.6282</td><tdgydF4y2Baalign="center">0.6458</td><tdgydF4y2Baalign="center">0.6503</td><tdgydF4y2Baalign="center">0.5435</td><tdgydF4y2Baalign="center">0.6039</td><tdgydF4y2Baalign="center">0.6461</td></tgydF4y2Bar> <tr> <td rowspan="6" align="center">深的方法</td><tdgydF4y2Baalign="center">DCMH [<xgydF4y2Baref ref-type="bibr" rid="B13"> 13</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7607</td><tdgydF4y2Baalign="center">0.7737</td><tdgydF4y2Baalign="center">0.7805</td><tdgydF4y2Baalign="center">0.4883</td><tdgydF4y2Baalign="center">0.4942</td><tdgydF4y2Baalign="center">0.5145</td></tgydF4y2Bar> <tr> <td align="center">PRDH [<xgydF4y2Baref ref-type="bibr" rid="B14"> 14</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7626</td><tdgydF4y2Baalign="center">0.7718</td><tdgydF4y2Baalign="center">0.7755</td><tdgydF4y2Baalign="center">0.5122</td><tdgydF4y2Baalign="center">0.5190</td><tdgydF4y2Baalign="center">0.5404</td></tgydF4y2Bar> <tr> <td align="center">SSAH [<xgydF4y2Baref ref-type="bibr" rid="B15"> 15</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center"> <bold> 0.7860</gydF4y2Babold></td> <td align="center"> <bold> 0.7974</gydF4y2Babold></td> <td align="center"> <bold> 0.7910</gydF4y2Babold></td> <td align="center">0.4832</td><tdgydF4y2Baalign="center">0.4831</td><tdgydF4y2Baalign="center">0.4922</td></tgydF4y2Bar> <tr> <td align="center">TDH [<xgydF4y2Baref ref-type="bibr" rid="B16"> 16</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7516</td><tdgydF4y2Baalign="center">0.7577</td><tdgydF4y2Baalign="center">0.7634</td><tdgydF4y2Baalign="center">0.5198</td><tdgydF4y2Baalign="center">0.5332</td><tdgydF4y2Baalign="center">0.5399</td></tgydF4y2Bar> <tr> <td align="center">DSePH [<xgydF4y2Baref ref-type="bibr" rid="B9"> 9</xgydF4y2Baref>]</td><tdgydF4y2Baalign="center">0.7422</td><tdgydF4y2Baalign="center">0.7578</td><tdgydF4y2Baalign="center">0.7760</td><tdgydF4y2Baalign="center">0.4616</td><tdgydF4y2Baalign="center">0.4882</td><tdgydF4y2Baalign="center">0.5305</td></tgydF4y2Bar> <tr> <td align="center">QDCMH</td><tdgydF4y2Baalign="center">0.7762</td><tdgydF4y2Baalign="center">0.7725</td><tdgydF4y2Baalign="center">0.7859</td><tdgydF4y2Baalign="center"> <bold> 0.5245</gydF4y2Babold></td> <td align="center"> <bold> 0.5398</gydF4y2Babold></td> <td align="center"> <bold> 0.5487</gydF4y2Babold></td> </tr> </tbody> </table> </table-wrap> <p>第三,进一步研究QDCMH的性能,我们绘制precision-recall曲线和顶部<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M208"> <mml:mi> N</gydF4y2Bamml:mi> </mml:math> </inline-formula>精密曲线QDCMH和基线数据集MIRFLICKR-25K方法与散列码长度64,微软COCO2014,分别提出了在数字<xgydF4y2Baref ref-type="fig" rid="fig4"> 4</xgydF4y2Baref>和<xgydF4y2Baref ref-type="fig" rid="fig5"> 5</xgydF4y2Baref>。从这个图中,我们可以看到precision-recall曲线和顶部<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M209"> <mml:mi> N</gydF4y2Bamml:mi> </mml:math> </inline-formula>精密曲线是几乎一致的映射表<xgydF4y2Baref ref-type="table" rid="tab2"> 2</xgydF4y2Baref>。</p><f我g-group id="fig4"> <label>图4</lgydF4y2Baabel> <p>数据集MIRFLICKR-25K和微软COCO2014 Precision-recall曲线。</p><f我g我d="fig4a"> <label>(一)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.004a"></graphic> </fig> <fig id="fig4b"> <label>(b)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.004b"></graphic> </fig> <fig id="fig4c"> <label>(c)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.004c"></graphic> </fig> <fig id="fig4d"> <label>(d)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.004d"></graphic> </fig> </fig-group> <fig-group id="fig5"> <label>图5</lgydF4y2Baabel> <p>前<我nl我ne-formula> <mml:math xmlns:mml="http://www.w3.org/1998/Math/MathML" id="M210"> <mml:mi> N</gydF4y2Bamml:mi> </mml:math> </inline-formula>数据集MIRFLICKR-25K和微软COCO2014精密曲线。</p><f我g我d="fig5a"> <label>(一)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.005a"></graphic> </fig> <fig id="fig5b"> <label>(b)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.005b"></graphic> </fig> <fig id="fig5c"> <label>(c)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.005c"></graphic> </fig> <fig id="fig5d"> <label>(d)</lgydF4y2Baabel> <graphic xlink:href="//www.newsama.com/downloads/journals/cin/2021/9968716.fig.005d"></graphic> </fig> </fig-group> </sec> </sec> <sec id="sec5"> <title>5。结论</t我tle> <p>在这篇文章中,我们介绍一个成套的损失在跨通道深处散列完全保留原有的语义相关性跨通道四实例,提出一个基于成套的跨通道深处散列方法(QDCMH)。QDCMH集成quadruplet-based跨通道语义相关性保护模块,学习哈希表示,哈希代码生成到一个端到端的框架。实验在两个基准跨通道检索数据证明我们提出QDCMH的效率。</p></gydF4y2Basec> <back> <sec sec-type="data-availability"> <title>数据可用性</t我tle> <p>实验数据集和相关设置中可以找到<gydF4y2Baext-link ext-link-type="uri" xlink:href="https://github.com/SWU-CS-MediaLab/MLSPH"> https://github.com/SWU-CS-MediaLab/MLSPH</gydF4y2Baext-link>。实验代码用于支持这项研究的结果将被存入github库出版后本文或可以提供的<gydF4y2Baemail> xitaozou@sanxiau.edu.cn</gydF4y2Baemail>。</p></gydF4y2Basec> <sec sec-type="COI-statement"> <title>的利益冲突</t我tle> <p>作者宣称没有利益冲突。</p></gydF4y2Basec> <ref-list> <ref id="B1" content-type="article"> <label>1</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 彭</gydF4y2Basurname> <given-names> Y。</g我ven-names> </name> <name> <surname> 黄</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 赵</gydF4y2Basurname> <given-names> Y。</g我ven-names> </name> </person-group> <article-title> 跨媒体检索的概述:概念、方法、基准,和挑战</gydF4y2Baarticle-title> <source> <italic> IEEE电路和系统视频技术</我talic> <year> 2017年</ygydF4y2Baear> <volume> 28</vgydF4y2Baolume> <issue> 9</我ssue> <fpage> 2372年</fpgydF4y2Baage> <lpage> 2385年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / TCSVT.2017.2705068</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85021953207</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B2" content-type="article"> <label>2</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 王</gydF4y2Basurname> <given-names> K。</g我ven-names> </name> <name> <surname> 阴</gydF4y2Basurname> <given-names> Q。</g我ven-names> </name> <name> <surname> 王</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 吴</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> <name> <surname> 王</gydF4y2Basurname> <given-names> l</g我ven-names> </name> </person-group> <article-title> 一个全面的调查跨通道检索</gydF4y2Baarticle-title> <source> <italic> 多媒体</我talic> <year> 2016年</ygydF4y2Baear> <comment> <ext-link ext-link-type="uri" xlink:href="https://arxiv.org/abs/1607.06215"> https://arxiv.org/abs/1607.06215</gydF4y2Baext-link> </comment> </element-citation> </ref> <ref id="B3" content-type="article"> <label>3</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 杨</gydF4y2Basurname> <given-names> E。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> T。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> 二束深散列与职业专用监管中心图片搜索</gydF4y2Baarticle-title> <source> <italic> IEEE神经网络和学习系统</我talic> <year> 2019年</ygydF4y2Baear> <volume> 31日</vgydF4y2Baolume> <issue> 6</我ssue> <fpage> 2189年</fpgydF4y2Baage> <lpage> 2201年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / TNNLS.2019.2929068</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B4" content-type="article"> <label>4</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 杨</gydF4y2Basurname> <given-names> E。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> T。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> 无监督semantic-preserving敌对的散列图片搜索</gydF4y2Baarticle-title> <source> <italic> IEEE在图像处理事务</我talic> <year> 2019年</ygydF4y2Baear> <volume> 28</vgydF4y2Baolume> <pub-id pub-id-type="publisher-id"> 2903661</pgydF4y2Baub-id> <pub-id pub-id-type="doi"> 10.1109 / tip.2019.2903661</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85067817682</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B5" content-type="article"> <label>5</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 杨</gydF4y2Basurname> <given-names> E。</g我ven-names> </name> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 李</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 李</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> 共享预测跨通道深度量化</gydF4y2Baarticle-title> <source> <italic> IEEE神经网络和学习系统</我talic> <year> 2018年</ygydF4y2Baear> <volume> 29日</vgydF4y2Baolume> <issue> 11</我ssue> <fpage> 5292年</fpgydF4y2Baage> <lpage> 5303年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / tnnls.2018.2793863</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85042118622</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B6" content-type="article"> <label>6</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 杨</gydF4y2Basurname> <given-names> E。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> T。</g我ven-names> </name> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> 敌对的例子为汉明空间搜索</gydF4y2Baarticle-title> <source> <italic> IEEE控制论</我talic> <year> 2018年</ygydF4y2Baear> <volume> 50</vgydF4y2Baolume> <issue> 4</我ssue> <fpage> 1473年</fpgydF4y2Baage> <lpage> 1484年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / TCYB.2018.2882908</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85058670681</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B7" content-type="inproceedings"> <label>7</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 布罗斯特</gydF4y2Basurname> <given-names> M . M。</g我ven-names> </name> <name> <surname> 布罗斯特</gydF4y2Basurname> <given-names> a . M。</g我ven-names> </name> <name> <surname> 米歇尔</gydF4y2Basurname> <given-names> F。</g我ven-names> </name> <name> <surname> Paragios</gydF4y2Basurname> <given-names> N。</g我ven-names> </name> </person-group> <article-title> 数据融合通过交叉模式度量学习使用similarity-sensitive散列</gydF4y2Baarticle-title> <conf-name> 2010年IEEE计算机学会学报计算机视觉与模式识别会议</gydF4y2Baconf-name> <conf-date> 2010年6月</gydF4y2Baconf-date> <conf-loc> 旧金山,加州,美国</gydF4y2Baconf-loc> <fpage> 3594年</fpgydF4y2Baage> <lpage> 3601年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / cvpr.2010.5539928</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 77955989956</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B8" content-type="inproceedings"> <label>8</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 张</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> <name> <surname> 李</gydF4y2Basurname> <given-names> W.-J。</g我ven-names> </name> </person-group> <article-title> 大规模的监督与语义相关性最大化多通道散列</gydF4y2Baarticle-title> <volume> 28</vgydF4y2Baolume> <conf-name> 《28日AAAI会议上人工智能</gydF4y2Baconf-name> <conf-date> 2014年7月</gydF4y2Baconf-date> <conf-loc> 魁北克市,加拿大魁北克</gydF4y2Baconf-loc> <issue> 1</我ssue> <fpage> 2177年</fpgydF4y2Baage> <lpage> 2183年</lpgydF4y2Baage> </element-citation> </ref> <ref id="B9" content-type="inproceedings"> <label>9</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 林</gydF4y2Basurname> <given-names> Z。</g我ven-names> </name> <name> <surname> 丁</gydF4y2Basurname> <given-names> G。</g我ven-names> </name> <name> <surname> 胡</gydF4y2Basurname> <given-names> M。</g我ven-names> </name> <name> <surname> 王</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> </person-group> <article-title> Semantics-preserving cross-view检索的散列</gydF4y2Baarticle-title> <conf-name> 学报2015年IEEE计算机视觉与模式识别会议(CVPR)</gydF4y2Baconf-name> <conf-date> 2015年6月</gydF4y2Baconf-date> <conf-loc> 波士顿,美国</gydF4y2Baconf-loc> <fpage> 3864年</fpgydF4y2Baage> <lpage> 3872年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / cvpr.2015.7299011</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 84959209380</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B10" content-type="inproceedings"> <label>10</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> Mandal</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> <name> <surname> 乔杜里</gydF4y2Basurname> <given-names> k . N。</g我ven-names> </name> <name> <surname> Biswas</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> </person-group> <article-title> 广义的语义保留哈希n-label跨通道检索</gydF4y2Baarticle-title> <conf-name> 学报2017年IEEE计算机视觉与模式识别会议(CVPR)</gydF4y2Baconf-name> <conf-date> 2017年7月</gydF4y2Baconf-date> <conf-loc> 美国檀香山,嗨</gydF4y2Baconf-loc> <fpage> 4076年</fpgydF4y2Baage> <lpage> 4084年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / cvpr.2017.282</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85044254568</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B11" content-type="article"> <label>11</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> Krizhevsky</gydF4y2Basurname> <given-names> 一个。</g我ven-names> </name> <name> <surname> Sutskever</gydF4y2Basurname> <given-names> 我。</g我ven-names> </name> <name> <surname> 辛顿</gydF4y2Basurname> <given-names> g . E。</g我ven-names> </name> </person-group> <article-title> Imagenet与深卷积神经网络分类</gydF4y2Baarticle-title> <source> <italic> ACM的通信</我talic> <year> 2012年</ygydF4y2Baear> <volume> 60</vgydF4y2Baolume> <issue> 6</我ssue> <fpage> 1097年</fpgydF4y2Baage> <lpage> 1105年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1145 / 3065386</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85020126914</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B12" content-type="inproceedings"> <label>12</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 他</gydF4y2Basurname> <given-names> K。</g我ven-names> </name> <name> <surname> 张</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 任</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> <name> <surname> 太阳</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> </person-group> <article-title> 深层残留图像识别的学习</gydF4y2Baarticle-title> <conf-name> 学报2016年IEEE计算机视觉与模式识别会议(CVPR)</gydF4y2Baconf-name> <conf-date> 2016年6月</gydF4y2Baconf-date> <conf-loc> 美国内华达州拉斯维加斯</gydF4y2Baconf-loc> <fpage> 770年</fpgydF4y2Baage> <lpage> 778年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / cvpr.2016.90</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 84986274465</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B13" content-type="inproceedings"> <label>13</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 江</gydF4y2Basurname> <given-names> 徐瑞秋</g我ven-names> </name> <name> <surname> 李</gydF4y2Basurname> <given-names> W.-J。</g我ven-names> </name> </person-group> <article-title> 深cross-mmodal哈希</gydF4y2Baarticle-title> <conf-name> 学报2017年IEEE计算机视觉与模式识别会议(CVPR)</gydF4y2Baconf-name> <conf-date> 2017年7月</gydF4y2Baconf-date> <conf-loc> 美国檀香山,嗨</gydF4y2Baconf-loc> <fpage> 3232年</fpgydF4y2Baage> <lpage> 3240年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / CVPR.2017.348</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85041908169</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B14" content-type="inproceedings"> <label>14</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 杨</gydF4y2Basurname> <given-names> E。</g我ven-names> </name> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> <name> <surname> 高</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> </person-group> <article-title> 成对关系指导深散列跨通道检索</gydF4y2Baarticle-title> <conf-name> 美国31日AAAI会议在2017年人工智能</gydF4y2Baconf-name> <conf-date> 2017年2月</gydF4y2Baconf-date> <conf-loc> 旧金山,加州,美国</gydF4y2Baconf-loc> </element-citation> </ref> <ref id="B15" content-type="inproceedings"> <label>15</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 李</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 李</gydF4y2Basurname> <given-names> N。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 高</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> Self-supervised敌对的哈希网络跨通道检索</gydF4y2Baarticle-title> <conf-name> 学报2018年IEEE / CVF计算机视觉与模式识别会议</gydF4y2Baconf-name> <conf-date> 2018年6月</gydF4y2Baconf-date> <conf-loc> 美国犹他盐湖城</gydF4y2Baconf-loc> <fpage> 4242年</fpgydF4y2Baage> <lpage> 4251年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / cvpr.2018.00446</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85062818752</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B16" content-type="article"> <label>16</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 邓</gydF4y2Basurname> <given-names> C。</g我ven-names> </name> <name> <surname> 陈</gydF4y2Basurname> <given-names> Z。</g我ven-names> </name> <name> <surname> 刘</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 高</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 道</gydF4y2Basurname> <given-names> D。</g我ven-names> </name> </person-group> <article-title> Triplet-based深散列跨通道网络检索</gydF4y2Baarticle-title> <source> <italic> IEEE图像处理</我talic> <year> 2018年</ygydF4y2Baear> <volume> 27</vgydF4y2Baolume> <issue> 8</我ssue> <fpage> 3893年</fpgydF4y2Baage> <lpage> 3903年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / tip.2018.2821921</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85046943763</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B17" content-type="article"> <label>17</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 朱</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> <name> <surname> 陈</gydF4y2Basurname> <given-names> Z。</g我ven-names> </name> <name> <surname> 赵</gydF4y2Basurname> <given-names> l</g我ven-names> </name> <name> <surname> 吴</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> </person-group> <article-title> 对图像检索Quadruplet-based深散列</gydF4y2Baarticle-title> <source> <italic> Neurocomputing</我talic> <year> 2019年</ygydF4y2Baear> <volume> 366年</vgydF4y2Baolume> <fpage> 161年</fpgydF4y2Baage> <lpage> 169年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1016 / j.neucom.2019.07.082</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 85070231464</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B18" content-type="article"> <label>18</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 陈</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> 陈</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 张</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> <name> <surname> 黄</gydF4y2Basurname> <given-names> K。</g我ven-names> </name> </person-group> <article-title> 超出三联体失:深rre-identification成套网络人</gydF4y2Baarticle-title> <source> <italic> 计算机视觉和模式识别</我talic> <year> 2017年</ygydF4y2Baear> <fpage> 403年</fpgydF4y2Baage> <lpage> 412年</lpgydF4y2Baage> <comment> <ext-link ext-link-type="uri" xlink:href="https://arxiv.org/abs/1704.01719"> https://arxiv.org/abs/1704.01719</gydF4y2Baext-link> </comment> </element-citation> </ref> <ref id="B19" content-type="inproceedings"> <label>19</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 邓</gydF4y2Basurname> <given-names> J。</g我ven-names> </name> <name> <surname> 越南盾</gydF4y2Basurname> <given-names> W。</g我ven-names> </name> <name> <surname> Socher</gydF4y2Basurname> <given-names> R。</g我ven-names> </name> <etal></etal> </person-group> <article-title> 大规模的分层图像数据库</gydF4y2Baarticle-title> <conf-name> 学报2009年IEEE计算机视觉与模式识别会议</gydF4y2Baconf-name> <conf-date> 2009年6月</gydF4y2Baconf-date> <conf-loc> 美国佛罗里达州迈阿密的</gydF4y2Baconf-loc> <fpage> 248年</fpgydF4y2Baage> <lpage> 255年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1109 / CVPR.2009.5206848</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B20" content-type="inproceedings"> <label>20.</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> Huiskes</gydF4y2Basurname> <given-names> m·J。</g我ven-names> </name> <name> <surname> 卢</gydF4y2Basurname> <given-names> m . S。</g我ven-names> </name> </person-group> <article-title> 米尔flickr检索评估</gydF4y2Baarticle-title> <conf-name> 学报第一ACM国际会议上多媒体信息检索</gydF4y2Baconf-name> <conf-date> 2008年10月</gydF4y2Baconf-date> <conf-loc> 纽约,纽约,美国</gydF4y2Baconf-loc> <fpage> 39</fpgydF4y2Baage> <lpage> 43</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1145/1460096.1460104</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 70449621223</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B21" content-type="inproceedings"> <label>21</lgydF4y2Baabel> <element-citation publication-type="confproc"> <person-group person-group-type="author"> <name> <surname> 林</gydF4y2Basurname> <given-names> T.-Y。</g我ven-names> </name> <name> <surname> 莫雅</gydF4y2Basurname> <given-names> M。</g我ven-names> </name> <name> <surname> Belongie</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> <etal></etal> </person-group> <article-title> 微软可可:常见的对象上下文</gydF4y2Baarticle-title> <conf-name> 计算机视觉的欧洲会议大会2014年</gydF4y2Baconf-name> <conf-date> 2014年9月</gydF4y2Baconf-date> <conf-loc> 瑞士苏黎世</gydF4y2Baconf-loc> <fpage> 740年</fpgydF4y2Baage> <lpage> 755年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1007 / 978 - 3 - 319 - 10602 - 1 - _48</pgydF4y2Baub-id> <pub-id pub-id-type="other"> 2 - s2.0 - 84906493406</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B22" content-type="article"> <label>22</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 王</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 邹</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 赞美上帝</gydF4y2Basurname> <given-names> e . M。</g我ven-names> </name> <name> <surname> 吴</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> </person-group> <article-title> Self-constraining和引起散列bit-scalable跨通道网络检索</gydF4y2Baarticle-title> <source> <italic> Neurocomputing</我talic> <year> 2020年</ygydF4y2Baear> <volume> 400年</vgydF4y2Baolume> <fpage> 255年</fpgydF4y2Baage> <lpage> 271年</lpgydF4y2Baage> <pub-id pub-id-type="doi"> 10.1016 / j.neucom.2020.03.019</pgydF4y2Baub-id> </element-citation> </ref> <ref id="B23" content-type="article"> <label>23</lgydF4y2Baabel> <element-citation publication-type="journal"> <person-group person-group-type="author"> <name> <surname> 邹</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 王</gydF4y2Basurname> <given-names> X。</g我ven-names> </name> <name> <surname> 赞美上帝</gydF4y2Basurname> <given-names> e . M。</g我ven-names> </name> <name> <surname> 吴</gydF4y2Basurname> <given-names> 年代。</g我ven-names> </name> </person-group> <article-title> 多标记语义保留基础深厚的跨通道散列</gydF4y2Baarticle-title> <source> <italic> 图像信号处理通信</我talic> <year> 2021年</ygydF4y2Baear> <volume> 93年</vgydF4y2Baolume> <issue> 9</我ssue> <pub-id pub-id-type="publisher-id"> 116131年</pgydF4y2Baub-id> <pub-id pub-id-type="doi"> 10.1016 / j.image.2020.116131</pgydF4y2Baub-id> </element-citation> </ref> </ref-list> </back> </article> </body> </html>