基于多分支注意力孪生网络的目标跟踪算法

TP391.4; 目标跟踪在计算机视觉任务中有重要的意义.近年来随着深度学习的发展,基于孪生网络的目标跟踪算法因其优异的性能而被广泛应用.然而,现有基于孪生网络的跟踪算法在目标发生较大形变、低分辨率、复杂背景等情况下的跟踪性能通常会显著下降.为此,文中提出了一种基于多分支注意力孪生网络的目标跟踪算法.该算法首先构建了超分辨率模块和数据增强模块,分别对目标模板进行超分辨率和数据增强,提升目标模板的特征表征能力;然后利用3个主干网络分别提取原始目标模板、超分辨率目标模板和数据增强目标模板的特征,并进行特征融合,同时在主干网络中应用了通道注意力模块和空间注意力模块,以提升特征提取能力;最后,将融合后...

Full description

Saved in:
Bibliographic Details
Published in华南理工大学学报(自然科学版) Vol. 50; no. 12; pp. 30 - 40
Main Authors 余陆斌, 田联房, 杜启亮
Format Journal Article
LanguageChinese
Published 工业和信息化部电子第五研究所,广东 广州 511370%华南理工大学 自动化科学与工程学院,广东 广州 510640 01.12.2022
南方海洋科学与工程广东实验室,广东 珠海 519000
华南理工大学 自动化科学与工程学院,广东 广州 510640
华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640
华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640%华南理工大学 自动化科学与工程学院,广东 广州 510640
华南理工大学 中新国际联合研究院,广东 广州 510555
Subjects
Online AccessGet full text
ISSN1000-565X
DOI10.12141/j.issn.1000-565X.210541

Cover

Abstract TP391.4; 目标跟踪在计算机视觉任务中有重要的意义.近年来随着深度学习的发展,基于孪生网络的目标跟踪算法因其优异的性能而被广泛应用.然而,现有基于孪生网络的跟踪算法在目标发生较大形变、低分辨率、复杂背景等情况下的跟踪性能通常会显著下降.为此,文中提出了一种基于多分支注意力孪生网络的目标跟踪算法.该算法首先构建了超分辨率模块和数据增强模块,分别对目标模板进行超分辨率和数据增强,提升目标模板的特征表征能力;然后利用3个主干网络分别提取原始目标模板、超分辨率目标模板和数据增强目标模板的特征,并进行特征融合,同时在主干网络中应用了通道注意力模块和空间注意力模块,以提升特征提取能力;最后,将融合后的特征图与待搜索区域的特征图输入区域生成网络模块,得到目标跟踪信息.实验结果表明,该算法在OTB100数据集上的精确率为0.919、成功率为0.707,在VOT2018数据集上的准确率为0.642、鲁棒性为0.149,在实际场景中的运行速度每秒至少20次,说明该算法具有优异的跟踪性能,并且在各种复杂场景下都具有良好的鲁棒性.
AbstractList TP391.4; 目标跟踪在计算机视觉任务中有重要的意义.近年来随着深度学习的发展,基于孪生网络的目标跟踪算法因其优异的性能而被广泛应用.然而,现有基于孪生网络的跟踪算法在目标发生较大形变、低分辨率、复杂背景等情况下的跟踪性能通常会显著下降.为此,文中提出了一种基于多分支注意力孪生网络的目标跟踪算法.该算法首先构建了超分辨率模块和数据增强模块,分别对目标模板进行超分辨率和数据增强,提升目标模板的特征表征能力;然后利用3个主干网络分别提取原始目标模板、超分辨率目标模板和数据增强目标模板的特征,并进行特征融合,同时在主干网络中应用了通道注意力模块和空间注意力模块,以提升特征提取能力;最后,将融合后的特征图与待搜索区域的特征图输入区域生成网络模块,得到目标跟踪信息.实验结果表明,该算法在OTB100数据集上的精确率为0.919、成功率为0.707,在VOT2018数据集上的准确率为0.642、鲁棒性为0.149,在实际场景中的运行速度每秒至少20次,说明该算法具有优异的跟踪性能,并且在各种复杂场景下都具有良好的鲁棒性.
Author 田联房
杜启亮
余陆斌
AuthorAffiliation 华南理工大学 自动化科学与工程学院,广东 广州 510640;工业和信息化部电子第五研究所,广东 广州 511370%华南理工大学 自动化科学与工程学院,广东 广州 510640;南方海洋科学与工程广东实验室,广东 珠海 519000;华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640%华南理工大学 自动化科学与工程学院,广东 广州 510640;华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640;华南理工大学 中新国际联合研究院,广东 广州 510555
AuthorAffiliation_xml – name: 华南理工大学 自动化科学与工程学院,广东 广州 510640;工业和信息化部电子第五研究所,广东 广州 511370%华南理工大学 自动化科学与工程学院,广东 广州 510640;南方海洋科学与工程广东实验室,广东 珠海 519000;华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640%华南理工大学 自动化科学与工程学院,广东 广州 510640;华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640;华南理工大学 中新国际联合研究院,广东 广州 510555
Author_FL YU Lubin
TIAN Lianfang
DU Qiliang
Author_FL_xml – sequence: 1
  fullname: YU Lubin
– sequence: 2
  fullname: TIAN Lianfang
– sequence: 3
  fullname: DU Qiliang
Author_xml – sequence: 1
  fullname: 余陆斌
– sequence: 2
  fullname: 田联房
– sequence: 3
  fullname: 杜启亮
BookMark eNo9jbtKA0EUQKeIYIz5B1uLXe-dV3ZLCb4gYKNgF2Z2dmNCmICDmA8IKhaKEBESYS0sJGAsUigR_8bdzWcoKFYHTnHOCinZno0JWUPwkSLHjY7fds76CACekOLIpwiCY4mU_9UyqTrX1gCBrIUB1MokzNL51_w6expll-f58DWfPeeDm-xqnL1MimFafN4WHw_FaFCMp_njxeItXbxPiul9PrtbJUuJ6rq4-scKOdzeOqjveo39nb36ZsNzCJx7QSKYkUwjFwaRiYApMJEJEykiHfEw1FIKJXSNylgwTFCh5okyRkYhZSZmFbL-2z1TNlG21ez0Tk_sz7F5bLst0-9rCpQiBeDsGzKdYgo
ClassificationCodes TP391.4
ContentType Journal Article
Copyright Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
Copyright_xml – notice: Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
DBID 2B.
4A8
92I
93N
PSX
TCJ
DOI 10.12141/j.issn.1000-565X.210541
DatabaseName Wanfang Data Journals - Hong Kong
WANFANG Data Centre
Wanfang Data Journals
万方数据期刊 - 香港版
China Online Journals (COJ)
China Online Journals (COJ)
DatabaseTitleList
DeliveryMethod fulltext_linktorsrc
Discipline Sciences (General)
DocumentTitle_FL Object Tracking Algorithm Based on Multi-Stream Attention Siamese Network
EndPage 40
ExternalDocumentID hnlgdxxb202212004
GrantInformation_xml – fundername: (广东省重点领域研发计划项目); (广东省重点领域研发计划项目); (广东省重点领域研发计划项目); (广东省海洋经济发展专项)
  funderid: (广东省重点领域研发计划项目); (广东省重点领域研发计划项目); (广东省重点领域研发计划项目); (广东省海洋经济发展专项)
GroupedDBID -03
2B.
4A8
92I
93N
ALMA_UNASSIGNED_HOLDINGS
CCEZO
CEKLB
PSX
TCJ
ID FETCH-LOGICAL-s1044-8f53d63b145d113583a0dcd9f65cbc499b665a5b726e531f1a1b4fadd6c923de3
ISSN 1000-565X
IngestDate Thu May 29 04:15:24 EDT 2025
IsPeerReviewed false
IsScholarly true
Issue 12
Keywords 超分辨率
注意力模块
目标跟踪
孪生网络
数据增强
Language Chinese
LinkModel OpenURL
MergedId FETCHMERGED-LOGICAL-s1044-8f53d63b145d113583a0dcd9f65cbc499b665a5b726e531f1a1b4fadd6c923de3
PageCount 11
ParticipantIDs wanfang_journals_hnlgdxxb202212004
PublicationCentury 2000
PublicationDate 2022-12-01
PublicationDateYYYYMMDD 2022-12-01
PublicationDate_xml – month: 12
  year: 2022
  text: 2022-12-01
  day: 01
PublicationDecade 2020
PublicationTitle 华南理工大学学报(自然科学版)
PublicationTitle_FL Journal of South China University of Technology(Natural Science Edition)
PublicationYear 2022
Publisher 工业和信息化部电子第五研究所,广东 广州 511370%华南理工大学 自动化科学与工程学院,广东 广州 510640
南方海洋科学与工程广东实验室,广东 珠海 519000
华南理工大学 自动化科学与工程学院,广东 广州 510640
华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640
华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640%华南理工大学 自动化科学与工程学院,广东 广州 510640
华南理工大学 中新国际联合研究院,广东 广州 510555
Publisher_xml – name: 工业和信息化部电子第五研究所,广东 广州 511370%华南理工大学 自动化科学与工程学院,广东 广州 510640
– name: 南方海洋科学与工程广东实验室,广东 珠海 519000
– name: 华南理工大学 自动化科学与工程学院,广东 广州 510640
– name: 华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640%华南理工大学 自动化科学与工程学院,广东 广州 510640
– name: 华南理工大学 自主系统与网络控制教育部重点实验室,广东 广州 510640
– name: 华南理工大学 中新国际联合研究院,广东 广州 510555
SSID ssib008679807
ssib036435713
ssib001129195
ssib051370482
ssib023167209
ssib006703757
ssib001166550
ssib000969305
ssj0000561675
ssib002039873
ssib008143609
ssib002263912
ssib020475101
Score 2.3632152
Snippet TP391.4; 目标跟踪在计算机视觉任务中有重要的意义.近年来随着深度学习的发展,基于孪生网络的目标跟踪算法因其优异的性能而被广泛应用.然而,现有基于孪生网络的跟踪算法在...
SourceID wanfang
SourceType Aggregation Database
StartPage 30
Title 基于多分支注意力孪生网络的目标跟踪算法
URI https://d.wanfangdata.com.cn/periodical/hnlgdxxb202212004
Volume 50
hasFullText 1
inHoldings 1
isFullTextHit
isPrint
journalDatabaseRights – providerCode: PRVEBS
  databaseName: Inspec with Full Text
  issn: 1000-565X
  databaseCode: ADMLS
  dateStart: 20190601
  customDbUrl:
  isFulltext: true
  dateEnd: 99991231
  titleUrlDefault: https://www.ebsco.com/products/research-databases/inspec-full-text
  omitProxy: false
  ssIdentifier: ssib001166550
  providerName: EBSCOhost
link http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMwnR3LahRBcAibixcxPvBNEBuUsHF6prun-9izO0sQ48UEcgvz2EkOsoJJIOQcVDwoQkRIhIh4kIDxkIMS8W_c3XyGVT2d3SZRSALLUNtb1fXqmaqa7anxvLvcD9K0hPNbFbmss3bJ6jIt83rI8zRNaZFS06d7-rGYmmUP5_jcSO2zs2tpZTmbzNf--VzJWbwKY-BXfEr2FJ4dTAoDAIN_4QgehuOJfEwSTlSLxJokDI8ywRHNiNIISEmkIIkgihHdQiAOiZYISEghWwZHExUbqibRQBUhMswJQNwkihogJqphftJIiEBMdILzaJ_IiCSSxJGhAkDaeQBBRZZp9YbLwyTY8G1aaQFANCD3jbQcp9LcKqKjQ9mEAwgUG3FA9waqCXxBjIovSBgLI0Bk5B9QwU_KIFdUgzsgxngghSKJwqO1GTBpDFGMXWLfcKIIoxCgbWuIAjRNYyiOuqDBjVN04t5ZCYIju1QcjRkar3KdCoC7GWkRTQ0zaqbkOA6ygaiycmYlGbeKAmdUvYGfir8yHgNHWUAZ8whjDB_OMCOAQkZWgMaEM2SEU8kEZMxhBOj8bM6bcFxkFh1KPtDluK-MJBUPO2OEJDJ2cIyzdHAKFfD_ZCcKY7sDqDTm3DDNffdyFDhB1_6xV6Vv1TzHEoOAsiozQAaTAwaTAdQXVee1I23XFztPF4rV1QwXBg1My-HRADIHv-aN6ub0oyfuTQDlRk2sYKhyvwvBnb0DgR8qGblJNFQJTpEhInwv9bAokFDSCKfJHrbIlMObNoHPIgysg-_Y2yIY4odQc_BomLRzXC6HHa2qNyAIoOBmW4g1i93yiEZ78B-TmYccO2XaWXDy8ZkL3nlbSI_r6qo45o2sLV70xmyqsjR-z_bTv3_JU93t_T_7b7pfNruvXvQ2vvf2vvbW33Zfb3W_7fQ3tvu_3_V_fexvrve3dnufXh782D74udPf_dDbe3_Zm20lM42pun1jTH2J-gzCTMnDQoQZZbyA04LLMPWLvFCl4HmWM6UycEXKsygQbUg-SprSjJWQ4okcCt2iHV7xap1nnfZVb7xdMHyWJKIFVUxxlUG0i1JeQmhrF4rKa94dq_-8jQhL88fWzPWTIN3wzg2vPje92vLzlfYtqHSWs9t2qf0F7xfvyA
linkProvider EBSCOhost
openUrl ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E5%9F%BA%E4%BA%8E%E5%A4%9A%E5%88%86%E6%94%AF%E6%B3%A8%E6%84%8F%E5%8A%9B%E5%AD%AA%E7%94%9F%E7%BD%91%E7%BB%9C%E7%9A%84%E7%9B%AE%E6%A0%87%E8%B7%9F%E8%B8%AA%E7%AE%97%E6%B3%95&rft.jtitle=%E5%8D%8E%E5%8D%97%E7%90%86%E5%B7%A5%E5%A4%A7%E5%AD%A6%E5%AD%A6%E6%8A%A5%EF%BC%88%E8%87%AA%E7%84%B6%E7%A7%91%E5%AD%A6%E7%89%88%EF%BC%89&rft.au=%E4%BD%99%E9%99%86%E6%96%8C&rft.au=%E7%94%B0%E8%81%94%E6%88%BF&rft.au=%E6%9D%9C%E5%90%AF%E4%BA%AE&rft.date=2022-12-01&rft.pub=%E5%B7%A5%E4%B8%9A%E5%92%8C%E4%BF%A1%E6%81%AF%E5%8C%96%E9%83%A8%E7%94%B5%E5%AD%90%E7%AC%AC%E4%BA%94%E7%A0%94%E7%A9%B6%E6%89%80%2C%E5%B9%BF%E4%B8%9C+%E5%B9%BF%E5%B7%9E+511370%25%E5%8D%8E%E5%8D%97%E7%90%86%E5%B7%A5%E5%A4%A7%E5%AD%A6+%E8%87%AA%E5%8A%A8%E5%8C%96%E7%A7%91%E5%AD%A6%E4%B8%8E%E5%B7%A5%E7%A8%8B%E5%AD%A6%E9%99%A2%2C%E5%B9%BF%E4%B8%9C+%E5%B9%BF%E5%B7%9E+510640&rft.issn=1000-565X&rft.volume=50&rft.issue=12&rft.spage=30&rft.epage=40&rft_id=info:doi/10.12141%2Fj.issn.1000-565X.210541&rft.externalDocID=hnlgdxxb202212004
thumbnail_s http://utb.summon.serialssolutions.com/2.0.0/image/custom?url=http%3A%2F%2Fwww.wanfangdata.com.cn%2Fimages%2FPeriodicalImages%2Fhnlgdxxb%2Fhnlgdxxb.jpg