一种基于深度强化学习的频率捷变雷达智能频点决策方法

TN958; 自卫式干扰机发射的瞄准干扰使多种基于信号处理的被动干扰抑制方法失效,对现代雷达产生了严重威胁,频率捷变作为一种主动对抗方式为对抗瞄准干扰提供了可能.针对传统随机跳频抗干扰性能不稳定、频点选取自由度有限、策略学习所需时间长等问题,该文面向频率捷变雷达,提出了一种快速自适应跳频策略学习方法.首先设计了一种频点可重复选取的频率捷变波形,为最优解提供了更多选择.在此基础上,通过利用雷达与干扰机持续对抗收集到的数据,基于深度强化学习的探索与反馈机制,不断优化频点选取策略.具体来说,通过将上一时刻雷达频点及当前时刻感知到的干扰频点作为强化学习输入,神经网络智能选取当前时刻各子脉冲频点,并根据...

Full description

Saved in:
Bibliographic Details
Published in雷达学报 Vol. 13; no. 1; pp. 227 - 239
Main Authors 张嘉翔, 张凯翔, 梁振楠, 陈新亮, 刘泉华
Format Journal Article
LanguageChinese
Published 北京理工大学信息与电子学院雷达技术研究所 北京 100081%北京理工大学信息与电子学院雷达技术研究所 北京 100081 2024
北京理工大学长三角研究院(嘉兴) 嘉兴 314000%北京理工大学信息与电子学院雷达技术研究所 北京 100081
卫星导航电子信息技术教育部重点实验室(北京理工大学) 北京 100081
北京理工大学重庆创新中心 重庆 401120
Subjects
频率捷变雷达
Aiming jamming
瞄准干扰
波形设计
Waveform design
Frequency agile radar
抗干扰
深度Q网络
Anti-jamming
Deep Q-Network(DQN)
Online AccessGet full text
ISSN2095-283X
DOI10.12000/JR23197

Cover

Abstract TN958; 自卫式干扰机发射的瞄准干扰使多种基于信号处理的被动干扰抑制方法失效,对现代雷达产生了严重威胁,频率捷变作为一种主动对抗方式为对抗瞄准干扰提供了可能.针对传统随机跳频抗干扰性能不稳定、频点选取自由度有限、策略学习所需时间长等问题,该文面向频率捷变雷达,提出了一种快速自适应跳频策略学习方法.首先设计了一种频点可重复选取的频率捷变波形,为最优解提供了更多选择.在此基础上,通过利用雷达与干扰机持续对抗收集到的数据,基于深度强化学习的探索与反馈机制,不断优化频点选取策略.具体来说,通过将上一时刻雷达频点及当前时刻感知到的干扰频点作为强化学习输入,神经网络智能选取当前时刻各子脉冲频点,并根据目标检测结果以及信干噪比两方面评价抗干扰效能,从而优化策略直至最优.从提高最优策略收敛速度出发,设计的输入状态不依赖历史时间步、引入贪婪策略平衡搜索-利用机制、配合信干噪比提高奖励差异.多组仿真实验结果表明,所提方法能够收敛到最优策略且具备较高的收敛效率.
AbstractList TN958; 自卫式干扰机发射的瞄准干扰使多种基于信号处理的被动干扰抑制方法失效,对现代雷达产生了严重威胁,频率捷变作为一种主动对抗方式为对抗瞄准干扰提供了可能.针对传统随机跳频抗干扰性能不稳定、频点选取自由度有限、策略学习所需时间长等问题,该文面向频率捷变雷达,提出了一种快速自适应跳频策略学习方法.首先设计了一种频点可重复选取的频率捷变波形,为最优解提供了更多选择.在此基础上,通过利用雷达与干扰机持续对抗收集到的数据,基于深度强化学习的探索与反馈机制,不断优化频点选取策略.具体来说,通过将上一时刻雷达频点及当前时刻感知到的干扰频点作为强化学习输入,神经网络智能选取当前时刻各子脉冲频点,并根据目标检测结果以及信干噪比两方面评价抗干扰效能,从而优化策略直至最优.从提高最优策略收敛速度出发,设计的输入状态不依赖历史时间步、引入贪婪策略平衡搜索-利用机制、配合信干噪比提高奖励差异.多组仿真实验结果表明,所提方法能够收敛到最优策略且具备较高的收敛效率.
Abstract_FL The aiming jamming emitted by self-defense jammers renders various passive anti-jamming measures based on signal processing ineffective,posing severe threats to modern radars.Frequency agility,as an active countermeasure,enables the resistance of aiming jamming.In response to issues such as the unstable anti-jamming performance of traditional random frequency hopping,limited freedom in frequency selection,and the long time required for strategic learning,the paper proposes a fast-adaptive frequency-hopping strategy for a frequency agile radar.First,a frequency agile waveform with repeatable frequency selection is designed,providing more choices for an optimal solution.Accordingly,using the data collected through continuous confrontation between a radar and a jammer,and the exploration and feedback mechanism of deep reinforcement learning,a frequency-selection strategy is continuously optimized.Specifically,considering radar frequency from the previous time and jamming frequency perceived at the current time as reinforcement learning inputs,the neural network intelligently selects each subpulse frequency at the current time and optimizes the strategy until it is optimal based on the anti-jamming effectiveness evaluated by the target detection result and Signal-to-Jamming-plus-Noise Ratio(SJNR).To improve the convergence speed of the optimal strategy,the designed input state is independent of the historical time step,the introduced greedy strategy balances the search-utilization mechanism,and the SJNR differentiates rewards more.Multiple sets of simulations show that the proposed method can converge to the optimal strategy and has high convergence efficiency.
Author 张凯翔
张嘉翔
刘泉华
梁振楠
陈新亮
AuthorAffiliation 北京理工大学信息与电子学院雷达技术研究所 北京 100081%北京理工大学信息与电子学院雷达技术研究所 北京 100081;北京理工大学长三角研究院(嘉兴) 嘉兴 314000%北京理工大学信息与电子学院雷达技术研究所 北京 100081;北京理工大学重庆创新中心 重庆 401120;卫星导航电子信息技术教育部重点实验室(北京理工大学) 北京 100081
AuthorAffiliation_xml – name: 北京理工大学信息与电子学院雷达技术研究所 北京 100081%北京理工大学信息与电子学院雷达技术研究所 北京 100081;北京理工大学长三角研究院(嘉兴) 嘉兴 314000%北京理工大学信息与电子学院雷达技术研究所 北京 100081;北京理工大学重庆创新中心 重庆 401120;卫星导航电子信息技术教育部重点实验室(北京理工大学) 北京 100081
Author_FL CHEN Xinliang
ZHANG Jiaxiang
LIU Quanhua
ZHANG Kaixiang
LIANG Zhennan
Author_FL_xml – sequence: 1
  fullname: ZHANG Jiaxiang
– sequence: 2
  fullname: ZHANG Kaixiang
– sequence: 3
  fullname: LIANG Zhennan
– sequence: 4
  fullname: CHEN Xinliang
– sequence: 5
  fullname: LIU Quanhua
Author_xml – sequence: 1
  fullname: 张嘉翔
– sequence: 2
  fullname: 张凯翔
– sequence: 3
  fullname: 梁振楠
– sequence: 4
  fullname: 陈新亮
– sequence: 5
  fullname: 刘泉华
BookMark eNotjT1Lw0AYgG-oYK0F_4Rj9L33cklulOJ3QRAFt5JLcqKUFAyio6jo0lYcDH4MikOdOkiHmqD9Nbmk_RcqOj3wDM8zQ0phKwwImaOwQBEAFje2kVFhl0gZQXADHbY3TapRdCCBWcgtYGaZbGYfZ8VbRz-nWdrNh-867enPVLdj3e9lyUvxeDl5vS2613lnqG_uJ0_D8WiUP6Tji69ff57oq0HRj_M4yQd3s2RKuc0oqP6zQnZXlndqa0Z9a3W9tlQ3IgrADclt4VFEyVBQT_kSuGC-B2gLJh2HuiIwGeMWVYJTywcfHRFIaTtKCGkHilXI_F_3xA2VG-43DlvHR-HPsdH0TyUCmkCBcvYN-6do7w
ClassificationCodes TN958
ContentType Journal Article
Copyright Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
Copyright_xml – notice: Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
DBID 2B.
4A8
92I
93N
PSX
TCJ
DOI 10.12000/JR23197
DatabaseName Wanfang Data Journals - Hong Kong
WANFANG Data Centre
Wanfang Data Journals
万方数据期刊 - 香港版
China Online Journals (COJ)
China Online Journals (COJ)
DatabaseTitleList
DeliveryMethod fulltext_linktorsrc
Discipline Engineering
DocumentTitle_FL An Intelligent Frequency Decision Method for a Frequency Agile Radar Based on Deep Reinforcement Learning
EndPage 239
ExternalDocumentID ldxb202401015
GroupedDBID -0Y
2B.
4A8
5VS
92H
92I
93N
ABJNI
ACGFS
ALMA_UNASSIGNED_HOLDINGS
CCEZO
CUBFJ
GROUPED_DOAJ
IPNFZ
KQ8
PSX
RIG
TCJ
TGT
U1G
U5S
ID FETCH-LOGICAL-s1005-b579c122b3291cfdb0593dc02793b881a9e433561f9516d0d289ebb78f99b7ef3
ISSN 2095-283X
IngestDate Thu May 29 04:01:07 EDT 2025
IsPeerReviewed true
IsScholarly true
Issue 1
Keywords 频率捷变雷达
Aiming jamming
瞄准干扰
波形设计
Waveform design
Frequency agile radar
抗干扰
深度Q网络
Anti-jamming
Deep Q-Network(DQN)
Language Chinese
LinkModel OpenURL
MergedId FETCHMERGED-LOGICAL-s1005-b579c122b3291cfdb0593dc02793b881a9e433561f9516d0d289ebb78f99b7ef3
PageCount 13
ParticipantIDs wanfang_journals_ldxb202401015
PublicationCentury 2000
PublicationDate 2024
PublicationDateYYYYMMDD 2024-01-01
PublicationDate_xml – year: 2024
  text: 2024
PublicationDecade 2020
PublicationTitle 雷达学报
PublicationTitle_FL Journal of Radars
PublicationYear 2024
Publisher 北京理工大学信息与电子学院雷达技术研究所 北京 100081%北京理工大学信息与电子学院雷达技术研究所 北京 100081
北京理工大学长三角研究院(嘉兴) 嘉兴 314000%北京理工大学信息与电子学院雷达技术研究所 北京 100081
卫星导航电子信息技术教育部重点实验室(北京理工大学) 北京 100081
北京理工大学重庆创新中心 重庆 401120
Publisher_xml – name: 卫星导航电子信息技术教育部重点实验室(北京理工大学) 北京 100081
– name: 北京理工大学信息与电子学院雷达技术研究所 北京 100081%北京理工大学信息与电子学院雷达技术研究所 北京 100081
– name: 北京理工大学重庆创新中心 重庆 401120
– name: 北京理工大学长三角研究院(嘉兴) 嘉兴 314000%北京理工大学信息与电子学院雷达技术研究所 北京 100081
SSID ssib036256034
ssj0001853618
ssib023646539
ssib036438606
ssib051376368
ssib038075146
ssib058814069
ssib011592811
ssib054421839
Score 2.3693783
Snippet TN958; 自卫式干扰机发射的瞄准干扰使多种基于信号处理的被动干扰抑制方法失效,对现代雷达产生了严重威胁,频率捷变作为一种主动对抗方式为对抗瞄准干扰提供了可能.针对传...
SourceID wanfang
SourceType Aggregation Database
StartPage 227
Title 一种基于深度强化学习的频率捷变雷达智能频点决策方法
URI https://d.wanfangdata.com.cn/periodical/ldxb202401015
Volume 13
hasFullText 1
inHoldings 1
isFullTextHit
isPrint
journalDatabaseRights – providerCode: PRVAFT
  databaseName: Open Access Digital Library
  issn: 2095-283X
  databaseCode: KQ8
  dateStart: 20120101
  customDbUrl:
  isFulltext: true
  dateEnd: 99991231
  titleUrlDefault: http://grweb.coalliance.org/oadl/oadl.html
  omitProxy: true
  ssIdentifier: ssj0001853618
  providerName: Colorado Alliance of Research Libraries
– providerCode: PRVAON
  databaseName: DOAJ Directory of Open Access Journals
  issn: 2095-283X
  databaseCode: DOA
  dateStart: 20120101
  customDbUrl:
  isFulltext: true
  dateEnd: 99991231
  titleUrlDefault: https://www.doaj.org/
  omitProxy: true
  ssIdentifier: ssj0001853618
  providerName: Directory of Open Access Journals
– providerCode: PRVHPJ
  databaseName: ROAD: Directory of Open Access Scholarly Resources (ISSN International Center)
  issn: 2095-283X
  databaseCode: M~E
  dateStart: 20120101
  customDbUrl:
  isFulltext: true
  dateEnd: 99991231
  titleUrlDefault: https://road.issn.org
  omitProxy: true
  ssIdentifier: ssib054421839
  providerName: ISSN International Centre
link http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMw3R3LbtQwMCrlAgfEUzyrHvCpWkjs2LGPyW5WFQgOqJV6q9Z5wAEtEt1KqCcECC60iAMVjwOIQzkVCfVQuoJ-TbPb_gUzTnaTVVficUSqImc8Hs_DG8-49tiyrmoqGBOJXYtFmtRczuA3x9JWTbYAKjgTcYRnh2_dFrPz7o0FvjAx-bWya2m5o69FK2PPlfyLVQEGdsVTsn9h2SFRAEAZ7AtPsDA8_8jGJHRJIHGzQugR3yOyQUJOVJMEvqnyiQxJKEjgkcDBKoD4whTqBocTWSfKQPyGqYJWiviGoILmLgnhlRLlIASoSQ8JQkdAE5s3iZKIowIDkSQI8Q9wlDJdAHuMBI1ROhR7webAGzPMNwwbAp9YZeD5vZgD13lcL0O2gSUQjQ-GTyEiysGRQamwkwCYdceigFR-cwyKQJ6lY-jXDQpAoFO7RFEoqJQD3u1C8X5YXU-h5UrqQOneALFudG2jLpAlDztAwVy06IhhmsTPWXEMK7ntQ9McyrxAVnalleEOZBhrIVAZDh1gvF6ID9oAUlgA4-VqBeHsmcNMzzjGzyOU_18ClRMjhbCgBm7xwsgszg59rYopOc89UXh3NE-ddchxwBNreCn6HYh3lFc6R8Mtq_fjRxqHC-Zk5EesoxTX_ypLODB_QXClqCznS7ybATM_D97BV4T4okzHCNVMinKXA979wCu5nLiDs3-5HMBd1wQ0w3eJ6eqEKteUwfcW5l8aQxUV-bZRvOuFcOZ4Yjttte9WPOm5k9aJIgSe9vPv2SlrYuXeaet4JTHqGevm3vfH_S-r2cfuXnett_0t625kP7rZy_Vsc2Nv51P__bODz6_7ay96q9vZq7cHH7b3d3d777r7T38i_MlO9nyrv7neW9_pbb05a803w7n6bK249qW25GBeZM09FTmUakaVE6WxxltH48im4EpoELmlEpcxiPtSiA5FbMdUqkRrT6ZKaS9J2Tlrsv2gnZy3piEWEniDRwxqdVORaKp1y3ZTL9FR5DjxBWuqUMVi8VlfWhwx9MXfIVyyjmE5X5S9bE12Hi4nVyBM6egpMzZ-AZjK5FI
linkProvider Directory of Open Access Journals
openUrl ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E4%B8%80%E7%A7%8D%E5%9F%BA%E4%BA%8E%E6%B7%B1%E5%BA%A6%E5%BC%BA%E5%8C%96%E5%AD%A6%E4%B9%A0%E7%9A%84%E9%A2%91%E7%8E%87%E6%8D%B7%E5%8F%98%E9%9B%B7%E8%BE%BE%E6%99%BA%E8%83%BD%E9%A2%91%E7%82%B9%E5%86%B3%E7%AD%96%E6%96%B9%E6%B3%95&rft.jtitle=%E9%9B%B7%E8%BE%BE%E5%AD%A6%E6%8A%A5&rft.au=%E5%BC%A0%E5%98%89%E7%BF%94&rft.au=%E5%BC%A0%E5%87%AF%E7%BF%94&rft.au=%E6%A2%81%E6%8C%AF%E6%A5%A0&rft.au=%E9%99%88%E6%96%B0%E4%BA%AE&rft.date=2024&rft.pub=%E5%8C%97%E4%BA%AC%E7%90%86%E5%B7%A5%E5%A4%A7%E5%AD%A6%E4%BF%A1%E6%81%AF%E4%B8%8E%E7%94%B5%E5%AD%90%E5%AD%A6%E9%99%A2%E9%9B%B7%E8%BE%BE%E6%8A%80%E6%9C%AF%E7%A0%94%E7%A9%B6%E6%89%80+%E5%8C%97%E4%BA%AC+100081%25%E5%8C%97%E4%BA%AC%E7%90%86%E5%B7%A5%E5%A4%A7%E5%AD%A6%E4%BF%A1%E6%81%AF%E4%B8%8E%E7%94%B5%E5%AD%90%E5%AD%A6%E9%99%A2%E9%9B%B7%E8%BE%BE%E6%8A%80%E6%9C%AF%E7%A0%94%E7%A9%B6%E6%89%80+%E5%8C%97%E4%BA%AC+100081&rft.issn=2095-283X&rft.volume=13&rft.issue=1&rft.spage=227&rft.epage=239&rft_id=info:doi/10.12000%2FJR23197&rft.externalDocID=ldxb202401015
thumbnail_s http://utb.summon.serialssolutions.com/2.0.0/image/custom?url=http%3A%2F%2Fwww.wanfangdata.com.cn%2Fimages%2FPeriodicalImages%2Fldxb%2Fldxb.jpg