国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于注意力機制的多模態(tài)人體行為識別算法
DOI:
CSTR:
作者:
作者單位:

1.西北工業(yè)大學(xué) 電子信息學(xué)院;2.河北師范大學(xué) 計算機與網(wǎng)絡(luò )空間安全學(xué)院

作者簡(jiǎn)介:

通訊作者:

中圖分類(lèi)號:

TP391.41

基金項目:

陜西省重點(diǎn)研發(fā)項目(2021ZDLGY15-01, 2021ZDLGY09-04, 2021GY-004和2020GY-050);深圳市國際合作研究項目(GJHZ20200731095204013);國家自然基金(61772419)


Multi-modal human behavior recognition algorithm based on attention mechanism
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    提出了基于注意力機制的多模態(tài)人體行為識別算法。針對多模態(tài)特征的有效融合問(wèn)題,設計基于注意力機制的雙流特征融合卷積網(wǎng)絡(luò )TAM3DNet(Two-stream Attention Mechanism 3D Network)。主干網(wǎng)絡(luò )采用結合注意力機制的AM3DNet(Attention Mechanism 3D Network),將特征圖與注意力圖進(jìn)行加權后得到加權行為特征,從而使網(wǎng)絡(luò )聚焦于肢體運動(dòng)區域的特征,減弱背景和肢體靜止區域的影響。將RGB-D數據的顏色和深度兩種模態(tài)數據分別作為雙流網(wǎng)絡(luò )的輸入,從兩條分支網(wǎng)絡(luò )得到彩色和深度行為特征,然后將融合特征進(jìn)行分類(lèi)得到人體行為識別結果。

    Abstract:

    A multi-modal human behavior recognition algorithm based on attention mechanism is proposed. Aiming at the problem of effective fusion of multimodal features, a two-stream feature fusion convolutional network TAM3DNet (Two-stream Attention Mechanism 3D Network) based on attention mechanism is designed. The backbone network adopts AM3DNet (Attention Mechanism 3D Network), which combines the attention mechanism, and weights the feature map and the attention map to obtain the weighted behavior characteristics, so that the network focuses on the characteristics of the limb movement area and reduces the influence of the background and the static area of the limb. The color and depth modal data of the RGB-D data are respectively used as the input of the dual-stream network, and the color and depth behavior features are obtained from the two branch networks, and then the fusion features are classified to obtain the human behavior recognition results.

    參考文獻
    相似文獻
    引證文獻
引用本文

宋真東,楊國超,馬玉鵬,馮曉毅.基于注意力機制的多模態(tài)人體行為識別算法計算機測量與控制[J].,2022,30(2):276-283.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2022-01-07
  • 最后修改日期:2022-01-11
  • 錄用日期:2022-01-11
  • 在線(xiàn)發(fā)布日期: 2022-02-22
  • 出版日期:
文章二維碼
濮阳县| 浦城县| 普兰店市| 桦南县| 达尔| 芦溪县| 青龙| 海门市| 高要市| 金山区| 桦南县| 乾安县| 桐庐县| 托克托县| 武邑县| 大姚县| 绥阳县| 景洪市| 唐海县| 名山县| 呼伦贝尔市| 大埔区| 行唐县| 湾仔区| 容城县| 辛集市| 什邡市| 卢氏县| 车致| 蒲城县| 长岛县| 台中市| 东海县| 正阳县| 姚安县| 康乐县| 昌吉市| 皋兰县| 甘肃省| 三河市| 沾益县|