東北大學(xué)信息科學(xué)與工程學(xué)院魏穎教授團(tuán)隊(duì)在人物交互檢測(cè)研究中取得重要進(jìn)展，研究成果以“FGAHOI: Fine-Grained Anchors for Human-Object Interaction Detection”為題發(fā)表在人工智能領(lǐng)域頂級(jí)學(xué)術(shù)期刊《IEEE Transactions on Pattern Analysis and Machine Intelligence》（IEEE TPAMI）上。論文的第一作者為馬帥磊博士，通訊作者為魏穎教授。
（論文鏈接：https://doi.org/10.1109/TPAMI.2023.3331738）
IEEE TPAMI在中國計(jì)算機(jī)學(xué)會(huì)認(rèn)定的人工智能領(lǐng)域四個(gè)A類期刊中排名第一，是計(jì)算機(jī)視覺及模式識(shí)別領(lǐng)域最頂尖的期刊，五年平均影響因子26.7。根據(jù)當(dāng)前流行的Google Scholar Citation統(tǒng)計(jì)，IEEE TPAMI在所有計(jì)算機(jī)工程、電子工程及人工智能相關(guān)期刊榜單上以165分的h5-index排在第1位，主要收錄人工智能、模式識(shí)別、計(jì)算機(jī)視覺及機(jī)器學(xué)習(xí)領(lǐng)域的原創(chuàng)性科研成果。TPAMI篩選極其嚴(yán)格，每年錄用量僅200篇左右。IEEE TPAMI是人工智能、模式識(shí)別、計(jì)算機(jī)視覺及機(jī)器學(xué)習(xí)領(lǐng)域最重要的學(xué)術(shù)期刊之一，也是目前信息領(lǐng)域中影響最大、水平最高的期刊。
人物交互（HOI）檢測(cè)是計(jì)算機(jī)視覺領(lǐng)域的一個(gè)重要問題，需要定位每一個(gè)人物對(duì)并識(shí)別交互關(guān)系。與單個(gè)物體實(shí)例相比，HOI 實(shí)例在空間、尺度和任務(wù)方面的跨度更大，因此其檢測(cè)更容易受到噪聲背景的影響。為了減輕噪聲背景對(duì) HOI 檢測(cè)的干擾，該文提出了一種新穎的端到端的框架（FGAHOI），利用輸入圖像信息來生成細(xì)粒度錨點(diǎn)來指導(dǎo) HOI 實(shí)例的檢測(cè)，改進(jìn)了從背景信息復(fù)雜的圖像中提取關(guān)鍵特征，并將提取的特征與查詢嵌入進(jìn)行語義統(tǒng)一的方法。為促進(jìn)人工智能領(lǐng)域的發(fā)展，論文的算法代碼和數(shù)據(jù)均已開源。
該文提出了一種新穎的基于Transformer的人物交互檢測(cè)器（FGAHOI），利用輸入特征生成細(xì)粒度錨點(diǎn)，以緩解人物交互實(shí)例的檢測(cè)受噪聲背景的影響。提出了一種新穎的訓(xùn)練策略，即按順序訓(xùn)練模型的每個(gè)組件，以明確每個(gè)階段的訓(xùn)練方向，從而最大限度地節(jié)省訓(xùn)練成本。針對(duì)檢測(cè) HOI 實(shí)例的兩個(gè)挑戰(zhàn)（人物對(duì)的不均勻分布區(qū)域和人物對(duì)的遠(yuǎn)距離視覺建模），提出了兩個(gè)新指標(biāo)和一個(gè)新數(shù)據(jù)集，即 HOI-SDC。我們?cè)?HICO-DET、HOI-SDC 和 V-COCO 這三個(gè)基準(zhǔn)數(shù)據(jù)集上進(jìn)行了大量實(shí)驗(yàn)，證明了所提出的 FGAHOI 的有效性。
魏穎教授長期致力于圖像處理與計(jì)算機(jī)視覺、醫(yī)學(xué)影像計(jì)算與分析、視頻圖像分析與理解、機(jī)器學(xué)習(xí)與深度學(xué)習(xí)領(lǐng)域研究，作為項(xiàng)目負(fù)責(zé)人主持/完成國家自然科學(xué)基金項(xiàng)目、省部級(jí)攻關(guān)項(xiàng)目、企事業(yè)合作攻關(guān)項(xiàng)目等二十余項(xiàng)，在國內(nèi)外重要學(xué)術(shù)期刊/國際會(huì)議發(fā)表論文七十余篇，獲得遼寧省自然學(xué)術(shù)成果一等獎(jiǎng)/二等獎(jiǎng)、東北大學(xué)“江河獎(jiǎng)教金”、東北大學(xué)學(xué)生科技競(jìng)賽活動(dòng)優(yōu)秀指導(dǎo)教師、東北大學(xué)“研究生心目中的好導(dǎo)師”等榮譽(yù)/獎(jiǎng)勵(lì)二十余項(xiàng)，兼任遼寧省人工智能學(xué)會(huì)副理事長、中國人工智能學(xué)會(huì)智慧醫(yī)療專委會(huì)常務(wù)委員。（轉(zhuǎn)自東北大學(xué)信息學(xué)院公眾號(hào)）
