【安防展覽網(wǎng) 訪談】編者按:“行人再識別(ReID)”可能成為繼人臉識別算法之后又一個“熱點”算法。(行人再識別又稱行人重識別)
隨著人臉識別技術(shù)在各場景的廣泛應(yīng)用,后者對人體特征和身份核準(zhǔn)的算法需求更為“理性”,對非人臉識別技術(shù)的剛性需求日益迫切。“行人再識別(ReID)”算法技術(shù)在這個時機點走進(jìn)了AI算法的時代視野。
當(dāng)前諸如曠視、依圖、商湯、云從等AI獨角獸企業(yè),剛剛將安防監(jiān)控調(diào)整為機器視覺的華為、視頻監(jiān)控巨頭海康、大華等廠商都在各類學(xué)術(shù)期刊、科技媒體等渠道發(fā)表“行人ReID”相關(guān)技術(shù)論文和相關(guān)產(chǎn)品和應(yīng)用方案。
特別值得關(guān)注的是,2019年10月22日,由深圳市政府直接主辦的首屆全國人工智能大賽拉開帷幕,大賽共兩大主題賽事,其中一項就是“行人重識別(ReID)”。
從相關(guān)學(xué)術(shù)論文資料了解,十年前清華大學(xué)媒體大數(shù)據(jù)認(rèn)知計算中心的科研團隊就開始了“行人再識別ReID”研究,2010年開始獲得國家自然科學(xué)基金資助。多次獲得國內(nèi)優(yōu)秀論文和相關(guān)知識產(chǎn)權(quán)認(rèn)證。
適值清華大學(xué)109周年校慶之際,記者采訪了清華大學(xué)王生進(jìn)教授,走進(jìn)了 “行人再識別ReID”研究成果豐碩的研究室,走進(jìn)了清華人的AI算法世界。
組織創(chuàng)建了國內(nèi) “行人再識別(ReID)”測試數(shù)據(jù)集“Market-1501”———清華大學(xué)王生進(jìn)教授。
王生進(jìn)教授帶領(lǐng)的
清華AI團隊的主要學(xué)術(shù)研究與成果
1985年,王生進(jìn)畢業(yè)于清華大學(xué)無線電電子學(xué)系,前往國外留學(xué)后,2003年回國到清華大學(xué)電子工程系從事人工智能、機器學(xué)習(xí)和圖像處理領(lǐng)域的科研和教學(xué)工作,先后參與了十多項國家縱向項目和數(shù)十項企業(yè)橫向項目的研究和開發(fā)工作。
王生進(jìn)現(xiàn)任清華大學(xué)電子工程系博士導(dǎo)師,清華大學(xué)媒體大數(shù)據(jù)認(rèn)知計算研究中心主任,紫為云清華AI使能平臺科學(xué)家,北京信息科學(xué)與技術(shù)國家研究中心跨媒體智能創(chuàng)新團隊負(fù)責(zé)人,危爆物品探測與掃描國家工程實驗室副主任,中國圖像圖形學(xué)會視頻監(jiān)控與安全專委會主任。
他提出了基于深度網(wǎng)絡(luò)的特征空間正交優(yōu)化理論及深度特征學(xué)習(xí)方法,以解決深度特征冗余的問題;
他*提出一種特征圖層配準(zhǔn)方法,有效解決了非剛體行人再識別中的特征配準(zhǔn)問題;
他提出一種融合表觀與步態(tài)特征的基于選擇排序?qū)W習(xí)的行人再識別方法,有效利用時空信息融合提高了行人再識別性能;
他指導(dǎo)的博士生鄭良的博士論文獲得中國人工智能學(xué)會2017年優(yōu)秀博士論文,相關(guān)研究獲得了2018年模式識別學(xué)會ICPR2018論文獎。
2019年10月,其主導(dǎo)研究的“跨視域行人再識別的特征學(xué)習(xí)理論與計算研究方法”還獲得“第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎”,團隊成員包括鄭良、田奇、李亞利、孫奕帆。
王生進(jìn)教授組織創(chuàng)建了國內(nèi)大型多鏡頭測試數(shù)據(jù)集和訓(xùn)練數(shù)據(jù)集Market-1501,所構(gòu)建和發(fā)表的該研究領(lǐng)域三個大型公開數(shù)據(jù)集總下載量逾13600次,單篇論文谷歌學(xué)術(shù)引用超過1000次。
隨著行人再識別技術(shù)的不斷突破,跨視域攝像機行人目標(biāo)跟蹤的瓶頸問題或能得以更好解決。
在2017年第十六屆中國公共安全博覽會(CPSE安博會)政府管理論壇上,王生進(jìn)教授發(fā)表了題為《人像態(tài)視識別及其在智能視頻監(jiān)控中的應(yīng)用》的報告,提出了人像態(tài)視識別的概念,豐富了跨媒體智能理論框架,指導(dǎo)和推動了跨媒體智能在公安警務(wù)、社會治理、AI醫(yī)療、智能制造、AI商業(yè)等領(lǐng)域的應(yīng)用。
王生進(jìn)教授獲得2019年第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎
王生進(jìn)教授獲得2019年第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎王生進(jìn)教授所帶領(lǐng)的清華AI算法團隊,致力于計算機視覺、智能視頻和生物特征識別理論、方法和技術(shù)的研究,在人臉識別和行人再識別ReID研究領(lǐng)域取得了多項前沿成果。
2006年、2008年,他們分別獲得了北京市科學(xué)技術(shù)獎和國家科技進(jìn)步獎,參與制定了中華人民共和國公共安全行業(yè)標(biāo)準(zhǔn)《安全防范系統(tǒng)生物特征識別應(yīng)用術(shù)語》和國家標(biāo)準(zhǔn)《安全防范視頻監(jiān)控數(shù)字視音頻編解碼技術(shù)要求(SVAC)》。
除人臉、行人再識別算法技術(shù)研究外,清華團隊在車輛、場景與物體、掌紋生物特征識別,語音識別,文字識別,輔助駕駛,機器視覺,工業(yè)智能等方面也有諸多的算法研究成果,建立了跨媒體的多維智能算法體系。
專訪實錄
記者:國內(nèi)這幾年出現(xiàn)的人工智能企業(yè),有一個相似的特點:大多是從院校、實驗室出來的學(xué)科帶頭人,他們在科研方面都做到了世界水平,但在市場實踐中都表現(xiàn)得差強人意。針對產(chǎn)業(yè)界與學(xué)術(shù)界的人工智能研究,作為清華AI科研人如何認(rèn)識和理解?
王生進(jìn)教授:學(xué)術(shù)研究側(cè)重理論,關(guān)注技術(shù)的前沿性探索,從研究中尋找并構(gòu)建相關(guān)的方向、方法與理論體系。產(chǎn)業(yè)研究側(cè)重應(yīng)用,依據(jù)相關(guān)技術(shù)理論實現(xiàn)產(chǎn)品化、應(yīng)用化落地的方法與流程體系,并且關(guān)注實現(xiàn)的成本。這兩種研究可理解成上下層的關(guān)系,也是各有所長,互為因果,相互促進(jìn)的關(guān)系。
對于做學(xué)術(shù)研究的人來說,大家的側(cè)重點是理論研究和技術(shù)研發(fā),所以在產(chǎn)品化、系統(tǒng)化、商業(yè)化方面,起初的關(guān)注度不會很強,在實踐中邊學(xué)邊進(jìn)步,也算正常,流行說法是新常態(tài)。
做產(chǎn)品和應(yīng)用系統(tǒng)研究的企業(yè)如果要持續(xù)發(fā)展,需要重視前沿理論和方法的支撐,需要投入一定的基礎(chǔ)研究,在關(guān)鍵技術(shù)突破的時候才能迅速抓住機會。
當(dāng)前,很多AI企業(yè)都是從院校實驗室走向市場的,這是科技變革與社會進(jìn)步相結(jié)合的產(chǎn)物,他們當(dāng)前在市場中取得成就總體上還是很值得認(rèn)可的,推動了AI技術(shù)的進(jìn)步,促進(jìn)了“智能+”產(chǎn)業(yè)的發(fā)展。
當(dāng)然,在發(fā)展過程中,會存在一些問題或不足,剛開始的進(jìn)展都很順利,自然會導(dǎo)致企業(yè)宣傳或市場行動會“積極”些,使得大家的期望更高了些,就會給人有一種“差強人意”的感覺。
所以,在落地的環(huán)節(jié),我個人的認(rèn)識是“術(shù)業(yè)有專攻”,敬畏人性,尊重常識,讓企業(yè)家或能夠成為企業(yè)家的人去做產(chǎn)業(yè)化。也正是因為認(rèn)識到這一點,此前我也參與推動了紫為云AI使能平臺。
記者:為什么要參與推動紫為云AI使能平臺?為什么選擇這個時間點切入市場?近期獲得了什么成績?
王生進(jìn)教授:科學(xué)研究的目的,是為產(chǎn)業(yè)的發(fā)展服務(wù),也是為人類的美好生活服務(wù)。但科學(xué)理論的成果要與產(chǎn)業(yè)中的產(chǎn)品系統(tǒng)、應(yīng)用系統(tǒng)等研究結(jié)合在一起,才能實現(xiàn)它的重要價值。當(dāng)前國家大力推動高等院校科技成果轉(zhuǎn)化也正好印證了這一點。
紫為云·清華AI使能平臺,就是讓AI領(lǐng)域的科學(xué)理論成果導(dǎo)入產(chǎn)品研發(fā)、應(yīng)用研發(fā)的平臺,是推動理論研究與產(chǎn)業(yè)落地上下層結(jié)合的使能者。
中國人工智能產(chǎn)業(yè)要取得大發(fā)展,終要靠應(yīng)用層的各類企業(yè)掌握相關(guān)的核心技術(shù),完成理論與應(yīng)用的結(jié)合,才能實現(xiàn)各類AI應(yīng)用的百花齊放效應(yīng)。
目前的現(xiàn)狀是人工智能產(chǎn)業(yè)鏈上應(yīng)用層的很多企業(yè)缺乏算法等核心技術(shù),這些企業(yè)對AI核心算法技術(shù)的強烈需要是紫為云AI使能平臺得以創(chuàng)建的前提。
2019年4月27日,紫為云*科學(xué)家王生進(jìn)宣布正式推動紫為云AI使能平臺
作為清華人,肩負(fù)厚德載物校訓(xùn),如果能傾盡所學(xué)幫助企業(yè)打通AI算法技術(shù)瓶頸,構(gòu)建AI應(yīng)用創(chuàng)新的能力體系,實現(xiàn)各類企業(yè)在行業(yè)AI應(yīng)用創(chuàng)新的目標(biāo),進(jìn)而可以推動中國AI應(yīng)用創(chuàng)新的全面發(fā)展,為國家“智能+”、新基建戰(zhàn)略的實現(xiàn)添磚加瓦。
這將是清華人做人工智能科研的大價值體現(xiàn),也是清華團隊創(chuàng)建紫為云AI使能平臺的初衷。
近期,我們AI團隊在廣東某社會治理項目中完成了日處理*人臉動態(tài)聚類(含戴口罩人臉識別)的內(nèi)測,取得了可圈可點的成績。
記者:視頻應(yīng)用從初關(guān)注視頻監(jiān)控圖像的清晰度,發(fā)展到人、車等AI識別,再到ReID等技術(shù),談?wù)勎磥鞟I產(chǎn)業(yè)(技術(shù))的變化趨勢?
王生進(jìn)教授:從圖像的角度,視頻監(jiān)控的圖像清晰度已發(fā)展到一個新階段,基于高清圖像通過AI算法技術(shù)做圖像識別,數(shù)據(jù)的智能處理,提取與應(yīng)用是技術(shù)發(fā)展的新維度,ReID等技術(shù)則是這個維度上的新分支。
例如,清華團隊針對行人再識別研究領(lǐng)域中缺少符合實際場景需求的數(shù)據(jù)集的瓶頸問題,組織構(gòu)建并發(fā)表了該領(lǐng)域大型多鏡頭測試數(shù)據(jù)集iLIDS-VID, Market-1501&MARS,成為該領(lǐng)域的典型標(biāo)準(zhǔn)測試數(shù)據(jù)集。
從安全的角度,
視頻監(jiān)控系統(tǒng)是各類用戶實現(xiàn)安全管理、效率管理、業(yè)務(wù)管理的技術(shù)保障基礎(chǔ)。同時,安防系統(tǒng)自身也需要確保安全。
這種安全從初的硬件設(shè)備系統(tǒng)安全,軟件平臺系統(tǒng)安全,發(fā)展到系統(tǒng)的網(wǎng)絡(luò)安全。現(xiàn)在人工智能、大數(shù)據(jù)技術(shù)的逐步展開,對數(shù)據(jù)的
安全防護需求日益上升,尤其用戶對數(shù)據(jù)信用安全的需求將成為系統(tǒng)集成商的核心競爭力之一。
從數(shù)據(jù)的角度,視頻圖像的數(shù)據(jù)化應(yīng)用,可以形成知識圖譜,可以協(xié)助用戶進(jìn)行決策推理,而隨著數(shù)據(jù)認(rèn)知能力的上升,將使系統(tǒng)具備一定能力的意識與靈感,這將促進(jìn)更多AI智慧應(yīng)用功能的實現(xiàn)。
記者:復(fù)盤當(dāng)前AI算法市場格局,為更好實現(xiàn)產(chǎn)品化并應(yīng)用落地,企業(yè)研發(fā)團隊、市場團隊?wèi)?yīng)該做些什么?
王生進(jìn)教授:基礎(chǔ)算法技術(shù)已經(jīng)有了很大的發(fā)展,目前更多在于推進(jìn)算法的落地應(yīng)用。
從分支發(fā)展看,各類算法團隊在加強大數(shù)據(jù)量算法、小樣本算法、ReID等算法技術(shù)的研究,這是根據(jù)不同行業(yè)、不同場景的用戶需求,逐步進(jìn)行算法技術(shù)的細(xì)分研究。
這對算法團隊數(shù)據(jù)量的積累,特定場景小樣本數(shù)據(jù)的研究能力,細(xì)節(jié)上的優(yōu)化能力等方面是一個考驗。例如,清華團隊圍繞特種人群的小樣本人臉識別研究成果已在廣州落地得到了應(yīng)用。
結(jié)合場景,不斷進(jìn)行技術(shù)創(chuàng)新。用戶場景下的數(shù)據(jù)往往是多維的(例如視頻、圖像、步態(tài)、行人、語音、文字等),這將考驗團隊跨媒體多維智能算法的研究能力,我之前在《人像態(tài)視識別及其在智能視頻監(jiān)控中的應(yīng)用》報告中提出的人像態(tài)視識別新概念,就屬于多維智能算法的應(yīng)用思路。
清華團隊在跨媒體多維智能算法方面有著豐富的技術(shù)積累,不僅在人臉、行人、步態(tài)、車、場景與物體等方面的算法研究取得了諸多成果,還在掌紋
生物識別,語音識別,文字識別,輔助駕駛,機器視覺,工業(yè)智能等方面有諸多的算法研究成果。
當(dāng)面向場景的智能機器人或智能交互應(yīng)用中AI算法不再單一被應(yīng)用,而是以“算法族”的模態(tài)被運算,隨著場景應(yīng)用的復(fù)雜性,對于算法技術(shù)研究的要求會更多,其中的探索空間會更大。
這是研究的一個方向,也是未來應(yīng)用的方向。
需要指出的是,要實現(xiàn)從算法到應(yīng)用落地的過程,關(guān)鍵是人和“團隊”。它需要一個能深度理解行業(yè)需要,客戶需求,并能有效推動產(chǎn)業(yè)應(yīng)用落地的專業(yè)團隊,我們在構(gòu)建清華“紫為云?清華AI使能平臺”時就深刻認(rèn)識到了這一點,認(rèn)識到“技術(shù)+市場+管理”的重要性。
“紫為云”的另一位聯(lián)合創(chuàng)始人是一位從事智能視頻監(jiān)控領(lǐng)域20年的業(yè)界資深人士,曾獲得過“40年改革開放中國安防*人物獎”,主要由他帶領(lǐng)團隊來完成應(yīng)用落地的工作。
記者:新基建對AI應(yīng)用落地有著深遠(yuǎn)影響,AI企業(yè)在新基建中將擔(dān)當(dāng)重要角色,紫為云作為清華AI使能平臺,如何看當(dāng)前的機遇與未來的挑戰(zhàn)。
王生進(jìn)教授:人工智能是一個系統(tǒng)工程,它的應(yīng)用領(lǐng)域特別多。
在2017年《新一代人工智能發(fā)展規(guī)劃》的政策基礎(chǔ)上,人工智能被列為國家新基建的重點工程推動,這意味著人工智能*,大規(guī)模應(yīng)用落地的時間點正式開啟,各類AI企業(yè)將成為各種行業(yè)創(chuàng)新應(yīng)用的*,這對AI產(chǎn)業(yè)會形成一股巨大的推動力,也會進(jìn)一步促進(jìn)AI算法技術(shù)的研究。
對紫為云來說,國家推動新基建的人工智能、大數(shù)據(jù)中心、工業(yè)互聯(lián)網(wǎng)這三個關(guān)鍵點,與我們AI使能平臺的核心技術(shù)優(yōu)勢契合,這將形成更大的成長動力。
國家在政策層面指出了產(chǎn)業(yè)和企業(yè)發(fā)展的方向,并為技術(shù)研發(fā)和應(yīng)用創(chuàng)新提供了有利的政策和資源環(huán)境,清華人更有信心在人工智能大發(fā)展的時代,把AI科研做好,把AI落地應(yīng)用推動好,為企業(yè)AI使能,為產(chǎn)業(yè)AI使能。
記者:在偌大的視頻監(jiān)控AI算法圈層中,紫為云AI使能平臺在其中扮演什么角色?
王生進(jìn)教授:當(dāng)前AI市場的規(guī)模有很多種說法,總體上規(guī)模還不到想象的那么大,未來的市場伴隨越來越多的新場景應(yīng)用涌現(xiàn),市場空間和規(guī)模還是很大。
雖然安防屬于AI應(yīng)用落地比較早的行業(yè),但AI在安防行業(yè)場景的應(yīng)用還是處于早期階段,主要還是重點部位的視頻結(jié)構(gòu)化,大規(guī)模的應(yīng)用還正在展開。
從當(dāng)前正在制定的幾個公安部行業(yè)標(biāo)準(zhǔn)來看,AI的安防應(yīng)用還處于關(guān)鍵窗口期。
在這個階段,無論是一些AI獨角獸企業(yè),還是傳統(tǒng)的安防大型企業(yè),不論是BATH,或者是各種維度上基礎(chǔ)層、技術(shù)層、應(yīng)用層的AI企業(yè),每一家企業(yè)都有自己的優(yōu)勢和特長,各自都有自己專注的重點和方向。
大家都是AI產(chǎn)業(yè)長跑跑道上的選手和伙伴,大家都在朝著AI為產(chǎn)業(yè)升級、為人類美好生活服務(wù)的愿景努力前行。
紫為云AI使能平臺也是這條長跑跑道上的選手和伙伴之一,我們在產(chǎn)業(yè)市場上,秉持開源、使能的理念,更在乎能支持更多的企業(yè)具備AI能力,讓他們在各自的行業(yè)里推動更多的AI產(chǎn)品和創(chuàng)新應(yīng)用。
在人工智能時代,讓AI技術(shù)“平民化”;讓AI技術(shù)更簡單、更便捷和更安全;讓AI使能更多企業(yè)、讓AI使能更多產(chǎn)業(yè);把AI技術(shù)落到場景實處,為社會應(yīng)用服務(wù),讓人們的生活通過AI變得更加便捷和美好。
這是清華人的AI理想!