海量視頻智能分析研判系統(tǒng)
來(lái)源:中安網(wǎng) 編輯:ann 2012-11-02 09:41:40 加入收藏
作者簡(jiǎn)介:李子青,國(guó)防科大碩士、英國(guó)Surrey大學(xué)博士。現(xiàn)為中科院自動(dòng)化所生物識(shí)別與安全技術(shù)研究中心主任?! ⌒枨蠓治?/p>
平安城市建設(shè)計(jì)劃在全國(guó)城市建設(shè)監(jiān)控視頻設(shè)施,部署實(shí)施了2000多萬(wàn)攝像頭,在社會(huì)管理工作中起到了積極的作用。然而,監(jiān)控視頻數(shù)據(jù)帶來(lái)的問(wèn)題日益突出,主要體現(xiàn)在海量視頻的有效利用上。2012年南京“1.6”案件發(fā)生后,在案件偵破過(guò)程中,南京警方從全市1萬(wàn)多個(gè)攝像頭共提取了近2000T的視頻數(shù)據(jù),為了處理這些視頻,調(diào)動(dòng)1500多名公安干警查閱搜索視頻線(xiàn)索,共耗時(shí)一個(gè)多月。目前視頻偵查應(yīng)用中面臨著以下幾個(gè)重要問(wèn)題:
視頻數(shù)據(jù)未得到很好利用,人、車(chē)、物目標(biāo)搜索識(shí)別,視頻分析研判等任務(wù),靠人工進(jìn)行,無(wú)法有效處理海量視頻數(shù)據(jù);
由于存儲(chǔ)容量限制,視頻數(shù)據(jù)存儲(chǔ)一個(gè)月即刪除,關(guān)鍵信息無(wú)法得到長(zhǎng)時(shí)間保存。
針對(duì)視頻設(shè)施應(yīng)用存在的問(wèn)題,公安部要求:各級(jí)公安機(jī)關(guān)要圍繞視頻監(jiān)控技術(shù)的深度應(yīng)用,服務(wù)公安實(shí)戰(zhàn),提升打防績(jī)效。對(duì)監(jiān)控建設(shè)應(yīng)用的要求,從以硬件建設(shè)為主的第一階段,向以智能應(yīng)用為主要特征的第二階段過(guò)渡,解決視頻調(diào)閱慢、分析難的問(wèn)題,從海量視頻中發(fā)現(xiàn)重要而有價(jià)值的線(xiàn)索,快速識(shí)別定位目標(biāo),挖掘其行動(dòng)軌跡,從而縮短辦案時(shí)間,降低辦案人員的工作強(qiáng)度,提高各部門(mén)聯(lián)合作戰(zhàn)效率。公安視頻偵查、治安、情報(bào)等業(yè)務(wù)部門(mén)應(yīng)該配備具有相應(yīng)智能分析功能的實(shí)戰(zhàn)工具和裝備,能進(jìn)行海量視頻的智能視頻分析、信息檢索、特征識(shí)別、圖像增強(qiáng)、報(bào)警與監(jiān)控。
面向公共安全應(yīng)用,中國(guó)科學(xué)院自動(dòng)化研究所、中國(guó)物聯(lián)網(wǎng)研究發(fā)展中心(籌)和中科奧森科技有限公司聯(lián)合對(duì)公安視頻業(yè)務(wù)進(jìn)行了深入調(diào)研,認(rèn)為:解決這些問(wèn)題的出路是,針對(duì)海量視頻分析研判,研發(fā)智能視頻分析、人車(chē)物目標(biāo)識(shí)別、目標(biāo)軌跡挖掘、海量數(shù)據(jù)分析等前沿高技術(shù), 針對(duì)公安視頻偵查與情報(bào)業(yè)務(wù),研發(fā)面向?qū)崙?zhàn)的專(zhuān)業(yè)應(yīng)用系統(tǒng), 由此提升公安業(yè)務(wù)水平和效率。
針對(duì)上述迫切需求,在國(guó)家科技支撐計(jì)劃課題和工信部物聯(lián)網(wǎng)專(zhuān)項(xiàng)的支持下,中國(guó)科學(xué)院和中科奧森研發(fā)了海量視頻智能分析研判系統(tǒng)(簡(jiǎn)稱(chēng)VSearch)。該系統(tǒng)面向公安視頻偵查、治安和情報(bào)業(yè)務(wù)專(zhuān)業(yè)應(yīng)用的智能視覺(jué)物聯(lián)網(wǎng)系統(tǒng),如下圖所示,由2個(gè)部分構(gòu)成:(1)視頻線(xiàn)索分析建庫(kù)(后臺(tái)),(2)前臺(tái) 視頻線(xiàn)索綜合研判(前端)。第(1)部分處理分析海量監(jiān)控視頻數(shù)據(jù),從中提取出有價(jià)值的視頻線(xiàn)索并構(gòu)建海量視頻情報(bào)庫(kù),對(duì)視頻目標(biāo)進(jìn)行多模態(tài)、全方位的描述,包括如空間、時(shí)間、表象、行為等特征。第(2)部分為公安業(yè)務(wù)綜合研判平臺(tái),在海量視頻情報(bào)庫(kù)基礎(chǔ)上,提供多模態(tài)視頻線(xiàn)索和信息管理、目標(biāo)快速搜索,軌跡挖掘、案件串并、綜合研判等功能。由此可見(jiàn),該系統(tǒng)工作方式與Google索引和服務(wù)類(lèi)似,是一個(gè)面向中國(guó)公安業(yè)務(wù)的專(zhuān)用智能搜索系統(tǒng)。
視頻線(xiàn)索分析建庫(kù)
海量視頻智能分析研判基于智能視覺(jué)物聯(lián)網(wǎng)的視覺(jué)標(biāo)簽系統(tǒng)。第一步是提取出有價(jià)值的視頻線(xiàn)索并構(gòu)建出海量視頻情報(bào)線(xiàn)索庫(kù)。視頻線(xiàn)索提取包括目標(biāo)檢測(cè)、目標(biāo)屬性提取、目標(biāo)關(guān)聯(lián)、和關(guān)系挖掘。這些線(xiàn)索構(gòu)成視頻情報(bào)庫(kù)的基本元素,存儲(chǔ)在云端供客戶(hù)端應(yīng)用隨時(shí)調(diào)閱。
中科院李子青博士2010年提出視覺(jué)物聯(lián)網(wǎng)(Visual Internet of Things, VIOT),其核心為物聯(lián)網(wǎng)視覺(jué)標(biāo)簽系統(tǒng),對(duì)環(huán)境中主要物品 “人、車(chē)、物”及其事件進(jìn)行分析,識(shí)別目標(biāo)的靜態(tài)屬性標(biāo)簽,和動(dòng)態(tài)行為標(biāo)簽。屬性標(biāo)簽主要是視頻中的運(yùn)動(dòng)對(duì)象的靜態(tài)屬性,如運(yùn)動(dòng)目標(biāo)的顏色、形狀和紋理(如衣服是豹紋還是格子衫)等低層特征,以及頭飾,眼鏡、發(fā)型、配飾等特征。此外,還包括運(yùn)動(dòng)目標(biāo)的類(lèi)別屬性(如行人,自行車(chē),小汽車(chē),公交車(chē),大卡車(chē)等類(lèi)別,以及行人的性別,年齡,種族等分類(lèi)),和特定屬性(如行人身份,以及車(chē)輛車(chē)牌號(hào)等)。行為標(biāo)簽是用來(lái)描述視頻數(shù)據(jù)中的運(yùn)動(dòng)對(duì)象的運(yùn)動(dòng)信息和行為信息,如運(yùn)動(dòng)對(duì)象的運(yùn)動(dòng)方向、運(yùn)動(dòng)速度是屬于運(yùn)動(dòng)標(biāo)簽,徘徊、闖禁區(qū)、闖紅燈、損害公物、亂涂亂畫(huà)等是公共場(chǎng)合下的特定行為標(biāo)簽。
視覺(jué)標(biāo)簽的提取將構(gòu)成對(duì)運(yùn)動(dòng)目標(biāo)的多模態(tài)的、全方位的描述。這些信息將保留在海量視頻情報(bào)庫(kù)中,構(gòu)成快速視頻檢索的關(guān)鍵要素,是VSearch的技術(shù)核心部分。
目標(biāo)屬性提取
目標(biāo)屬性(視覺(jué)標(biāo)簽)提取是VSearch的基礎(chǔ)技術(shù),要求對(duì)環(huán)境中主要物品 “人、車(chē)、物”及其事件進(jìn)行分析,識(shí)別目標(biāo)的靜態(tài)屬性標(biāo)簽,和動(dòng)態(tài)行為標(biāo)簽。分兩步:目標(biāo)檢測(cè)和目標(biāo)描述。
目標(biāo)檢測(cè)把視頻里活動(dòng)的目標(biāo)一一檢測(cè)和分割出來(lái),并跟蹤其在單個(gè)場(chǎng)景里的活動(dòng)。在實(shí)際監(jiān)控場(chǎng)景中,由于攝像機(jī)視角的不同以及環(huán)境光照的變化,對(duì)精確的行人、車(chē)輛檢測(cè)和分割提出了較高的要求。作為智能視頻分析中的核心問(wèn)題,VSearch擁有業(yè)內(nèi)領(lǐng)先的專(zhuān)利技術(shù),對(duì)由于攝像機(jī)視角,光照,和動(dòng)態(tài)背景變化,以及目標(biāo)物體內(nèi)在的表象變化(比如人的動(dòng)作和衣著,以及車(chē)的類(lèi)型和顏色)等引起的復(fù)雜的運(yùn)動(dòng)視頻能夠?qū)崿F(xiàn)精確的行人、車(chē)輛檢測(cè)、分割和跟蹤。
VSearch的宗旨是從視頻里分割出來(lái)的目標(biāo)不能有遺漏,這也是公安業(yè)務(wù)中最關(guān)心的功能,否則可能會(huì)丟失有重要價(jià)值的信息。其次是控制虛警。虛警太多不但影響后續(xù)模塊的處理,也影響分析研判的效率。
目標(biāo)描述由靜態(tài)屬性標(biāo)簽和動(dòng)態(tài)行為標(biāo)簽組成。屬性標(biāo)簽主要是視頻中的運(yùn)動(dòng)對(duì)象的靜態(tài)屬性,VSearch提取的屬性標(biāo)簽包括:
時(shí)間屬性:運(yùn)動(dòng)目標(biāo)活動(dòng)的時(shí)間;
空間屬性:運(yùn)動(dòng)目標(biāo)活動(dòng)的空間位置;
底層特征屬性:如運(yùn)動(dòng)目標(biāo)的顏色、形狀和紋理特征(如衣服是豹紋還是格子衫);
裝扮屬性:如帽子,頭飾,眼鏡,發(fā)型,配飾等特征;
類(lèi)別屬性:如行人,自行車(chē),小汽車(chē),公交車(chē),大卡車(chē)等類(lèi)別,以及行人的性別,年齡,種族等分類(lèi);
特定屬性:如行人身份,以及車(chē)輛車(chē)牌號(hào)等。
行為標(biāo)簽是用來(lái)描述視頻數(shù)據(jù)中的運(yùn)動(dòng)對(duì)象的運(yùn)動(dòng)信息和行為信息的,VSearch提取的行為標(biāo)簽包括:
運(yùn)動(dòng)標(biāo)簽:如運(yùn)動(dòng)對(duì)象的運(yùn)動(dòng)方向、運(yùn)動(dòng)速度和運(yùn)動(dòng)軌跡;
特定行為標(biāo)簽:如徘徊、闖禁區(qū)、闖紅燈、損害公物、亂涂亂畫(huà)等是公共場(chǎng)合下的特定行為標(biāo)簽。
視覺(jué)標(biāo)簽的提取將構(gòu)成對(duì)運(yùn)動(dòng)目標(biāo)的多模態(tài)的、全方位的描述。VSearch提取的這些信息將保留在海量視頻情報(bào)庫(kù)中,構(gòu)成快速視頻檢索的關(guān)鍵要素。
目標(biāo)關(guān)聯(lián)
目標(biāo)關(guān)聯(lián)是實(shí)現(xiàn)大范圍跨攝像機(jī)視頻情報(bào)檢索的基礎(chǔ)。實(shí)際應(yīng)用中受物理距離和建筑物空間布局的影響,單個(gè)攝像機(jī)的監(jiān)控范圍是有限的,通常需要多個(gè)攝像機(jī)合作共同監(jiān)控一個(gè)公共區(qū)域,如機(jī)場(chǎng)、火車(chē)站、地鐵站、商場(chǎng)等。因此,跨攝像機(jī)目標(biāo)關(guān)聯(lián)就成為VSearch系統(tǒng)針對(duì)大范圍視頻情報(bào)搜集的關(guān)鍵技術(shù)。有了跨攝像機(jī)目標(biāo)關(guān)聯(lián)技術(shù),VSearch將能繪制出每個(gè)運(yùn)動(dòng)目標(biāo)的大范圍活動(dòng)軌跡,這對(duì)公安辦案時(shí)掌握嫌疑人的來(lái)龍去脈是非常重要的。VSearch技術(shù)攻克了諸多導(dǎo)致跨攝像機(jī)目標(biāo)關(guān)聯(lián)困難的挑戰(zhàn)性問(wèn)題,如實(shí)際場(chǎng)景的復(fù)雜多樣性,光照變化,距離變化,目標(biāo)姿態(tài)變化,目標(biāo)遮擋,攝像頭參數(shù)不一等困難問(wèn)題。
由于國(guó)內(nèi)人口眾多,大部分公共區(qū)域都涉及比較密集的人流。這種情況下傳統(tǒng)的顏色特征將不足以鑒別跨攝像機(jī)的目標(biāo)匹配。海量視頻智能分析研判系統(tǒng)針對(duì)這一國(guó)情一方面加強(qiáng)了高清攝像機(jī)視頻的研究,使得目標(biāo)的局部細(xì)節(jié)能被利用起來(lái)作為更有效的目標(biāo)匹配方式。另一方面,VSearch技術(shù)也挖掘時(shí)間、空間、環(huán)境相關(guān)的局部約束等多模態(tài)信息實(shí)現(xiàn)更可靠的跨攝像機(jī)目標(biāo)關(guān)聯(lián)。
以上描述的目標(biāo)發(fā)現(xiàn)、關(guān)聯(lián)與標(biāo)簽提取都是關(guān)注運(yùn)動(dòng)目標(biāo)本身的。然而,在情報(bào)偵察中僅僅關(guān)注目標(biāo)本身是不夠的。因此,VSearch同時(shí)關(guān)注一個(gè)目標(biāo)與其周?chē)繕?biāo)的互動(dòng)關(guān)系,如同伙關(guān)系(總是在一起活動(dòng)的人)和接洽關(guān)系(兩個(gè)目標(biāo)不定期地會(huì)接觸)。同時(shí),一旦關(guān)系的判定為真,則同時(shí)挖掘同伙或接洽人的大范圍活動(dòng)軌跡,提取所有與其相關(guān)的視覺(jué)標(biāo)簽,以及同伙或接洽人的衍生關(guān)系。
VSearch技術(shù)深層的關(guān)系挖掘最終能夠繪制出同伙或接洽人的分布圖,以及一個(gè)團(tuán)伙的所有關(guān)系網(wǎng),這些情報(bào)對(duì)公安在緝拿逃犯過(guò)程中的全局把握,和對(duì)一個(gè)團(tuán)伙活動(dòng)的縱深認(rèn)識(shí)都將具有重要的利用價(jià)值。
云端存儲(chǔ)
以上描述的四個(gè)處理環(huán)節(jié)將產(chǎn)生巨大的信息量,如何組織和存儲(chǔ)這些信息也將是個(gè)艱巨的課題。VSearch系統(tǒng)將大范圍的監(jiān)控視頻逐級(jí)匯總到分布式的云端服務(wù)器中,并保障傳輸網(wǎng)可靠的安全性和穩(wěn)定性。同時(shí),存儲(chǔ)端的訪(fǎng)問(wèn)設(shè)置了逐級(jí)權(quán)限控制,整個(gè)公安專(zhuān)網(wǎng)的監(jiān)控視頻網(wǎng)絡(luò)中,公安部具有最高權(quán)限,往下是省廳,市局和各地派出所。
海量視頻智能分析研判系統(tǒng)支持涉案完整原始視頻資料存儲(chǔ)在案件所屬分局、案件相關(guān)視頻片段以及相關(guān)信息存儲(chǔ)在地市、案件視頻線(xiàn)索信息存儲(chǔ)在省廳,大要案、系列案視頻線(xiàn)索信息全國(guó)集中存儲(chǔ)的四級(jí)存儲(chǔ)管理機(jī)制。保障涉案視頻信息完整性以及共享、查詢(xún)工作。從而制定案件視頻信息資料存儲(chǔ)標(biāo)準(zhǔn),構(gòu)建分級(jí)管理的標(biāo)準(zhǔn)化,開(kāi)放式存儲(chǔ)平臺(tái)。
視頻線(xiàn)索綜合研判
多模態(tài)信息綜合研判
監(jiān)控視頻改變了傳統(tǒng)信息化背景下的案件信息分布和作用模式,進(jìn)而改變了案件信息綜合研判的方式。這與當(dāng)前“大情報(bào)”信息戰(zhàn)略的發(fā)展趨勢(shì)是一致的。視頻偵查技術(shù)體系涉及從集成、到上級(jí)主管部門(mén)、各警種相互配合以及各類(lèi)信息綜合利用,建設(shè)視頻線(xiàn)索綜合研判技術(shù)平臺(tái)以及相關(guān)標(biāo)準(zhǔn),保證足夠有效的信息獲取,以形成信息的規(guī)模效應(yīng)。因此,在當(dāng)前公安信息化的大背景下,如何利用已有公安信息資源,有效整合治安監(jiān)控、道路監(jiān)控、社會(huì)資源監(jiān)控等各類(lèi)視頻監(jiān)控資源,統(tǒng)一規(guī)劃實(shí)施建設(shè)適應(yīng)當(dāng)前一線(xiàn)干警視頻偵查工作的作戰(zhàn)模式、支持視頻偵查相關(guān)業(yè)務(wù)單位業(yè)務(wù)工作流程、支持案件查證和串并案案件視頻共享機(jī)制,成為視頻線(xiàn)索綜合研判的關(guān)鍵。
視頻線(xiàn)索綜合研判的過(guò)程是一個(gè)盡量充分利用視頻信息的過(guò)程,包括已知信息的獲取、重點(diǎn)信息梳理、殘缺信息推斷、信息擴(kuò)展和關(guān)聯(lián)。監(jiān)控視頻既反映了犯罪現(xiàn)場(chǎng)的靜態(tài)信息,又反映了犯罪行為及包含犯罪現(xiàn)場(chǎng)的區(qū)域相關(guān)動(dòng)態(tài)信息;既包含了時(shí)間和空間點(diǎn)的局部信息,又包含了時(shí)間段和空間距離內(nèi)的大范圍信息。信息內(nèi)容豐富而形象,具有傳統(tǒng)信息無(wú)法比擬的優(yōu)勢(shì)。同時(shí),監(jiān)控視頻包含有許多與其他種類(lèi)信息關(guān)聯(lián)的冗余信息,可以與其他信息進(jìn)行相互驗(yàn)證,深入挖掘,有利于情報(bào)信息的融合。如在監(jiān)控視頻中反應(yīng)的嫌疑人形態(tài)、面貌可以與目擊證人描述相印證,監(jiān)控視頻中的車(chē)輛信息可以與車(chē)輛庫(kù)信息相印證等。
在公安信息化建設(shè)中,目前主要包含了公共基礎(chǔ)信息(金盾工程信息庫(kù)包括全國(guó)人口基本信息資源庫(kù)、全國(guó)出入境人員資源庫(kù)、全國(guó)機(jī)動(dòng)車(chē)/駕駛?cè)诵畔?kù)、全國(guó)警員基本信息資源庫(kù)、全國(guó)在逃人員信息資源庫(kù)、全國(guó)違法犯罪人員信息資源庫(kù)、全國(guó)被盜搶汽車(chē)信息資源庫(kù)、全國(guó)安全重點(diǎn)單位信息資源庫(kù)等信息庫(kù))、旅館業(yè)治安管理信息系統(tǒng)、涉槍、涉爆人員信息庫(kù);現(xiàn)場(chǎng)勘查信息(正在推進(jìn)的現(xiàn)場(chǎng)勘驗(yàn)信息系統(tǒng));刑偵應(yīng)用信息系統(tǒng)(十五個(gè),其中包括物證信息如DNA數(shù)據(jù)庫(kù)、指紋數(shù)據(jù)庫(kù)等);PGIS系統(tǒng)和其他一些專(zhuān)業(yè)應(yīng)用系統(tǒng)等。
在視頻線(xiàn)索綜合研判過(guò)程中,派出所、偵查員以視頻偵查采集工作為主體,主要完成視頻提取、疑似目標(biāo)檢索、相關(guān)信息標(biāo)注、視頻資料打包上傳;區(qū)縣刑偵部門(mén)(專(zhuān)案組)以視頻偵查分析工作為主體,主要完成涉案視頻匯總、清晰化處理、信息關(guān)聯(lián)研判;地市相關(guān)部門(mén)以偵查與技術(shù)支持、主要完成地區(qū)視頻案件信息管理、完整技術(shù)體系建設(shè)、重特大案件技術(shù)支持和指導(dǎo);省廳相關(guān)部門(mén)以技術(shù)標(biāo)準(zhǔn)、規(guī)劃、指導(dǎo)為主體,主要完成技術(shù)體系規(guī)劃、信息共享平臺(tái)建設(shè)、人員培訓(xùn)以及重特大案件技術(shù)支持。
將“海量視頻智能分析研判系統(tǒng)”和“大規(guī)模數(shù)據(jù)庫(kù)人臉識(shí)別比對(duì)系統(tǒng)”納入“大視頻”系統(tǒng)建設(shè)中,與“大情報(bào)”并列。對(duì)案件視頻線(xiàn)索實(shí)行統(tǒng)一管理,對(duì)圖像、視頻線(xiàn)索進(jìn)行多模態(tài)全方位描述,對(duì)大案要案、窩案串案進(jìn)行深度關(guān)聯(lián)分析,利用視頻資源捕捉發(fā)案規(guī)律,破解突破方向,提高視頻線(xiàn)索分析利用對(duì)辦案工作的“貢獻(xiàn)率”。
通過(guò)構(gòu)建海量視頻情報(bào)庫(kù),就可以通過(guò)有效的查詢(xún)手段實(shí)現(xiàn)特定目標(biāo)的快速查詢(xún)和分析,從而構(gòu)建一個(gè)海量視頻智能分析研判系統(tǒng)(VSearch系統(tǒng)),及其相應(yīng)的便攜式工作站設(shè)備。
VSearch系統(tǒng)
海量視頻智能分析研判系統(tǒng)面向公安視頻偵察新業(yè)務(wù),集成智能視頻分析技術(shù),包括運(yùn)動(dòng)目標(biāo)提取,視覺(jué)標(biāo)簽檢索,目標(biāo)軌跡挖掘,及目標(biāo)關(guān)系挖掘等,提取海量視頻中的有用信息,提升監(jiān)控視頻的利用效能,從而支撐公安的智能視頻偵查業(yè)務(wù)平臺(tái)。
針對(duì)視頻偵察業(yè)務(wù)的特點(diǎn),VSearch設(shè)計(jì)為可接入公安視頻監(jiān)控專(zhuān)網(wǎng)和連接其他視頻文件。通過(guò)人工參與的半自動(dòng)視頻研判處理和脫離人工參與的全自動(dòng)的視頻研判處理兩種處理方式,將視頻中包含的案件信息線(xiàn)索保存至案件視頻庫(kù),使前方辦案警員可以隨時(shí)查看最新進(jìn)展、線(xiàn)索,或者直接將最新線(xiàn)索推送到前方辦案警員處。
VSearch面向公安的主要應(yīng)用業(yè)務(wù)包括:
視頻線(xiàn)索瀏覽:該應(yīng)用提供給公安直接瀏覽提取出來(lái)的所有目標(biāo)圖像,優(yōu)勢(shì)是不會(huì)遺漏任何一個(gè)目標(biāo),但不足的是目標(biāo)數(shù)目有可能非常龐大,難以快速定位嫌疑目標(biāo)。
視頻濃縮快覽:將提取出來(lái)的所有運(yùn)動(dòng)目標(biāo)重新安排進(jìn)一個(gè)短小的視頻播放,類(lèi)似視頻快進(jìn)功能,但重新生成的視頻畫(huà)面里不會(huì)遺漏任何一個(gè)曾經(jīng)出現(xiàn)過(guò)的運(yùn)動(dòng)目標(biāo)。該應(yīng)用使得公安能夠短時(shí)間地快速瀏覽視頻場(chǎng)景里的所有目標(biāo)。同時(shí),觀看視頻的過(guò)程中只要對(duì)某一目標(biāo)感興趣,可立刻定位到原始視頻進(jìn)行細(xì)節(jié)察看。
視頻目標(biāo)檢索:視頻目標(biāo)檢索是VSearch的核心業(yè)務(wù),該業(yè)務(wù)類(lèi)似于Google的搜索功能,能根據(jù)語(yǔ)義明確的關(guān)鍵詞檢索滿(mǎn)足要求的特定目標(biāo)。VSearch提取出的所有目標(biāo)屬性都可以通過(guò)單一或組合的檢索條件實(shí)現(xiàn)目標(biāo)檢索。如:紅色小汽車(chē);中關(guān)村東路上的紅色小汽車(chē);2012年9月16日上午10點(diǎn)至11點(diǎn)在中關(guān)村東路上往北行駛的紅色小汽車(chē);穿白色上衣的行人;知春路地鐵站A出口穿白色上衣戴黑色帽子的男人等。將列出所有滿(mǎn)足要求的目標(biāo)供公安干警瀏覽確認(rèn)(正如在Google搜索里瀏覽確認(rèn)檢索到的網(wǎng)頁(yè)條目)。這大大地縮小排查的范圍,加快辦案速度。另一方面,如果有嫌疑目標(biāo)的截圖或視頻片段,可以直接作為VSearch的輸入,從監(jiān)控視頻里檢索出相似的目標(biāo)?;趫D像或視頻的目標(biāo)再辨識(shí)技術(shù)相比于語(yǔ)義檢索能更精確地搜索到滿(mǎn)足要求的目標(biāo),從而實(shí)現(xiàn)更便利的辦案排查。
視頻圖像增強(qiáng):對(duì)于鎖定的嫌疑目標(biāo),監(jiān)控錄像有可能存在模糊不清的情況,使得關(guān)鍵細(xì)節(jié)無(wú)法辨認(rèn)(如人的臉像或車(chē)輛的車(chē)牌號(hào)碼)。VSearch提供視頻圖像增強(qiáng)技術(shù),對(duì)感興趣的目標(biāo)進(jìn)行視頻圖像后處理,使得感興趣的細(xì)節(jié)得到明顯增強(qiáng),給公安破案提供更多有價(jià)值的線(xiàn)索。目前視頻圖像增強(qiáng)支持的功能包括:去噪,去模糊,去霧,暗處增強(qiáng),和基于動(dòng)態(tài)序列的超分辨率等。
目標(biāo)軌跡挖掘:鎖定嫌疑目標(biāo)后,VSearch可以進(jìn)一步在其他相關(guān)的監(jiān)控錄像中搜索嫌疑目標(biāo),并進(jìn)一步在地圖上繪制出嫌疑目標(biāo)的行蹤軌跡,從而為公安掌握嫌疑目標(biāo)的來(lái)龍去脈,獲取破案線(xiàn)索和制定緝逃計(jì)劃提供全面的參考。
目標(biāo)關(guān)系挖掘:鎖定嫌疑目標(biāo)后,VSearch還可以進(jìn)一步挖掘嫌疑目標(biāo)的同伙和接洽人,及其衍生的關(guān)系網(wǎng)。深層的關(guān)系挖掘最終能夠繪制出同伙或接洽人的分布圖,以及一個(gè)團(tuán)伙的所有關(guān)系網(wǎng),這些情報(bào)對(duì)公安在緝拿逃犯過(guò)程中的全局把握,和對(duì)一個(gè)團(tuán)伙活動(dòng)的縱深認(rèn)識(shí)都將具有重要的利用價(jià)值。
VSearch設(shè)備
便攜式智能視頻工作站是VSearch系統(tǒng)的移動(dòng)式延伸,其功能與前述平臺(tái)一樣,可一站式調(diào)往突發(fā)事件、重大任務(wù)現(xiàn)場(chǎng)、能有效增強(qiáng)警力和業(yè)務(wù)效率,實(shí)現(xiàn)實(shí)時(shí)警務(wù),是智能視頻情報(bào)偵察平臺(tái)的立體化延伸,是海量視頻信息處理與案情研判的金剛利器。
由上,海量視頻智能分析研判系統(tǒng)將構(gòu)建一個(gè)基于海量視頻并能快速響應(yīng)的情報(bào)檢索平臺(tái)。該系統(tǒng)工作方式與Google索引和服務(wù)類(lèi)似,是一個(gè)面向中國(guó)公安業(yè)務(wù)的專(zhuān)用智能搜索系統(tǒng)。該平臺(tái)利用海量視頻云端情報(bào)庫(kù),可實(shí)時(shí)檢索公安需求的情報(bào)信息,如滿(mǎn)足特定條件(視覺(jué)標(biāo)簽)的目標(biāo)人或車(chē)輛,該目標(biāo)大范圍的行蹤軌跡,該目標(biāo)的同伙的分布及其關(guān)系網(wǎng)等等。這些信息都將能立體地呈現(xiàn)出來(lái),給公安辦案裝備全新的、高科技的武裝。
結(jié)束語(yǔ)
海量視頻智能分析研判系統(tǒng)(VSearch)基于中科院核心技術(shù),其系統(tǒng)產(chǎn)品經(jīng)過(guò)實(shí)戰(zhàn)測(cè)試和演練,展示了視頻偵查、治安和情報(bào)業(yè)務(wù)的智能分析研判能力。未來(lái)將在實(shí)踐中提煉關(guān)鍵問(wèn)題并全力攻關(guān),進(jìn)一步加強(qiáng)核心技術(shù)研發(fā),使之能處理密集人群中精確的目標(biāo)跟蹤,遠(yuǎn)距離攝像機(jī)的目標(biāo)關(guān)聯(lián),和復(fù)雜的目標(biāo)關(guān)系網(wǎng)絡(luò)的可靠推斷等。VSearch在實(shí)戰(zhàn)中不斷改進(jìn),逐漸成熟,將能極大地提升公安的警力和辦案效率。我們期待那一天的到來(lái)!
評(píng)論comment