眾所周知，一篇完整的論文都要求寫隨文摘要，摘要是提供論文內(nèi)容梗概為目的，它可以讓讀者盡快了解論文的主要內(nèi)容。視頻摘要的概念源自文本摘要，指從原始視頻中提取精華信息，把若干小時(shí)視頻濃縮為十幾分鐘甚至更少，大幅度縮短視頻查看的時(shí)間。通過采用視頻目標(biāo)特征檢索技術(shù)，克服視頻底層特征與人類思維所能理解的高層語(yǔ)義的鴻溝，迅速尋找到感興趣的目標(biāo)。視頻摘要與檢索充分挖掘海量視頻監(jiān)控錄像中的寶藏，大大提高海量監(jiān)控視頻錄像分析的效率。

　　海量視頻調(diào)閱檢索

　　面臨著巨大的挑戰(zhàn)，人工查找線索猶如大海撈針一般來說，視頻錄像中的很多重要的線索或活動(dòng)對(duì)象，在監(jiān)控畫面中僅僅出現(xiàn)十幾秒甚至數(shù)秒，而這樣的信息散落在數(shù)十小時(shí)的視頻中，人工查看極易遺漏這些轉(zhuǎn)瞬即逝的重要信息。據(jù)IMF研究實(shí)驗(yàn)表明，連續(xù)觀察12分鐘的視頻圖像，觀察者會(huì)錯(cuò)過45%的場(chǎng)景，而在連續(xù)觀察22分鐘后會(huì)錯(cuò)過95%的場(chǎng)景，從而忽略了許多重要的信息。這使得視頻錄像的真正有效使用率大為降低，即使有足夠的人力和時(shí)間，通過人工查看原始視頻的方式來捕捉轉(zhuǎn)瞬即逝的線索，也存在遺漏的可能。傳統(tǒng)視頻線索的查找，猶如大海撈針，面臨巨大的挑戰(zhàn)。面對(duì)海量視頻錄像調(diào)閱慢、分析難等問題，急需采用智能化的手段，快速處理和檢索海量視頻，提高視頻監(jiān)控錄像分析水平和工作效率。

　　佳都新太視頻摘要技術(shù)

　　大顯身手，若干小時(shí)視頻濃縮為視頻摘要精華視頻摘要(Video Abstraction)，即對(duì)視頻的結(jié)構(gòu)和內(nèi)容進(jìn)行分析，從視頻文件中提取出有意義的部分，并將它們以某種方式進(jìn)行組合，形成簡(jiǎn)潔的、能夠充分表現(xiàn)視頻語(yǔ)義內(nèi)容的概要。從時(shí)間軸上看，視頻是由一系列連續(xù)的圖像幀和相應(yīng)音頻構(gòu)成的集合，集合中的基本元素是圖像幀。視頻數(shù)據(jù)的結(jié)構(gòu)化就是對(duì)視頻在時(shí)間上的層次分割，完成原始的非結(jié)構(gòu)化的視頻流到結(jié)構(gòu)化的視頻實(shí)體的轉(zhuǎn)換。將原始的視頻流劃分為合理的結(jié)構(gòu)單位后，形成視頻內(nèi)容的層次模型，并得到視頻內(nèi)容對(duì)象的相關(guān)描述。視頻內(nèi)容的提取采用模式識(shí)別或視頻結(jié)構(gòu)探測(cè)的方法，獲取能夠被計(jì)算機(jī)直接處理，或能夠被人的感觀直接感覺到的信息。此時(shí)，視頻被分成背景（全靜止，不活動(dòng)的物體）以及前景（活動(dòng)的物體），活動(dòng)的物體會(huì)被提取出來，系統(tǒng)加以描述并插入到數(shù)據(jù)庫(kù)中。通過一定的選擇準(zhǔn)則，選擇前景和背景內(nèi)容對(duì)象作為視頻摘要的組成元素，視頻內(nèi)容對(duì)象以一定的方式組合起來，經(jīng)過渲染后形成某種形式的視頻摘要，并以可視化的形式將摘要展現(xiàn)出來。

　　視頻摘要技術(shù)具有非常實(shí)用的價(jià)值，將若干小時(shí)視頻濃縮為短小精悍、信息全面的視頻摘要精華，大大提高海量監(jiān)控視頻錄像分析的效率。

　　強(qiáng)大的視頻特征搜索，對(duì)類似視頻輕松獲取

　　視頻數(shù)據(jù)本質(zhì)上是有文本、視頻、聲音、圖像等多種多媒體融合而成，這些媒體之間并非孤立的而是相互之間存在語(yǔ)義上的關(guān)聯(lián)。因此，對(duì)視頻檢索綜合分析各種媒介在視頻數(shù)據(jù)中所蘊(yùn)含的豐富的語(yǔ)義信息，才能檢索到符合人們要求的視頻片段。利用視頻本身的底層特征，如類型、顏色、大小等進(jìn)行標(biāo)引，采用獲取圖像幀底層特征來“逼近”語(yǔ)義概念。

　　為了快速的從海量視頻數(shù)據(jù)中提取目標(biāo)信息，利用基于內(nèi)容的視頻檢索技術(shù)，跨越視頻底層特征和高層語(yǔ)義之間的語(yǔ)義鴻溝，實(shí)現(xiàn)對(duì)安防場(chǎng)景中海量視頻數(shù)據(jù)的主動(dòng)模糊查找功能�；�于內(nèi)容分析的視頻目標(biāo)分類檢索使用一種有效的運(yùn)動(dòng)分割方法提取運(yùn)動(dòng)目標(biāo)，這些運(yùn)動(dòng)目標(biāo)的基本特征（人車類別、顏色、大小等）作為元數(shù)據(jù)被提取出來并保存。利用對(duì)提取出的目標(biāo)進(jìn)行目標(biāo)特征分析，通過監(jiān)控人員的描述特征對(duì)特征庫(kù)進(jìn)行匹配，快速找出類似視頻搜索目標(biāo)，實(shí)現(xiàn)利用人類思維中高層語(yǔ)義概念來進(jìn)行視頻內(nèi)容的處理。

　　采用視頻摘要技術(shù)可大幅度縮短視頻監(jiān)控錄像倒查的時(shí)間，采用視頻目標(biāo)特征搜索可有效縮小視頻錄像的搜索范圍，視頻摘要與檢索充分挖掘海量視頻監(jiān)控錄像中的寶藏，大大提高海量監(jiān)控視頻錄像分析的效率。下圖為一個(gè)街道的夜景，通過視頻摘要與檢索，準(zhǔn)確地輸出人流和車流的摘要文件。

　　佳都新太自主研發(fā)，擁有核心知識(shí)產(chǎn)權(quán)

　　在智能視頻監(jiān)控錄像分析領(lǐng)域，國(guó)外公司無論在算法研究還是在產(chǎn)品化應(yīng)用方面都起步較早，但是直接運(yùn)用于國(guó)內(nèi)市場(chǎng)顯然有些水土不服。相對(duì)來說，國(guó)內(nèi)公司進(jìn)入該領(lǐng)域比較晚，在分析算法的成熟度、上層應(yīng)用的開發(fā)、與傳統(tǒng)安防系統(tǒng)的無縫集成等方面有待進(jìn)一步優(yōu)化。

　　佳都新太通過分析市場(chǎng)需求，在國(guó)內(nèi)率先研究視頻摘要檢索技術(shù)，目前已成功研發(fā)PCI-VSRS 1008/1016以及公安偵查案件專用的PCI-VIAI 1008/1016，核心分析算法均擁有自主知識(shí)產(chǎn)權(quán)，且分析算法的準(zhǔn)確性、系統(tǒng)的穩(wěn)定性均具有較為明顯的優(yōu)勢(shì)。PCI-VSRS兼容多種主流視頻格式，適用于公安、交通、金融、監(jiān)獄、大型企業(yè)等多種行業(yè)；PCI-VIAI適應(yīng)于公安刑偵部門的視頻調(diào)查，為公安辦案人員快速尋找線索、高效的追嫌追逃提供了強(qiáng)而有力的技術(shù)支撐。視頻摘要檢索技術(shù)的成功應(yīng)用，開創(chuàng)了海量視頻錄像分析的新時(shí)代——海量視頻回放太久，視頻摘要檢索只爭(zhēng)分秒！