核心算法

核心圖像處理算法這塊，直接影響系統(tǒng)資源占有率、碼流、帶寬和存儲。圖像邊緣彎曲的矯正，場景的分割，虛擬PTZ、轉動、放大等功能的實現(xiàn)，這些同樣也是由核心算法帶動的。

魚眼鏡頭所成的圖像，由于景深曲率的影響，圖像的畸變十分嚴重，不符合正常視覺感受。故需要圖像矯正技術消除魚眼鏡頭畸變。圖像矯正技術的思路并不復雜，一般是從原始餅圖拉出一個單獨扇形，再根據(jù)比例及透視等原理進行一定變形及校正處理，拼合這些分別處理好的扇形圖像便可得到符合監(jiān)控需求的圖像。對于需求不高的產(chǎn)品，可直接對圓形餅圖進行簡單四角拉伸，也能取得適合人眼觀看的圖像效果。

雖然具體到每一個廠家其核心算法必然會有所不同，但圖像矯正技術的中心思想都是采用一定算法把邊緣畸變嚴重的圖形拉伸整合為適合觀看的正常視覺比例的圖像。其中所用算法的合理性、編程水平的高低及最終系統(tǒng)資源占用率共同決定了此算法的優(yōu)劣。至于虛擬PTZ，其實就是在圖像內(nèi)部進行像素抓取，以實現(xiàn)圖像的電子放大與旋轉等功能。對比校正算法，它主要的困難不是如何取得更為優(yōu)秀的圖像效果，而是如何更好地同時整合到前端固件與后端軟件上，實現(xiàn)對實時與事后錄像的雙向虛擬控制。

目前的魚眼全景攝像機有兩種方式集成核心算法。

1、軟件前端固件集成

此類攝像機所有的功能實現(xiàn)軟件，包括圖像矯正、虛擬PTZ、智能部件以及壓縮算法等全部被集成在攝像機內(nèi)部的固件上，與此同時，其后臺PC機亦可提供虛擬PTZ等功能，這種前端集成方式大大釋放了后端服務器以及網(wǎng)絡的資源。另一方面，由于前端固件在技術上的限制，預計此類全景攝像機最多只能處理到五百萬像素。隨著高清化的推進，能否突破此瓶頸將是這類全景攝像機今后最大的發(fā)展難題。

2、后端軟件實現(xiàn)

此類全景攝像機所有功能皆由安裝在后端PC機上的軟件來實現(xiàn)，前端攝像機只負責抓取圖片，因此產(chǎn)品在成本與售價上都有優(yōu)勢。依賴后端PC機強大的軟件處理能力，此類產(chǎn)品沒有清晰度升級方面的瓶頸限制，在實現(xiàn)基本多分割顯示、虛擬PTZ等功能的同時，原始圖像的保留亦使得后期可進行更多的信息收集與處理工作。另一方面，此類產(chǎn)品對后端PC機與網(wǎng)絡資源消耗較高，應用在大型項目時需要配置更多的后端服務器。

魚眼鏡頭

鏡頭的選擇將決定圖像質(zhì)量的性能上限，采集到的數(shù)據(jù)不清晰，后端處理再強也不能“虛構”像素。從特性而言，魚眼鏡頭是一種超廣角的特殊鏡頭，這種攝影鏡頭的前鏡片直徑呈拋物狀，向鏡頭前部凸出，其視覺效果類似于魚眼觀察水面上的景物。雖然視場角提供了無與倫比的享受，但卻是以犧牲原有監(jiān)控畫面的真實感為前提而獲得的，魚眼鏡頭這種變形的圖像一般稱之為桶形畸變，這種畸變會隨著視場角的擴大而嚴重，不過，這也是一種合理現(xiàn)象。杭州普維光電技術有限公司總經(jīng)理李捷表示：“魚眼鏡頭是按照折射光學原理設計，一種有多塊折射透鏡組合而成的超廣角鏡頭，能夠對超過2π立體角空間進行拍攝，但是視場角和角分辨的設計受到制約。典型的表現(xiàn)就是靠近光軸的中央?yún)^(qū)域的目標角分辨率較高，但是遠離光軸的邊緣區(qū)域的目標角分辨率太低(邊緣圖像嚴重壓縮)?！?

電子PTZ

電子PTZ是基于IP的全景攝像機的一個亮點功能，不同于真實的快球攝像機的云臺控制，其在放大或移動監(jiān)控視野內(nèi)的圖像區(qū)域，當轉變方向觀察另一個圖像區(qū)域時，不會發(fā)出任何噪音，隱秘且不易察覺。全景攝像機的PTZ不需要機械部件的參與，提高了產(chǎn)品的壽命和可靠性，同時其技術特點可以保證有多個PTZ窗口可以被同時預覽，顛覆了PTZ在傳統(tǒng)攝像機上只能分時觀察不同區(qū)域的理解。

分辨率

全景攝像機相對于普通攝像機而言一個很大的優(yōu)勢在于其超大的監(jiān)控范圍，然而從分辨率密度上來考慮，同樣像素的攝像機在監(jiān)控更大的區(qū)域時會導致像素的分散和退化。這是由于監(jiān)控范圍很大，在與傳統(tǒng)監(jiān)控鏡頭同有大小相同的成像芯片上，需要接收數(shù)倍的圖像信息，這就造成畫面分辨率的下降，因此只有在對視頻監(jiān)控圖像畫面質(zhì)量要求不太高或使用高分辨率成像器件時才能使用全景攝像機。這就解釋了為什么300萬像素的全景攝像機畫面質(zhì)量看上去像CIF分辨率。所以對于全景攝像機而言，提高畫面分辨率是未來一項重要的研究課題。

魚眼全景+高速球，天作之合

全景攝像機一般都是高清攝像機，人們對其圖像質(zhì)量的期望較高。但是由于魚眼全景攝像機鏡頭的焦距很短，使得有效的監(jiān)控范圍大受限制，大約在半徑5米內(nèi)可以看清人臉，更遠的話就會顯得不夠清晰。也就是說全景攝像機雖然滿足了“無死角監(jiān)控”的需要，但是由于鏡頭焦距的問題，也就很難滿足“看清所有細節(jié)”的需要，這是全景攝像機推廣過程中遇到的一個瓶頸。而高速球機具備大變焦，可旋轉的功能，在監(jiān)控細節(jié)呈現(xiàn)上做的非常出色，但是單個球機在快速定位和判斷方位等方面還是不夠方便和快捷。

通過軟硬件結合的方式將一臺魚眼全景和一臺高速球進行聯(lián)動不失為一個“極好的”方法。在全景攝像機能實現(xiàn)大場景、大視野監(jiān)控的基礎上，高速球提升細節(jié)監(jiān)控的能力，其就像是上級單位掌握整個畫面中所偵測到的事件，而快速球就像是部屬一般，接收到上級下達的指令后，隨即跟蹤監(jiān)控可疑目標并透過高變倍鏡頭，可將目標影像放大至1080P或以上的分辨率。讓使用者在透過魚眼攝影機監(jiān)控整個環(huán)境的同時也可利用快速球攝影機擷取重點區(qū)域高畫質(zhì)的影像畫面。我們有理由相信和高速球“聯(lián)姻”將是魚眼全景的宿命之一。