摘 要: 提出了一種新型的視頻圖像卡通化處理方案。首先根據(jù)視覺顯著性模型從輸入的視頻圖像中計算出一張視覺注意力函數(shù)圖,并將視頻圖像轉(zhuǎn)換到La*b*色彩空間;在視覺注意圖的指導(dǎo)下對低對比度區(qū)域用迭代的可分離雙邊濾波器做平滑操作,對高對比度區(qū)域用DoG算子作線條增強;最后用顏色的軟量化算子處理L亮度通道使之生成類似于卡通化的顏料塊效果,同時加深各邊界之間的不連續(xù)性。實驗表明,本方案對高注意力區(qū)域保留更多的細節(jié)信息來突出感興趣區(qū)域,同時淡化了不感興趣的區(qū)域,解決了Winnemöller不能處理前景和背景對比度不明顯的圖像的情況,而且在視覺上更能體現(xiàn)出卡通化的效果。
關(guān)鍵詞: 圖像卡通化; 視覺注意力; 雙邊濾波; 線條繪制; 顏色量化
近年來, 視頻或圖像的卡通化作為一種新興的文化產(chǎn)業(yè)受到越來越多國內(nèi)外視覺領(lǐng)域?qū)<覍W(xué)者的關(guān)注和研究,其中很多國外學(xué)者提出了實現(xiàn)視頻自動卡通化風格的方法。WINNEMÖLLER H等人[1]提出了一種實時的視頻和圖像卡通化框架,該框架用雙邊濾波器來進一步減少低對比度區(qū)域的對比度,同時用高斯差分線條來加深高對比度區(qū)域的對比度。DECARLO D和SANTELLA A[2]在一個多尺度的系統(tǒng)下使用眼動儀來對圖像進行簡化。但是由于儀器價格昂貴而且測試起來比較復(fù)雜耗時,ITTI L等人[3]提出了基于顯著性模型來檢測感興趣的區(qū)域,他們認為除了顏色和亮度以外,對比度本身也是一個很重要的特征信息。HAREL J[4]等人在參考文獻[3]的基礎(chǔ)上提出了一種計算視覺顯著性的改進算法,該算法不僅考慮了特征的相似性信息,而且還考慮了特征的差異性信息,從而可以對圖像特征進行準確的計算。
本文在參考文獻[1]的基礎(chǔ)上使用參考文獻[4]的計算視覺顯著性模型來簡化視頻圖像中的不重要特征,同時突出重要的視覺特征。
1 提取圖像的顯著性特征圖
顯著性特征圖是一種表示相關(guān)場景視覺顯著性的局部圖。參考文獻[4]提出了精確的特征計算方法,該算法采用拓撲結(jié)構(gòu)而不再是bottom-up的方式來達到精確的特征計算,同時還使用了馬爾科夫鏈來權(quán)衡圖像中兩點之間邊的權(quán)重和狀態(tài)的轉(zhuǎn)換。該算法不僅考慮了特征的相似性,而且考慮了特征的差異性。
參考文獻[4]算法的主要步驟如下。
布更加集中,高注意力區(qū)域更加連貫,線條也更加明顯,同時也能很好地描述主體的大致輪廓。將參考文獻[4]方法的顯著性函數(shù)圖疊加到原圖,其中中心區(qū)域和白色光環(huán)表示人眼停留在此區(qū)域的時間長短,中心區(qū)域表示停留時間比較長,可見,在前景和背景對比度不明顯的情況下,參考文獻[4]的算法也可以很好地檢測出感興趣的區(qū)域。
用提取的顯著性特征圖指導(dǎo)雙邊濾波器對圖像中感興趣區(qū)域和不感興趣區(qū)域的模糊程度,通過控制雙邊濾波器[5-6]的范圍權(quán)值函數(shù)w(·)決定圖像什么地方應(yīng)該模糊什么地方應(yīng)該強化保留。范圍權(quán)值函數(shù)定義為:
參考文獻[1]雙邊濾波效果如圖3所示,利用顯著特征圖改進的效果圖如圖4所示。從圖3和圖4的對比中可以發(fā)現(xiàn),參考文獻[1]的雙邊濾波對整體都有均勻的模糊效果,但是利用顯著特征圖指導(dǎo)雙邊濾波就可以在感興趣的區(qū)域模糊程度相對低一些,從而保留更多的細節(jié)信息,同時對于不感興趣的背景區(qū)域(如圖中的地面和墻)都能去掉更多的細節(jié)信息。
3 實驗與分析
兩組卡通化效果圖如圖5和圖6所示。因為參考文獻[1]假設(shè)感興趣區(qū)域是圖像的亮度和高對比度區(qū)域,對于第2組貓的圖像來說,處理前景和背景的顏色差異比較相近的圖像就失敗了,不能很好地分辨出感興趣區(qū)域。而本文的算法先是采用參考文獻[4]算法檢測出圖像的感興趣區(qū)域,然后再采用不同的權(quán)值對圖像進行不同程度的濾波,所以在處理這種前景與背景對比度不明顯的圖像時也能達到很好的效果,并且彌補了參考文獻[1]算法不能處理圖像前景與背景對比度不明顯的情況,從而在視覺效果上更能體現(xiàn)出圖像的個性化和藝術(shù)性。
本文提出了一種新型的卡通化方案,在具有參考文獻[1]的實時卡通化效果的基礎(chǔ)上增加了視覺顯著性模型,實現(xiàn)了視頻圖像的非均勻卡通化處理。實驗表明,本文的方案在卡通化一些前景和背景對比度不明顯的圖像時可以取得很好的效果。
參考文獻
[1] WINNEMÖLLER H, OLSEN S C, GOOEH B. Real-time video abstraction[C]. Proceedings of ACM SIGGRAPH’06, ACM, 2006:1221-1226.
[2] DECARLO D,SANTELLA A. Stylization and abstraction of photographs[C]. Proceedings of ACM SIGGRAPH, 2002:769-776.
[3] ITTI L, KOEH C. Computational modeling of visual attention[C]. Nature Reviews Neuro-Science 2, 2001:194-203.
[4] HAREL J, KOCH C, PERONA P. Graph-based visual saliency[J]. 2006. Nips, 2006.
[5] PHAM T Q, VAN VLIET L J. Separable bilateral filtering for fast video preprocessing[C]. Proceedings of IEEE International Conference on Multimedia and Expo, IEEE Computer Society, 2005:454-457.
[6] PHAM T Q, VLIET L J. Separable bilateral filtering for fast video preprocessing[C]. IEEE International Conference on Multimedia & Expo, CD1-4.