軟件所在部分內容被遮擋的圖像合成研究中取得進展

文章來源:計算機科學國家重點實驗室  |  發布時間:2019-11-01  |  【打印】 【關閉

  

  近期,中國科學院软件所计算机科学国家重点实验室王文成团队提出了可简便处理部分内容被遮挡的图像合成新方法,克服了已有图像合成方法只能处理被融入图像内容只能置于待融入的目标图像的内容之上的限制,极大地减少了图像内容拾取的交互操作,提高了图像合成的工作效率。相关成果以Image composition of partially occluded objects为题,发表于欧洲图形学学会会刊Computer Graphics Forum, Vol.37, No.7, 2019,并在太平洋图形国际会议Pacific Graphics 2019上进行了口头报告。

  圖像合成處理,是從源圖像中拾取部分內容融入到目標圖像中,使合成的圖像看起來較自然。當前,已有的圖像合成方法均要求:將被融入的圖像內容,只能置于待融入的目標圖像的內容之上。這樣,對需要有部分內容被遮擋的圖像內容的合成處理工作造成麻煩,在這種情況下,往往需要通過繁瑣的交互處理來剔除被遮擋部分,或進行圖層間前後次序安排,導致工作效率很低。

  在圖像合成處理研究中,該團隊認識到:被融入的圖像內容在合成後的圖像中應該是大部分可見的、被融入的圖像內容與目標圖像中的許多內容往往會處于一個公共的支撐面上。基于此,該團隊科研人員提出有效方法,能夠很好地推斷出被融入的圖像內容與目標圖像中的許多內容之間的前後遮擋關系,由此提出了一種新的圖像合成方法。首先,基于深度學習的圖像分割方法,可獲知源圖像和目標圖像中的分割內容、以及目標圖像中的深度信息。然後,用戶只需簡單的交互操作即可進行內容拾取(如點擊源圖像中的相關分割內容),隨後將拾取的內容置于目標圖像中的合適位置並調整適當的大小。此時,新方法基于所推斷出的前後遮擋關系,能夠完成圖像合成計算,且無需要求被融入圖像內容置于待融入的目標圖像的內容之上,能夠簡便、高效地完成部分內容被遮擋情況的圖像合成工作。

  該研究很好地拓展了圖像合成可處理的情況,有利于推動圖像合成在實踐應用中的使用。相關工作得到了國家自然科學基金項目的資助。

    論文链接: Image Composition of Partially Occluded Objects