• / 20
  • 下載費用:30 金幣  

圖像處理裝置、圖像處理方法和程序、以及攝像裝置.pdf

摘要
申請專利號:

CN201380069995.0

申請日:

2013.12.24

公開號:

CN104919456A

公開日:

2015.09.16

當前法律狀態:

授權

有效性:

有權

法律詳情: 授權|||實質審查的生效IPC(主分類):G06F 17/30申請日:20131224|||公開
IPC分類號: G06F17/30; H04N1/32; H04N5/232 主分類號: G06F17/30
申請人: 佳能株式會社
發明人: 石田千里
地址: 日本東京都大田區下丸子3-30-2
優先權: 2013-003570 2013.01.11 JP
專利代理機構: 北京怡豐知識產權代理有限公司11293 代理人: 遲軍
PDF完整版下載: PDF下載
法律狀態
申請(專利)號:

CN201380069995.0

授權公告號:

||||||

法律狀態公告日:

2018.06.22|||2015.10.14|||2015.09.16

法律狀態類型:

授權|||實質審查的生效|||公開

摘要

圖像處理裝置驗證在光場數據中是否拍攝與在發送目的地的人相同的人作為被攝體,并且當拍攝該人作為被攝體時,將作為發送目的地的人的被攝體圖像的焦距,設置為用于再聚焦光場數據的焦距。

權利要求書

權利要求書
1.  一種圖像處理裝置,該圖像處理裝置包括:
第一獲得單元,其用于獲得作為被攝體空間的三維信息的光場數據;
生成單元,其用于通過使用所述光場數據檢測所述被攝體空間中包括的被攝體,來生成被攝體信息,并將所生成的被攝體信息添加到所述光場數據中;
設置單元,其用于基于所述光場數據的拍攝信息來設置用于再形成所述光場數據的焦距,并將所設置的焦距添加到所述光場數據中;
第二獲得單元,其用于獲得與作為所述光場數據的發送目的地對象的外部裝置相對應的被攝體的信息;
檢測單元,其用于從被添加到所述光場數據的被攝體信息中,檢測通過所述第二獲得單元獲得的與所述外部裝置相對應的被攝體;以及
控制單元,其用于根據所述檢測的結果,更新由所述設置單元設置的焦距。

2.  根據權利要求1所述的圖像處理裝置,其中,所述控制單元將在更新由所述設置單元設置的焦距之后獲得的光場數據,發送至所述外部裝置。

3.  根據權利要求1所述的圖像處理裝置,其中,所述第二獲得單元獲得用于辨別所述外部裝置、用于與所述外部裝置進行數據通信的通信單元、以及用于與所述外部裝置進行數據通信的通信方法中的一者是否支持所述光場數據的支持信息,并且
其中,在基于所述支持信息確定所述外部裝置、用于與所述外部裝置進行數據通信的所述通信單元、以及用于與所述外部裝置進行數據通信的所述通信方法中的一者支持所述光場數據的情況下,所述控制單元將在更新由所述設置單元設置的焦距之后獲得的光場數據,發送至所述外部裝置。

4.  根據權利要求3所述的圖像處理裝置,其中,所述控制單元包括再形成單元,所述再形成單元用于在基于由所述第二獲得單元獲得用于辨別所述外部裝置、用于與所述外部裝置進行數據通信的所述通信單元、 以及用于與所述外部裝置進行數據通信的所述通信方法中的一者是否支持所述光場數據的所述支持信息,確定所述外部裝置、用于與所述外部裝置進行數據通信的所述通信單元、以及用于與所述外部裝置進行數據通信的所述通信方法中的一者不支持所述光場數據的情況下,根據在所述控制單元的控制下更新的焦距,來再形成所述光場數據,以生成再形成圖像,并且
其中,所述控制單元將所述再形成單元生成的所述再形成圖像發送至所述外部裝置。

5.  根據權利要求4所述的圖像處理裝置,所述圖像處理裝置還包括:
編碼單元,其用于對所述再形成單元生成的圖像進行編碼。

6.  根據權利要求1至5中任一項所述的圖像處理裝置,其中,在所述檢測單元從被添加到所述光場數據的被攝體信息中,未檢測到與所述外部裝置相對應的被攝體的信息的情況下,所述控制單元不更新所述設置單元設置的焦距。

7.  根據權利要求6所述的圖像處理裝置,其中,所述支持信息包括從所述外部裝置接收到的信息。

8.  根據權利要求6所述的圖像處理裝置,其中,所述第二獲得單元從預先存儲在存儲器中的信息中,獲得與作為所述光場數據的發送目的地對象的所述外部裝置相對應的被攝體的信息。

9.  根據權利要求6所述的圖像處理裝置,其中,所述第二獲得單元從所述外部裝置接收到與作為所述光場數據的發送目的地對象的所述外部裝置相對應的被攝體的信息。

10.  一種圖像處理方法,該圖像處理方法包括:
獲得步驟,獲得作為被攝體空間的三維信息的光場數據;
生成步驟,通過使用所述光場數據檢測所述被攝體空間中包括的被攝體,來生成被攝體信息,并將所生成的被攝體信息添加到所述光場數據中;
設置步驟,基于所獲得的光場數據的拍攝信息來設置用于再形成所 述光場數據的焦距,并將所設置的焦距添加到所述光場數據中;
第二獲得步驟,獲得與作為所述光場數據的發送目的地對象的外部裝置相對應的被攝體的信息;
檢測步驟,從被添加到所述光場數據的被攝體信息中,檢測在所述第二獲得步驟中獲得的與所述外部裝置相對應的被攝體;以及
控制步驟,根據所述檢測的結果,更新在所述設置步驟中設置的焦距。

11.  一種用于控制圖像處理裝置的程序,所述圖像處理裝置用于對作為被攝體空間的三維信息的光場數據進行處理,
所述程序包括用于使計算機用作如下單元的代碼:
獲得單元,其用于獲得所述被攝體空間的三維信息的所述光場數據;
生成單元,其用于通過使用所獲得的光場數據檢測所述被攝體空間中包括的被攝體,來生成被攝體信息,并將所生成的被攝體信息添加到所述光場數據中;
設置單元,其用于基于所獲得的光場數據的拍攝信息來設置用于再形成所述光場數據的焦距,并將所設置的焦距添加到所述光場數據中;
第二獲得單元,其用于獲得與作為所述光場數據的發送目的地對象的外部裝置相對應的被攝體的信息;
檢測單元,其用于從被添加到所述光場數據的被攝體信息中,檢測通過所述第二獲得單元獲得的與所述外部裝置相對應的被攝體;以及
控制單元,其用于根據所述檢測的結果,更新由所述設置單元設置的焦距。

12.  一種計算機可讀存儲介質,其存儲根據權利要求11所述的程序。

13.  一種攝像裝置,該攝像裝置包括:
攝像單元,其用于獲得攝像信號以獲得作為被攝體空間的三維信息的光場數據;
根據權利要求1至9的任一項所述的圖像處理裝置;
通信單元,其用于與所述外部裝置進行通信;以及
操作單元,其用于輸入指令,
其中,所述通信單元基于根據由所述操作單元輸入的指令而選擇的所述外部裝置、用于與所述外部裝置進行數據通信的通信設備、以及用于與所述外部裝置進行數據通信的通信方法中的一者的信息,將通過所述圖像處理裝置獲得的所述光場數據、以及通過再形成所述光場數據而獲得的再形成圖像中的一者,發送至所述外部裝置。

14.  根據權利要求13所述的攝像裝置,其中,所述控制單元控制所述通信單元從根據由所述操作單元輸入的指令而選擇的所述外部裝置中獲得所選擇的外部裝置的信息。

15.  根據權利要求14所述的攝像裝置,其中,所述控制單元基于根據由所述操作單元輸入的指令而選擇的所述外部裝置的信息,來選擇通過所述第一獲得單元獲得的所述光場數據。

16.  根據權利要求13至15中任一項所述的攝像裝置,其中,所述操作單元輸入改變被添加到所述光場數據中的焦距的指令,并且所述再形成單元基于根據所述指令而改變的焦距,再形成所述光場數據。

17.  一種服務器裝置,該服務器裝置包括:
通信單元,其用于與外部裝置進行通信;
第一獲得單元,其用于獲得作為被攝體空間的三維信息的光場數據;
檢測單元,其用于基于經由所述通信單元獲得的所述外部裝置的信息,從所獲得的光場數據的被攝體信息中檢測與所述外部裝置相對應的被攝體的信息,所述被攝體信息指示所述被攝體空間中包括的被攝體以及被攝體的焦距;
再形成單元,其用于根據所述檢測的結果確定用于再形成所述光場數據的焦距,并基于所確定的焦距再形成層所述光場數據以生成再形成圖像;以及
下載單元,其用于響應于從所述外部裝置發出的指令,經由所述通信單元將所述再形成圖像下載到所述外部裝置。

18.  根據權利要求17所述的服務器裝置,其中,所述外部裝置包括 根據權利要求13至15中任一項所述的攝像裝置。

19.  根據權利要求17或18所述的服務器裝置,其中,所述被攝體信息被添加到通過所述第一獲得單元獲得的所述光場數據中。

20.  根據權利要求19所述的服務器裝置,所述服務器裝置還包括:
生成單元,其用于通過使用所獲得的光場數據檢測所述被攝體空間中包括的被攝體,來生成所述被攝體信息,并將所生成的被攝體信息添加到所述光場數據中;以及
設置單元,其用于基于所獲得的光場數據的拍攝信息來設置用于再形成所述光場數據的焦距,
其中,所述檢測單元從所述生成單元生成的被攝體信息中檢測與所述外部裝置相對應的被攝體的信息。

21.  根據權利要求20所述的服務器裝置,其中,所述通信單元從所述外部裝置接收改變焦距的指令,并且所述再形成單元基于根據所接收到的指令而改變的焦距,再形成所獲得的光場數據,以生成再形成圖像。

說明書

說明書圖像處理裝置、圖像處理方法和程序、以及攝像裝置
技術領域
本發明涉及用于處理光場數據的圖像處理裝置。
背景技術
已知如下方法:基于通過從許多視角對被攝體進行拍攝而獲得的圖像,生成具有任意焦距、景深和視角的圖像。
例如,在NPL(非專利文獻)1中,公開了如下配置:在攝像元件的前方布置有具有以1比多個像素的比例排列的微透鏡的微透鏡陣列,從而不僅獲得光強的二維分布,而且獲得關于入射到攝像元件的光線的入射方向的信息,由此獲得被攝體空間的三維信息。
上述能夠獲得被攝體空間的三維信息的這種攝像裝置被稱為“光場照相機”。
另外,被攝體空間的三維信息被稱為“光場數據”,通過獲得光場數據并在拍攝之后對光場數據進行圖像再形成處理,能夠進行被稱為“再聚焦”的圖像處理。再聚焦例如包括:改變圖像的聚焦位置和圖像的拍攝視角、以及調整圖像的景深。
當要查看上述能夠進行再聚焦的這種光場數據時,在某些情況下難以確定要在哪個焦點位置對要首先顯示的圖像進行再聚焦。為了解決該問題,在PTL(專利文獻)1的技術中,從圖像中提取被攝體,以顯示在被攝體所在的位置對焦的再聚焦圖像。
引用列表
專利文獻
PTL 1:日本特開2011-22796號公報
非專利文獻
NPL 1:Ren.Ng,and 7others,"Light Field Photography with Hand-Held Plenoptic Camera,"Stanford Tech Report CTSR,2005-02
發明內容
技術問題
如上所述,在光場照相機中,能夠在拍攝之后選擇期望的焦距以再形成圖像。因此,有必要通過使用拍攝時使用的焦距、主被攝體的信息以及其他這種信息,從多個焦距中確定要在首先顯示光場數據時使用的焦距,并將確定的焦距存儲為默認焦距。
然而,例如,對多個人進行了拍攝的光場數據可能包括在與主被攝體不同的焦距處的被攝體。在這種情況下,如果當向各個人發送光場數據時將主被攝體的焦距確定為默認焦距,則出現以下問題。具體地說,在與主被攝體不同的焦距處的被攝體的人是發送目的地的人的情況下,在發送目的地側再形成的光場數據,被不期望地首先顯示為相關人的圖像模糊的圖像。
類似地,在再形成光場數據以將圖像發送至各個人時,如果主被攝體的焦距被確定為默認焦距,則出現如下問題:根據發送目的地,要被發送圖像的相關人的圖像模糊。
問題的解決方案
為了解決上述問題,根據本發明的一個實施例的圖像處理裝置被構造為:獲得光場數據,所述光場數據是被攝體空間的三維信息;通過使用所獲得的光場數據檢測所述被攝體空間中包括的被攝體,來生成被攝體信息,并將所生成的被攝體信息添加到所述光場數據中;基于所述光場數據的拍攝信息來設置用于再形成所述光場數據的焦距,并將所設置的焦距添加到所述光場數據中;基于與作為所述光場數據的發送目的地對象的外部裝置相對應的被攝體的信息,從被攝體信息中檢測與所述外部裝置相對應的被攝體;并根據所述檢測的結果,更新由設置單元設置的焦距。
本發明的有益效果
根據本發明的一個實施例,即使在發送拍攝有多個人的圖像的光場 數據的情況下,也能夠在相關人對焦的狀態下,在發送目的地處首先顯示再聚焦圖像。
另外,即使在發送具有再形成的光場數據的圖像的情況下,也能夠在發送目的地處顯示相關人對焦的圖像。
通過以下參照附圖對示例性實施例的描述,本發明的其他特征將變得清楚。
附圖說明
圖1是例示用于實現根據本發明的第一實施例的圖像處理裝置作為光場照相機中的圖像處理配置的硬件配置的框圖。
圖2是例示圖1的光場照相機的圖像處理單元的框圖。
圖3是例示圖1的光場照相機的拍攝操作的流程圖。
圖4是例示圖1的光場照相機的發送操作的流程圖。
圖5是例示圖1的光場照相機的顯示操作的流程圖。
圖6是例示用于實現根據本發明的第二實施例的圖像處理裝置作為光場照相機中的圖像處理配置和云服務器的云服務器的圖像處理單元的框圖。
圖7是例示由圖6的云服務器進行的顯示下載候選圖像的操作的流程圖。
圖8是例示由圖6的云服務器進行的下載圖像的操作的流程圖。
具體實施方式
現在,將參照附圖詳細描述本發明的示例性實施例。
第一示例
圖1是用于實現根據本發明的第一實施例的圖像處理裝置作為攝像裝置中的光場數據的圖像處理配置的攝像裝置(例如數字照相機)的框圖,以例示用于進行包括拍攝、再現和發送/接收的操作的數字照相機的硬件配置。
參照圖1,數字照相機包括用于獲得攝像信號以獲得光場數據(被攝體空間的三維信息)的攝像單元1002、以及用戶用來輸入指令(例如,對要發送的圖像的變焦、拍攝和選擇)的操作單元1003(例如,按鈕和操縱桿)。數字照相機還包括通信I/F 1004、顯示單元1005和工作存儲器1006,通信I/F 1004包括用于有線連接的終端(例如,USB終端和HDMI終端)和用于連接到其他照相機或網絡的WiFi接口,顯示單元1005(例如,液晶顯示器)用于顯示拍攝對象圖像、菜單和其他,工作存儲器1006(例如,DRAM)用于存儲正被處理的圖像和數據。數字照相機還包括用于再形成光場數據并進行圖像處理(例如JPEG壓縮)的圖像處理單元1007、以及用于執行從操作單元1003發出的指令和可編程控制序列的控制單元1008(例如CPU)。數字照相機還包括用于存儲要由控制單元1008使用的各種表和已被處理的圖像數據的存儲器1009。存儲器1009的示例包括可移動記錄介質。上述單元和存儲器經由總線1001相互電連接。
請注意,作為攝像單元1002,例如已知PTL 1中公開的配置(具有不同視角的多個照相機作為整體被視為攝像單元1002)和NPL 1中公開的攝像元件(布置有各自包括多個子像素的多個像素,該子像素用于接收通過聚焦光學系統的不同光瞳部分區域的光線)。而且,攝像單元1002的配置并非與本發明直接相關。因此這里省略其描述。
在下文中,參照圖2至圖5描述圖1所示的數字照相機的操作。
在本發明的第一實施例的描述中,以用于將光場數據發送至外部裝置以進行顯示的圖像處理配置為例。本實施例討論了如下情況:發送源是如圖1所示的被布置為對光場數據進行拍攝的數字照相機(下文中被簡稱為“光場照相機”),發送目的地是具有類似配置的光場照相機或通用數字照相機。在本實施例中,作為發送源的照相機辨別作為發送目的地的照相機是否能夠再形成光場數據,以確定是要發送光場數據、還是要在發送源中再形成光場數據以將再形成的數據作為JPEG圖像進行發送。
圖2是例示圖1所示的光場照相機的圖像處理單元1007的詳細配置 的框圖。請注意,在圖2中,通過與圖1相同的附圖標記表示圖1所示的部件。
參照圖2,光場數據生成單元2003將通過攝像單元1002拍攝的模擬數據轉換為光場數據。被攝體檢測單元2004使用全焦點圖像進行面部檢測,并生成針對各面部存儲面部的焦距和面部的圖像的面部列表。個人驗證單元2005使用與發送目的地相對應的個人驗證數據,來對面部列表中的面部依次進行個人驗證,以驗證面部列表中的面部是否是與發送對方相同的人的面部。在本實施例的以下描述中,以面部信息作為要檢測的被攝體信息和要用于驗證的信息的示例。然而,被攝體檢測不限于面部檢測,例如可以使用其他被攝體或動物,只要能夠利用特定形狀和特征檢測并辨別被攝體即可。
此外,頭添加單元2006將生成的面部列表添加到光場數據的頭,頭分析單元2007分析光場數據的頭以讀出面部列表。光場數據再形成單元2008使用默認焦距再形成光場數據。JPEG編碼單元2010通過JPEG壓縮對再形成的圖像進行編碼,JPEG解碼單元2009展開壓縮的圖像以對圖像進行解碼。圖像修整單元2011對圖像進行修整處理,例如將圖像的大小改變為用于顯示的大小。
通過控制單元1008來控制圖像處理單元1007的各單元的上述操作。
接下來,參照圖3的流程圖來描述圖1的光場照相機進行的拍攝操作。通過控制單元1008執行可編程控制序列來進行該操作,響應于從控制單元1008發出的指令來進行各單元的操作。
首先,在步驟S3001中,光場數據生成單元2003獲得通過攝像單元1002拍攝的模擬數據,以將獲得的模擬數據轉換為光場數據。
在步驟S3002中,光場數據再形成單元2008再形成通過轉換為全焦點圖像而獲得的光場數據。接下來,被攝體檢測單元2004使用通過再形成獲得的全焦點圖像來進行面部檢測,并基于面部檢測的結果,通過針對各面部存儲各面部的焦距和面部的圖像來生成面部列表。
在步驟S3003中,頭添加單元2006將生成的面部列表添加到光場數 據的頭。
在步驟S3004中,頭添加單元2006將拍攝時的焦距設置為默認焦距,以將設置的默認焦距添加到頭。各拍攝信息具有一個拍攝時的焦距。默認焦距是指示要在再形成光場數據時對焦的特定被攝體的信息。
接下來,參照圖4的流程圖描述由圖1的光場照相機進行的發送操作。還通過控制單元1008執行可編程控制序列來進行該操作,響應于從控制單元1008發出的指令來進行各單元的操作。
在步驟S4001中,響應于用戶對操作單元1003進行操作,控制單元1008從顯示單元1005上顯示的拍攝的光場數據的列表中,指定并確定要發送的光場數據。
在步驟S4002中,響應于用戶對操作單元1003進行操作,控制單元1008指定并確定所確定的光場數據要被發送到的發送目的地(光場數據要被輸出到的I/F或外部裝置)。在該步驟中,基于所確定的發送目的地,控制單元1008從存儲器1009中獲得與發送目的地相對應的個人驗證數據(發送對方或與發送對方相關聯的被攝體的信息)。
在步驟S4003中,頭分析單元2007分析發送對象的光場數據的頭,并讀出面部列表。接下來,個人驗證單元2005使用與發送目的地相對應的個人驗證數據,來對讀出的面部列表中的面部依次進行個人驗證,以驗證面部列表的面部是否是與發送對方相同的人或與發送對方相關聯的被攝體的面部。請注意,在本實施例中假設個人驗證數據與發送目的地相關聯地存儲在存儲器1009中。與發送目的地相對應的個人驗證數據并非必須是發送對方本身,而可以是與發送對方相關聯的被攝體。例如,可以使用發送對方的家庭成員、親密朋友或寵物作為個人驗證數據。在這種情況下,作為個人驗證數據,與發送對方相關聯的被攝體被一起分組記錄,或者從服務器或發送目的地接收由發送目的地指定的相關被攝體的信息,以使用接收到的信息對相應被攝體進行驗證。
在步驟S4004中,控制單元1008控制通信I/F 1004從目的地裝置接收并獲得用于辨別目的地裝置是否支持光場數據的支持信息。用于辨別 目的地裝置是否支持光場數據的信息可以與發送目的地列表一起預先存儲在存儲器1009中,在這種情況下,控制單元1008基于存儲在存儲器1009中的信息獲得上述信息。此外,在本實施例中辨別目的地裝置是否支持光場數據,但是可以辨別通信I/F 1004中的被選擇用于數據通信的接口是否支持光場數據。此外,例如,在用戶考慮目的地裝置而選擇通信方法的情況下,可以辨別所選擇的通信方法是否支持光場數據。
在步驟S4005中,在接收到的信息指示目的地裝置支持光場數據的情況下,流程進行到步驟S4006。當接收到的信息指示目的地裝置不支持光場數據時,流程進行到步驟S4009。
在步驟S4006中,確定個人驗證單元2005是否確定在面部列表中存在與發送對方相同的人或與發送對方相關聯的被攝體的面部。如果確定個人驗證單元2005確定存在與發送對方相同的人或與發送對方相關聯的被攝體的面部,則流程進行到步驟S4007。如果確定個人驗證單元2005確定不存在與發送對方相同的人或與發送對方相關聯的被攝體的面部,則不更新在拍攝時添加的默認焦距,并且流程進行到步驟S4008。
在步驟S4007中,頭添加單元2006利用被確定為與發送對方相同的人或與發送對方相關聯的被攝體的面部的面部的焦距,更新在步驟S3004中已經設置并添加至光場數據的默認焦距。
在步驟S4008中,控制單元1008指示通信I/F 1004發送光場數據。
在步驟S4009中,進行與步驟S4006相同的確定。如果確定個人驗證單元2005確定存在與發送對方相同的人或與發送對方相關聯的被攝體的面部,則流程進行到步驟S4010。如果確定個人驗證單元2005確定不存在與發送對方相同的人或與發送對方相關聯的被攝體的面部,則流程進行到步驟S4011。
在步驟S4010中,光場數據再形成單元2008利用面部列表中的被確定為相同的人的面部的焦距,更新默認焦距,并以更新后的焦距再形成發送對象的光場數據。
在步驟S4011中,光場數據再形成單元2008以默認焦距再形成發送 對象的光場數據。
在步驟S4012中,JPEG編碼單元2010對再形成的圖像進行JPEG壓縮,并且控制單元1008控制通信I/F 1004將JPEG圖像發送至發送目的地。
接下來,參照圖5的流程圖描述圖1的光場照相機的接收光場數據的操作。還通過控制單元1008執行可編程控制序列來進行該操作,響應于從控制單元1008發出的指令來進行各單元的操作。
在步驟S5001中,控制單元1008控制通信I/F 1004接收光場數據。
在步驟S5002中,頭分析單元2007從接收到的光場數據的頭獲得默認焦距。接下來,光場數據再形成單元2008以默認焦距再形成接收到的光場數據。圖像修整單元2011將再形成的圖像的大小改變為用于顯示的大小,控制單元1008將調整大小的圖像顯示在顯示單元1005上。
在步驟S5003中,控制單元1008確定用戶是否操作操作單元1003給出改變焦距的指令。當確定用戶給出改變焦距的指令時,流程進行到步驟S5004。否則,使操作結束。
在步驟S5004中,光場數據再形成單元2008以獲得的焦距再形成接收到的光場數據。接下來,圖像修整單元2011將再形成的圖像改變為用于顯示的大小。控制單元1008將調整了大小的圖像顯示在顯示單元1005上。
在步驟S5005中,頭添加單元2006根據用戶指示而更新默認焦距。
如上所述,在本實施例中,在對要接收光場數據的人、或與要接收光場數據的人相關聯的被攝體進行拍攝作為要發送的光場數據中的被攝體的情況下,將用于再形成的默認焦距設置為使得要接收光場數據的人對焦的焦距。因此,能夠在接收并首先顯示光場數據時,顯示接收光場數據的人、或與接收光場數據的人相關聯的被攝體對焦的圖像。
請注意,在本實施例中辨別目的地裝置是否是能夠再形成光場數據的照相機,但是不進行這種辨別,還可以發送以接收光場數據的人的焦距再形成的JPEG圖像。
此外,盡管在本實施例中,為了生成全焦點圖像而在拍攝時再形成光場數據并基于生成的全焦點圖像檢測面部,但是為了進行面部檢測可以在拍攝時獲得全焦點圖像。
另選地,光場數據的焦距可以被依次改變以再形成光場數據,從而對各再形成的圖像進行面部檢測。
在本實施例中,以圖像處理裝置保留發送對方或與發送對方相關聯的被攝體的個人驗證數據為例進行描述。另選地,當建立與發送對方的通信時,或當用戶指定發送目的地時,控制單元1008可以從發送對方(外部裝置)獲得個人驗證數據。
在本實施例中,以用戶選擇要發送的圖像為例進行了描述。另選地,當確定發送目的地時,用戶可以指定諸如文件夾的要發送的圖像的列表,使得從指定的要發送的列表中自動選擇包括與發送目的地相對應的被攝體的圖像。在本實施例中,將要發送的光場數據的默認焦距設置為要接收光場數據的人、或與要接收光場數據的人相關聯的被攝體的焦距。然而,要設置的值不限于默認焦距。例如,可以針對各焦距或面部設置優先級順序,使得當發送目的地設置要用于再聚焦光場數據的焦距時,向接收光場數據的人、或與接收光場數據的人相關聯的被攝體的焦距分配較高的優先級順序。
第二示例
在本發明的第二實施例中,描述了如下情況:光場照相機和云服務器實現本發明的圖像處理裝置的配置。本實施例討論了當用戶將由光場照相機拍攝的光場數據上傳到云服務器、并且給定用戶登錄云服務器以下載要顯示的圖像時應用的圖像處理配置的示例。在這種情況下,光場照相機具有與第一實施例相同的配置,因此這里省略其描述。
圖6是例示用于實現根據本實施例的圖像處理配置的云服務器的圖像處理單元6002的框圖。
參照圖6,云服務器包括用于存儲正處理的圖像和數據的工作存儲器6001(例如DRAM)。圖像處理單元6002包括個人驗證單元6003、頭分 析單元6004、光場數據再形成單元6005、JPEG編碼單元6006和圖像修整單元6007,個人驗證單元6003通過使用個人驗證數據依次對面部列表中的面部進行個人驗證,以驗證相應面部是否是與登錄用戶相同的人的面部,頭分析單元6004分析光場數據的頭以讀出面部列表,光場數據再形成單元6005以面部列表中的被確定為與登錄用戶相同的人的面部的焦距再形成光場數據,JPEG編碼單元6006對再形成的圖像進行JPEG壓縮,圖像修整單元6007進行諸如改變圖像大小的修整。
通過云服務器(未示出)的控制單元(例如CPU)執行從操作單元發出的指令和可編程控制序列,來控制圖像處理單元1007的各單元的上述操作。
首先,描述將光場數據從光場照相機上傳到云服務器的操作。通過光場照相機的控制單元1008執行可編程控制序列來執行該操作,并且響應于從控制單元1008發出的指令進行各單元的操作。
響應于用戶操作操作單元1003,控制單元1008從顯示單元1005上顯示的拍攝的光場數據的列表中,指定并確定要上傳的光場數據。接下來,控制單元1008控制通信I/F 1004將確定的光場數據上傳到云服務器。包括在第一實施例中生成的面部列表的頭被添加到要上傳的光場數據。
接下來,參照圖7的流程圖描述如下操作:向登錄到云服務器的用戶顯示云服務器中保留的圖像。通過云服務器的控制單元執行可編程控制序列來進行該操作,響應于從服務器的控制單元發出的指令進行圖像處理單元6002的各單元的操作。
在步驟S7001中,當用戶從用戶的PC登錄到云服務器時,云服務器請求用戶上傳個人驗證數據。響應于該請求,從用戶的PC上傳個人驗證數據。在本實施例中,當確認用戶登錄到云服務器時,云服務器生成用于利用縮略圖以列表形式或依次顯示服務器上的與用戶相關聯的圖像的頁面。作為選擇要向用戶顯示的圖像的方法的示例,可想到如下方法。具體地說,根據登錄信息來選擇過去從用戶擁有的照相機或記錄介質上傳的圖像、在過去幾周由被登記為用戶的熟人的用戶上傳的圖像、或其 他這種圖像。
在步驟S7002中,云服務器的控制單元確定是否存在下一個要顯示在針對登錄用戶生成的頁面中的圖像。當存在這種下一個圖像時,流程進行到步驟S7003,否則流程進行到步驟S7008。
在步驟S7003中,頭分析單元6004分析要顯示的光場數據的頭,以讀出面部列表。接下來,個人驗證單元6003使用個人驗證數據來對面部列表中的面部依次進行個人驗證,以驗證相應面部是否是與登錄用戶相同的人或與登錄用戶相關聯的被攝體的面部。
在步驟S7004中,根據在步驟S7003中進行的驗證的結果,在存在與登錄用戶相同的人或與登錄用戶相關聯的被攝體的面部的情況下,流程進行到步驟S7005,否則流程進行到步驟S7006。在步驟S7005中,光場數據再形成單元6005以面部列表中的被確定為與登錄用戶相同的人或與登錄用戶相關聯的被攝體的面部的面部的焦距,再形成光場數據。
在步驟S7006中,光場數據再形成單元6005以被添加至頭的默認焦距,再形成光場數據。
在步驟S7007中,圖像修整單元6007根據要生成的頁面改變再形成的圖像的大小。
在步驟S7008中,云服務器的控制單元通過顯示再形成的圖像來生成頁面。
接下來,參照圖8的流程圖描述從云服務器下載圖像的操作。也通過云服務器的控制單元執行可編程控制序列來進行該操作,響應于從服務器的控制單元發出的指令來進行圖像處理單元6002的各單元的操作。
在步驟S8001中,云服務器的控制單元確定用戶是否給出改變焦距的指令。在用戶給出改變焦距的指令的情況下,流程進行到步驟S8002。否則,流程進行到步驟S8003。
在步驟S8002中,光場數據再形成單元6005以用戶指定的焦距再形成光場數據。接下來,圖像修整單元6007將再形成的圖像的大小改變為用于顯示的大小,以更新頁面。
在步驟S8003中,云服務器的控制單元確定用戶是否給出下載圖像的指令。在用戶給出下載圖像的指令的情況下,流程進行到步驟S8004。否則,使操作結束。
在步驟S8004中,JPEG編碼單元6006對要下載的圖像進行JPEG壓縮,并且云服務器的控制單元下載壓縮的圖像。
如上所述,根據本實施例,能夠下載登錄到云服務器的人對焦的圖像。
請注意,盡管在本實施例中,作為發送源的光場照相機以與第一實施例相同的方式進行面部檢測,但是圖像被上傳到的云服務器可以進行面部檢測。
此外,不必說,甚至通過在系統或裝置中提供存儲實現上述實施例的功能的軟件的程序代碼的記錄介質,并使得系統或裝置的計算機(或CPU或MPU)能夠讀取存儲在記錄介質中的程序代碼以執行,也能夠實現本發明的目的。
在這種情況下,從記錄介質中讀取的程序代碼本身實現上述實施例的功能,程序代碼本身和存儲程序代碼的記錄介質構成本發明。
作為提供程序代碼的記錄介質,例如可以使用軟盤、硬盤、光盤、磁光盤、CD-ROM、CD-R、磁帶、非易失性存儲卡或ROM。
此外,不必說,通過執行由計算機讀取的程序代碼,能夠實現上述實施例的功能,并且在計算機上運行的OS(基礎系統或操作系統)根據程序代碼的指令進行部分或全部的實際處理,由此能夠通過該處理實現上述實施例的功能。
此外,不必說,在從記錄介質讀取的程序代碼被寫入在插入計算機的功能擴展板或與計算機連接的功能擴展單元中配設的存儲器中之后,功能擴展板或功能擴展單元中配設的CPU等根據程序代碼的指令,進行部分或全部的實際處理,由此能夠通過該處理實現上述實施例的功能。
如上所述,盡管通過優選示例描述了本發明,但是本發明不限于以上示例,可以在權利要求的范圍內對本發明進行各種變型。
雖然參照示例性實施例對本發明進行了描述,但是應當理解,本發明并不限于所公開的示例性實施例。應當對所附權利要求的范圍給予最寬的解釋,以使其涵蓋所有這些變型例以及等同的結構和功能。
本申請要求2013年1月11日提交的日本專利申請第2013-003570號的優先權,該申請的全部內容通過引用并入本文。

關 鍵 詞:
圖像 處理 裝置 方法 程序 以及 攝像
  專利查詢網所有資源均是用戶自行上傳分享,僅供網友學習交流,未經上傳用戶書面授權,請勿作他用。
關于本文
本文標題:圖像處理裝置、圖像處理方法和程序、以及攝像裝置.pdf
鏈接地址:http://www.rgyfuv.icu/p-6373667.html
關于我們 - 網站聲明 - 網站地圖 - 資源地圖 - 友情鏈接 - 網站客服客服 - 聯系我們

[email protected] 2017-2018 zhuanlichaxun.net網站版權所有
經營許可證編號:粵ICP備17046363號-1 
 


收起
展開
山东11选5中奖结果走势图