TW202023273A - 立體顯示裝置及其參數校正方法 - Google Patents
立體顯示裝置及其參數校正方法 Download PDFInfo
- Publication number
- TW202023273A TW202023273A TW107144649A TW107144649A TW202023273A TW 202023273 A TW202023273 A TW 202023273A TW 107144649 A TW107144649 A TW 107144649A TW 107144649 A TW107144649 A TW 107144649A TW 202023273 A TW202023273 A TW 202023273A
- Authority
- TW
- Taiwan
- Prior art keywords
- virtual
- virtual object
- parameter
- distance
- human eye
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/327—Calibration thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Eye Examination Apparatus (AREA)
- Controls And Circuits For Display Device (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本發明提出一種參數校正方法,適用於包括攝影機的立體顯示裝置。所述參數校正方法包括以下步驟:顯示校正用虛擬物體;利用攝影機取得觀看校正用虛擬物體的雙眼視角;根據雙眼視角校正人眼參數,其中所述人眼參數包括瞳距參數與適眼距參數的至少其中之一;以及根據校正後的人眼參數設定立體顯示裝置,以使立體顯示裝置根據校正後的人眼參數進行顯示。此外,一種使用上述參數校正方法的立體顯示裝置亦被提出。
Description
本發明是有關於一種立體顯示技術,且特別是有關於一種立體顯示裝置及其參數校正方法。
虛擬實境(Virtual Reality,VR)是利用電腦模擬產生一個三維空間的虛擬世界,提供使用者關於視覺等感官的模擬,讓使用者感覺彷彿身歷其境,可以即時、沒有限制地觀察三維空間內的事物。然而,現今的虛擬實境技術仍然有許多的問題需要克服,例如使用者的暈眩反應便是其中最主要的問題之一。在過去的研究當中,許多原因都可能造成使用者在使用立體顯示裝置(例如,虛擬實境裝置)時出現暈眩,且不同使用者的暈眩原因可能各不相同。
舉例來說,一般立體顯示裝置會根據預設好的瞳距(Interpupillary Distance,IPD)參數以及適眼距(Eye Relief)參數來顯示立體畫面。但是,由於每個使用者的雙眼距離不同,因此立體顯示裝置使用預設的瞳距參數顯示時,使用者的瞳孔中心、透鏡中心與畫面中心可能不在同一條線上,而出現重影現象導致暈眩。另一方面,每個使用者在使用立體顯示裝置時的眼睛距離裝置鏡片的距離也不會相同,因此立體顯示裝置使用預設的適眼距參數顯示時,畫面中的景深與使用者認知常出現偏差,這樣的情形也可能造成暈眩。雖然當前的立體顯示裝置都提供硬體調整的功能,但是由於調整誤差大導致暈眩問題仍無法解決。
有鑑於此,本發明實施例提供一種立體顯示裝置及其參數校正方法,能夠根據立體顯示裝置的當前使用者來校正瞳距與適眼距等參數並且據以顯示立體畫面,提升使用者體驗。
本發明實施例的參數校正方法適用於包括攝影機的立體顯示裝置,並且包括以下步驟:顯示校正用虛擬物體;利用所述攝影機取得觀看所述校正用虛擬物體的雙眼視角;根據所述雙眼視角校正多個人眼參數,其中所述多個人眼參數包括瞳距參數與適眼距參數的至少其中之一;以及根據校正後的所述多個人眼參數設定立體顯示裝置,以使立體顯示裝置根據校正後的所述多個人眼參數進行顯示。
本發明實施例的立體顯示裝置包括立體顯示器、攝影機以及處理器。立體顯示器用以顯示校正用虛擬物體。攝影機用以拍攝觀看所述校正用虛擬物體的人眼影像。處理器耦接於所述立體顯示器以及所述攝影機,並且用以:根據所述人眼影像取得觀看所述校正用虛擬物體的雙眼視角;根據所述雙眼視角校正多個人眼參數,其中所述多個人眼參數包括瞳距參數與適眼距參數的至少其中之一;以及根據校正後的所述多個人眼參數來利用所述立體顯示器進行顯示。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
本發明的部份實施例接下來將會配合附圖來詳細描述,以下的描述所引用的元件符號,當不同附圖出現相同的元件符號將視為相同或相似的元件。這些實施例只是本發明的一部份,並未揭示所有本發明的可實施方式。更確切的說,這些實施例只是本發明的專利申請範圍中裝置與方法的範例。
圖1繪示本發明一實施例的立體顯示裝置的概要方塊圖;圖2繪示本發明一實施例的立體顯示裝置的示意圖。
請先參照圖1,立體顯示裝置100包括立體顯示器110、攝影機120以及處理器130,其中立體顯示器110與攝影機120皆耦接於處理器130。在本實施例中,立體顯示裝置100例如包括頭戴式顯示裝置(Head Mounted Display,HMD)等虛擬實境(Virtual Reality,VR)顯示裝置,用以顯示立體影像。然而,本發明並不在此限制立體顯示裝置100的具體結構與實作方式。
立體顯示器110例如是由單一面板或多個面板所組成,可用以接收來自處理器130的顯示訊號以顯示立體影像。在本實施例中,立體顯示器110實作於頭戴式顯示裝置中,用以分別提供具有視差的兩影像至使用者雙眼。如圖2所示,立體顯示器110包括左面板110L
、右面板110R
、左透鏡140L
與右透鏡140R
。左面板110L
用以提供左眼影像,以使左眼影像透過左透鏡140L
在使用者的左眼成像,而右面板110R
用以提供右眼影像,以使右眼影像透過右透鏡140R
在使用者的右眼成像。藉由調整左眼影像與右眼影像的內容,使用者便能夠感受到立體影像。然而,本發明並不在此限,所屬領域具備通常知識者當可依其立體顯示的知識來實作立體顯示器110。
攝影機120設置於鄰近立體顯示器110處,用以擷取使用者的人眼影像。在本實施例中,如圖2所示,攝影機120包括左攝影機120L
以及右攝影機120R
,分別對應於立體顯示器110的左面板110L
與右面板110R
設置,以取得使用者的左眼影像以及右眼影像。在一些實施例中,攝影機120例如包括鏡頭以及感光元件。感光元件例如是電荷耦合元件(Charge Coupled Device,CCD)、互補性氧化金屬半導體(Complementary Metal-Oxide Semiconductor,CMOS)元件或其他元件,攝影機120還可包括光圈等,在此皆不設限。在一些實施例中,攝影機120例如是以眼動儀來實作,但不限於此。
處理器130耦接於立體顯示器110與攝影機120,用以根據瞳距參數與適眼距參數等人眼參數產生影像訊號,並將影像訊號發送至立體顯示器110來進行顯示。在本實施例中,處理器130會先執行本發明實施例的參數校正方法來校正人眼參數後,在根據校正後的人眼參數產生影像訊號。在一些實施例中,處理器130例如是設置於頭戴式顯示裝置內部或外部的圖形處理器(Graphics Processing Unit,GPU)與圖像訊號處理器(Image Signal Processor,ISP)的其中之一或其組合。然而,本發明並不在此設限。在其他實施例中,處理器130也可例如包括中央處理單元(Central Processing Unit,CPU),或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor,DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuits,ASIC)、可程式化邏輯裝置(Programmable Logic Device,PLD)或其他類似裝置或這些裝置的組合。
圖3繪示本發明一實施例的參數校正方法的流程圖;圖4繪示本發明一實施例的參數校正方法的示意圖。
本實施例的參數校正方法適用於圖1與圖2實施例中的立體顯示裝置100,故以下將參照圖1與圖2實施例中的各項元件來詳細說明本發明實施例的參數校正方法。在本實施例中,參數校正方法例如是在每次使用者穿戴上頭戴式顯示器後自動執行,以在後續顯示時能夠使用校正後的人眼參數。然而,本發明並不在此設限。在一些實施例中,使用者也可例如依其需求在任何時候自行啟動參數校正功能,以執行參數校正方法。
請先參照圖3,在步驟S302中,立體顯示器110會顯示校正用虛擬物體。如圖4所示,處理器130在透過立體顯示器110顯示校正用的虛擬物體OVR
時,例如是根據一組人眼參數(例如,預設人眼參數)來透過左面板110L
顯示左物體影像OL
,並且透過右面板110R
顯示右物體影像OR
。左物體影像OL
經左透鏡140L
在使用者的左眼410L
成像,並且右物體影像OR
經右透鏡140R
在使用者的右眼410R
成像後,使用者會感受到虛擬物體OVR
。由於透鏡(包括左透鏡140L
與右透鏡140R
)與虛擬物體OVR
所在的平面的距離dfx
可以由左物體影像OL
與右物體影像OR
之間的視差來控制,因此且使用者所感受到的虛擬物體OVR
的虛擬距離dVR
也就可以由左物體影像OL
與右物體影像OR
之間的視差來控制。當左物體影像OL
與右物體影像OR
之間的視差越小,虛擬距離dVR
越大,而當左物體影像OL
與右物體影像OR
之間的視差越大,虛擬距離dVR
則越小。
在步驟S304中,攝影機120被用來取得觀看校正用虛擬物體的雙眼視角。在本實施例中,雙眼視角包括左眼視角與右眼視角。如圖4所示,處理器130會利用對應左面板110L
設置的左攝影機120L
來拍攝使用者在觀看虛擬物體OVR
時的左眼視角θL
,並且利用對應右面板110R
設置的右攝影機120R
來拍攝使用者在觀看虛擬物體OVR
時的右眼視角θR
。
在步驟S306中,根據雙眼視角校正多個人眼參數,其中所述多個人眼參數包括瞳距參數與適眼距參數的至少其中之一。如圖4所示,由於虛擬物體OVR
的虛擬距離dVR
、雙眼視角(包括左眼視角θL
與右眼視角θR
)以及使用者的實際瞳距P1之間存在特定的幾何關係,因此利用攝影機120所取得的雙眼視角,處理器130便能夠校正瞳距參數與適眼距參數兩者或兩者其中之一。
在一些實施例中,在虛擬物體OVR
的虛擬距離dVR
已知的情形下,處理器130可以根據已知的虛擬距離dVR
以及雙眼視角(包括左眼視角θL
與右眼視角θR
)來計算出瞳距P1以校正瞳距參數。舉例來說,在假設實際適眼距p2與預設的適眼距參數或校正後的適眼距參數幾乎相等的情形下,虛擬距離dVR
可以由預設的適眼距參數或校正後的適眼距參數加上已知的距離dfx
來計算,然後再根據虛擬物體OVR
的虛擬距離dVR
、雙眼視角以及瞳距P1之間的幾何關係來計算出瞳距P1。
另一方面,在實際瞳距P1已知的情形下,處理器130可以根據雙眼視角以及已知的瞳距P1來計算虛擬距離dVR
。由於距離dfx
是由處理器130控制且為已知。據此,處理器130便能夠進一步計算出適眼距P2以校正適眼距參數。舉例來說,在假設實際瞳距P1與預設的瞳距參數或校正後的瞳距參數幾乎相等的情形下,處理器130可以根據雙眼視角以及預設的瞳距參數或校正後的瞳距參數來計算虛擬距離dVR
,然後再進一步計算出適眼距P2。
在一些實施例中,虛擬物體OVR
的虛擬距離dVR
、雙眼視角(包括左眼視角θL
與右眼視角θR
)以及瞳距P1之間的幾何關係例如用以下等式表示:
然而,只要是利用攝影機120取得的雙眼視角來校正人眼參數,本發明並不在此限制校正時的具體方式。
在步驟S308中,處理器130會根據校正後的多個人眼參數設定立體顯示裝置100,以使立體顯示裝置100根據校正後的多個人眼參數進行顯示。具體來說,處理器130在校正完人眼參數後,便能夠根據校正後的人眼參數來產生影像訊號,以使立體顯示器110得以根據校正後的人眼參數來顯示立體影像。舉例來說,若校正後的適眼距參數比預設的適眼距參數大,表示使用者實際使用立體顯示裝置100時的適眼距比預設的適眼距參數大。為了讓使用者能夠感受到的正確的景深不產生偏差,若根據預設的適眼距參數顯示某一特定距離的物體時,左物體影像與右物體影像之間的視差為第一視差,則處理器130在使用校正後的適眼距參數顯示同一特定距離的該物體時,左物體影像與右物體影像之間的視差將會是比為第一視差大的第二視差。
上述實施例所介紹的參數校正方法利用了硬體攝影機來拍攝使用者觀看校正用的虛擬物體時的雙眼視角,利用實際取得的雙眼視角來校正瞳距參數與適眼距參數等人眼參數,再利用軟體方式來根據校正後的人眼參數調整後續顯示立體影像時的顯示方式。相較於傳統手動調整硬體瞳距與適眼距的方式,本發明實施例所介紹的參數校正方法更加便利也更加準確,增加使用者使用立體顯示裝置100時的舒適度,提升使用者體驗。
以下舉另一實施例來更詳細地說明參數校正方法的細節。必須說明的是,以下實施例僅是為了說明而舉出的參數校正方法的示範例,本發明並不限於以下介紹的細節,所屬領域具備通常知識者當可依其需求來作適當的更動或修改。
圖5繪示本發明另一實施例的參數校正方法的流程圖。
本實施例的參數校正方法亦適用於圖1、圖2與圖4實施例中的立體顯示裝置100,故以下將參照圖1、圖2與圖4實施例中的各項元件來詳細說明本發明實施例的參數校正方法。
請參照圖5,首先在步驟S502中,設定初始瞳距參數與初始適眼距參數。舉例來說,處理器130可以設定初始瞳距參數與初始適眼距參數為預設的瞳距參數與預設的適眼距參數,或設定為前次校正後的瞳距參數與適眼距參數等,本發明不在此設限。
在步驟S504中,設定虛擬物體的虛擬距離;在步驟S506中,設定虛擬物體在所設定的虛擬距離上的虛擬位置。在一些實施例中,處理器130例如設定校正用的虛擬物體OVR
的虛擬距離dVR
為1公尺且位於畫面中心。
在步驟S508中,處理器130會根據所設定的虛擬距離與虛擬位置來透過立體顯示器110顯示虛擬物體,並且利用攝影機120拍攝人眼影像。在一些實施例中,若初始適眼距參數是5公分而所設定的虛擬距離dVR
為1公尺時,處理器130例如會控制左物體影像與右物體影像之間的視差與位置,以在顯示虛擬物體OVR
時將距離dfx
控制在95公分,並且使虛擬物體OVR
位於畫面中心。
在步驟S510中,處理器130會根據人眼影像計算雙眼視角,並且根據雙眼視角估計瞳距參數。在一些實施例中,處理器130例如會透過圖3實施例中所介紹的幾何關係,來根據所設定的虛擬距離dVR
(例如,1公尺)以及雙眼視角(包括左眼視角θL
與右眼視角θR
),估計瞳距參數。所屬領域具備通常知識者當可基於眼動儀等相關文獻而理解根據人眼影像計算雙眼視角的方式,故在此不再贅述。
在步驟S512中,處理器130會判斷所估計的瞳距參數與初始瞳距參數之間的誤差是否小於瞳距誤差閥值,或瞳距參數估計次數是否大於第一次數閥值。舉例來說,若所估計的瞳距參數與初始的瞳距參數差異不大,表示初始瞳距參數已經足夠準確而無須調整,也就是初始瞳距參數可以直接被指定為校正後的瞳距參數來使用。在本實施例中,處理器130會設定瞳距誤差閥值。若所估計的瞳距參數與初始瞳距參數之間的誤差小於瞳距誤差閥值,直接進入步驟S514;反之,若所估計的瞳距參數與初始瞳距參數之間的誤差不小於瞳距誤差閥值,則會回到步驟S506,重新設定虛擬物體在所設定的虛擬距離上的虛擬位置。接著,重複上述的步驟S508~S512,直到進入步驟S514。
為了防止步驟S506~S512的迴圈進行太多次而導致校正時間過長,處理器130還會設定第一次數閥值。一旦處理器130判斷瞳距估計次數高於第一次數閥值,也就是步驟S510的執行次數超過第一次數閥值,處理器130在步驟S512中就會指定一個瞳距參數並且進入步驟S514。本發明並不在此限制指定瞳距參數的方式,所指定的瞳距參數可例如是所有曾經估計過的瞳距參數的平均值。
圖6繪示本發明一實施例中重新設定虛擬物體在虛擬距離上的虛擬位置的示意圖。
請參照圖6,在一些實施例中,在從步驟S512回到步驟S506時,處理器130例如將校正用的虛擬物體OVR
在虛擬距離dVR
維持不變(例如,維持為1公尺)下移動(例如,向右偏移5公分),以在步驟S508中顯示位於同樣距離但不同位置的虛擬物體OVR
’。換句話說,虛擬物體OVR
與虛擬物體OVR
’位於相同虛擬距離dVR
的平面IP上。
由於步驟S506~S512的迴圈當中所顯示的虛擬物體的虛擬距離不變,因此理想上根據每次取得的雙眼視角所計算出的瞳距參數會相同。但是,現實中可能發生各種各樣的誤差,所以每次計算出的瞳距參數並不會完全相同。據此,在第一次數閥值之內計算出多個瞳距參數,再根據這些計算出來的瞳距參數來指定校正後瞳距參數,可以得到更加精準的結果。值得一提的是,第一次數閥值設定的越大,校正的結果也可能更加精準,但是所需花費的校正時間也就越長。
在步驟S514中,處理器130會根據雙眼視角估計適眼距距參數。在一些實施例中,處理器130例如會透過圖3實施例中所介紹的幾何關係,來根據雙眼視角(包括左眼視角θL
與右眼視角θR
)以及步驟S512中所指定的瞳距參數,來估計虛擬物體OVR
的虛擬距離dVR
,進而估計適眼距參數。舉例來說,處理器130會透過上述的幾何關係,根據雙眼視角以及以及步驟S512中所指定的瞳距參數估計虛擬距離dVR
後,減去距離dfx
(例如,95公分)後,可以得到估計的適眼距參數。
在步驟S516中,處理器130會判斷所估計的適眼距參數與初始適眼距參數之間的誤差是否小於適眼距誤差閥值,或適眼距參數估計次數是否大於第二次數閥值。舉例來說,若所估計的適眼距參數與初始的適眼距參數差異不大,表示初始適眼距參數已經足夠準確而無須調整,也就是初始適眼距參數可以直接被指定為校正後的適眼距參數來使用。在本實施例中,處理器130會設定適眼距誤差閥值。若所估計的適眼距參數與初始適眼距參數之間的誤差小於適眼距誤差閥值,直接進入步驟S518;反之,若所估計的適眼距參數與初始適眼距參數之間的誤差不小於適眼距誤差閥值,則會回到步驟S504,重新設定虛擬物體的虛擬距離。接著,重複上述的步驟S506~S516,直到進入步驟S518。
類似地,為了防止步驟S504~S516的迴圈進行太多次而導致校正時間過長,處理器130會設定第二次數閥值。一旦處理器130判斷適眼距估計次數高於第二次數閥值,也就是步驟S514的執行次數超過第二次數閥值,處理器130在步驟S516中就會指定一個適眼距參數並且進入步驟S518。本發明並不在此限制指定適眼距參數的方式,所指定的適眼距參數可例如是所有曾經估計過的適眼距參數的平均值。
圖7繪示本發明一實施例中重新設定虛擬物體的虛擬距離的示意圖。
請參照圖7,在一些實施例中,在從步驟S516回到步驟S504時,處理器130例如將校正用的虛擬物體OVR
的調整為虛擬距離dVR
’(例如,將dfx
從95公分調整為115公分,也就是將1公尺的虛擬距離dVR
調整為1.2公尺的虛擬距離dVR
’),以在步驟S508中顯示位於不同距離的虛擬物體OVR
’。換句話說,虛擬物體OVR
與虛擬物體OVR
’分別位於虛擬距離dVR
的平面IP以及虛擬距離dVR
’的平面IP’上。
由於步驟S504~S516的迴圈當中所使用的瞳距參數不會改變,因此理想上根據每個虛擬距離所取得的雙眼視角所計算出的適眼距參數會相同。但是,現實中可能發生各種各樣的誤差,所以每次計算出的適眼距參數並不會完全相同。據此,在第二次數閥值之內計算出多個適眼距參數,再根據這些計算出來的適眼距參數來指定校正後適眼距參數,可以得到更加精準的結果。值得一提的是,第二次數閥值設定的越大,校正的結果也可能更加精準,但是所需花費的校正時間也就越長。
最後,在步驟S518中,處理器130會根據校正後的瞳距參數與適眼距參數設定立體顯示裝置100,以使立體顯示裝置100根據校正後的瞳距參數與適眼距參數進行顯示。具體來說,處理器130取得校正後的瞳距參數與適眼距參數後,便能夠根據校正後的瞳距參數與適眼距參數來產生影像訊號,以使立體顯示器110得以根據校正後的瞳距參數與適眼距參數來顯示立體影像。在本實施例中,步驟S518是類似於圖3實施例中的步驟S308,故重複的細節在此不加贅述。
綜上所述,本發明實施例所提出的立體顯示裝置及其參數校正方法能夠利用攝影機來取得使用者在觀看校正用虛擬物體時的雙眼視角,並據以校正包括諸如瞳距參數與適眼距參數等等的人眼參數。在取得了校正後的人眼參數後,會根據此人眼參數來調整顯示立體影像時的顯示內容。據此,立體顯示裝置的參數校正變得更加便利也更加準確,增加了使用者使用立體顯示裝置時的舒適度,進而提升了使用者體驗。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100:立體顯示裝置110:立體顯示器110L:左面板110R:右面板120:攝影機120L:左攝影機120R:右攝影機130:處理器140L:左透鏡140R:右透鏡410L:左眼410R:右眼dfx:虛擬物體到透鏡的距離dVR、dVR’:虛擬距離IP、IP’:平面OL
:左物體影像OR:右物體影像OVR、OVR’:虛擬物體P1:瞳距P2:適眼距S302、S304、S306、S308、S502、S504、S506、S508、S510、S512、S514、S516、S518:參數校正方法的步驟θL
:左眼視角θR:右眼視角
圖1繪示本發明一實施例的立體顯示裝置的概要方塊圖。 圖2繪示本發明一實施例的立體顯示裝置的示意圖。 圖3繪示本發明一實施例的參數校正方法的流程圖。 圖4繪示本發明一實施例的參數校正方法的示意圖。 圖5繪示本發明一實施例的參數校正方法的流程圖。 圖6繪示本發明一實施例中重新設定虛擬物體在虛擬距離上的虛擬位置的示意圖。 圖7繪示本發明一實施例中重新設定虛擬物體的虛擬距離的示意圖。
S302、S304、S306、S308:參數校正方法的步驟
Claims (10)
- 一種參數校正方法,適用於包括一攝影機的一立體顯示裝置,所述參數校正方法包括: 顯示一校正用虛擬物體; 利用該攝影機取得觀看該校正用虛擬物體的一雙眼視角; 根據該雙眼視角校正多個人眼參數,其中該些人眼參數包括一瞳距參數與一適眼距參數的至少其中之一;以及 根據校正後的該些人眼參數設定該立體顯示裝置,以使該立體顯示裝置根據校正後的該些人眼參數進行顯示。
- 如申請專利範圍第1項所述的參數校正方法,更包括: 顯示位於相同虛擬距離的至少一第一虛擬物體; 在顯示該至少一第一虛擬物體時拍攝至少一第一人眼影像; 根據該至少一人眼影像計算至少一第一雙眼視角;以及 根據該至少一第一雙眼視角校正該瞳距參數。
- 如申請專利範圍第2項所述的參數校正方法,其中該至少一第一虛擬物體包括多個第一虛擬物體,並且該些第一虛擬物體位於相同虛擬距離的不同虛擬位置。
- 如申請專利範圍第2項所述的參數校正方法,更包括: 顯示至少一第二虛擬物體,其中該至少一第二虛擬物體與該至少一第一虛擬物體位於不同虛擬距離; 在顯示該至少一第二虛擬物體時拍攝至少一第二人眼影像; 根據該至少二人眼影像計算至少一第二雙眼視角;以及 根據該至少一第二雙眼視角校正該適眼距參數。
- 如申請專利範圍第4項所述的參數校正方法,其中該至少一第二虛擬物體包括多個第二虛擬物體,並且該些第二虛擬物體位於不同虛擬距離。
- 一種立體顯示裝置,包括: 一立體顯示器,用以顯示一校正用虛擬物體; 一攝影機,用以拍攝觀看該校正用虛擬物體的一人眼影像;以及 一處理器,耦接於該立體顯示器以及該攝影機,並且用以: 根據該人眼影像取得觀看該校正用虛擬物體的一雙眼視角; 根據該雙眼視角校正多個人眼參數,其中該些人眼參數包括一瞳距參數與一適眼距參數的至少其中之一;以及 根據校正後的該些人眼參數來利用該立體顯示器進行顯示。
- 如申請專利範圍第6項所述的立體顯示裝置,其中該立體顯示器顯示位於相同虛擬距離的至少一第一虛擬物體,該攝影機在該立體顯示器顯示該至少一第一虛擬物體時拍攝至少一第一人眼影像,並且該處理器根據該至少一人眼影像計算至少一第一雙眼視角,以及根據該至少一第一雙眼視角校正該瞳距參數。
- 如申請專利範圍第7項所述的立體顯示裝置,其中該至少一第一虛擬物體包括多個第一虛擬物體,並且該些第一虛擬物體位於相同虛擬距離的不同虛擬位置。
- 如申請專利範圍第7項所述的立體顯示裝置,其中該立體顯示器顯示至少一第二虛擬物體,該攝影機在該立體顯示器顯示該至少一第二虛擬物體時拍攝至少一第二人眼影像,並且該處理器根據該至少二人眼影像計算至少一第二雙眼視角,以及根據該至少一第二雙眼視角校正該適眼距參數,其中該至少一第二虛擬物體與該至少一第一虛擬物體位於不同虛擬距離。
- 如申請專利範圍第9項所述的立體顯示裝置,,其中該至少一第二虛擬物體包括多個第二虛擬物體,並且該些第二虛擬物體位於不同虛擬距離。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW107144649A TWI688254B (zh) | 2018-12-11 | 2018-12-11 | 立體顯示裝置及其參數校正方法 |
US16/547,580 US10812785B2 (en) | 2018-12-11 | 2019-08-22 | Stereoscopic display device and parameter calibration method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW107144649A TWI688254B (zh) | 2018-12-11 | 2018-12-11 | 立體顯示裝置及其參數校正方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI688254B TWI688254B (zh) | 2020-03-11 |
TW202023273A true TW202023273A (zh) | 2020-06-16 |
Family
ID=70766850
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW107144649A TWI688254B (zh) | 2018-12-11 | 2018-12-11 | 立體顯示裝置及其參數校正方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10812785B2 (zh) |
TW (1) | TWI688254B (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109756723B (zh) * | 2018-12-14 | 2021-06-11 | 深圳前海达闼云端智能科技有限公司 | 获取影像的方法和装置,存储介质和电子设备 |
US11064188B2 (en) * | 2019-07-29 | 2021-07-13 | Htc Corporation | Driving method for calculating interpupillary distance and related head-mounted device |
US10866425B1 (en) * | 2019-12-16 | 2020-12-15 | Microsoft Technology Licensing, Llc | Image reprojection based on intra-pupil distance |
CN115516366A (zh) * | 2020-06-19 | 2022-12-23 | 海思智财控股有限公司 | 扩大可视空间的影像显示系统及其方法 |
CN114616511A (zh) * | 2020-09-03 | 2022-06-10 | 海思智财控股有限公司 | 改善双眼视觉的系统与方法 |
SE2051559A1 (en) * | 2020-12-23 | 2022-06-24 | Tobii Ab | Head-mounted display and method of optimisation |
US11841513B2 (en) | 2021-05-13 | 2023-12-12 | Coretronic Corporation | Light field near-eye display device and method of light field near-eye display |
US11842662B2 (en) | 2021-05-13 | 2023-12-12 | Coretronic Corporation | Light field near-eye display device for automatically adjusting image data according to current eye relief and method thereof |
CN113573040B (zh) * | 2021-07-07 | 2024-05-03 | 深圳市创鑫未来科技有限公司 | 自动校准人眼追踪裸眼3d显示的立体图案、装置及方法 |
DE102022202622A1 (de) * | 2022-03-17 | 2023-09-21 | Robert Bosch Gesellschaft mit beschränkter Haftung | Verfahren zu einer Bestimmung eines Augenabstands in einer Datenbrille und Datenbrille |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9025252B2 (en) * | 2011-08-30 | 2015-05-05 | Microsoft Technology Licensing, Llc | Adjustment of a mixed reality display for inter-pupillary distance alignment |
WO2014033306A1 (en) * | 2012-09-03 | 2014-03-06 | SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH | Head mounted system and method to compute and render a stream of digital images using a head mounted system |
US8860634B2 (en) | 2012-10-11 | 2014-10-14 | Sony Computer Entertainment Europe Limited | Head mountable display |
KR102299774B1 (ko) * | 2014-08-28 | 2021-09-09 | 삼성전자주식회사 | 화면 구성 방법, 전자 장치 및 저장 매체 |
US10368059B2 (en) * | 2015-10-02 | 2019-07-30 | Atheer, Inc. | Method and apparatus for individualized three dimensional display calibration |
US10401625B2 (en) * | 2015-12-28 | 2019-09-03 | Facebook Technologies, Llc | Determining interpupillary distance and eye relief of a user wearing a head-mounted display |
CN106445167B (zh) * | 2016-10-20 | 2019-09-20 | 网易(杭州)网络有限公司 | 单眼视界自适配调整方法及装置、头戴式可视设备 |
EP3407255A1 (en) * | 2017-05-22 | 2018-11-28 | HTC Corporation | Eye tracking method, electronic device, and non-transitory computer readable storage medium |
US20190073820A1 (en) * | 2017-09-01 | 2019-03-07 | Mira Labs, Inc. | Ray Tracing System for Optical Headsets |
US10317680B1 (en) * | 2017-11-09 | 2019-06-11 | Facebook Technologies, Llc | Optical aberration correction based on user eye position in head mounted displays |
-
2018
- 2018-12-11 TW TW107144649A patent/TWI688254B/zh active
-
2019
- 2019-08-22 US US16/547,580 patent/US10812785B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
TWI688254B (zh) | 2020-03-11 |
US10812785B2 (en) | 2020-10-20 |
US20200186787A1 (en) | 2020-06-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI688254B (zh) | 立體顯示裝置及其參數校正方法 | |
JP7335285B2 (ja) | 単一深度追跡型の遠近調節-両眼転導ソリューション | |
CN104010178B (zh) | 双目图像视差调节方法及装置和双目相机 | |
TWI532009B (zh) | 產生淺景深影像的方法及裝置 | |
US20080199070A1 (en) | Three-dimensional image display apparatus and method for enhancing stereoscopic effect of image | |
TWI507729B (zh) | 頭戴式視覺輔助系統及其成像方法 | |
JP6393254B2 (ja) | 立体視ディスプレイにおける調節効果による歪み誤差を補正する方法および装置 | |
US20130088573A1 (en) | Methods for controlling scene, camera and viewing parameters for altering perception of 3d imagery | |
JP2018500690A (ja) | 拡大3d画像を生成するための方法およびシステム | |
Zhang et al. | Depth of field affects perceived depth in stereographs | |
CN111522430A (zh) | 注视追踪模型的训练 | |
TWI589150B (zh) | 3d自動對焦顯示方法及其系統 | |
TWI528785B (zh) | 立體影像的調整裝置及其方法 | |
Tong et al. | The impacts of lens and stereo camera separation on perceived slant in virtual reality head-mounted displays | |
CN111464808B (zh) | 立体显示装置及其参数校正方法 | |
TW201223244A (en) | Method and system for displaying stereoscopic images | |
JP2012244466A (ja) | 立体画像処理装置 | |
CN106851246B (zh) | 用于确定三维图像或视频的视觉疲劳度的方法和设备 | |
KR100906784B1 (ko) | 입체영상 제작 프로그램용 플러그인 모듈 및 입체영상 제작방법 | |
WO2020155305A1 (zh) | 一种裸眼3d动态调节显示屏排图方法及电子设备 | |
US20150215602A1 (en) | Method for ajdusting stereo image and image processing device using the same | |
TWI812566B (zh) | 立體影像深度調整方法與裝置 | |
US10326976B2 (en) | Method and apparatus for providing personal 3-dimensional image using convergence matching algorithm | |
CN118283238A (zh) | 立体影像深度调整方法与装置 | |
JP6042732B2 (ja) | 画像生成方法、画像生成装置及び画像生成プログラム |