3D姿勢感測、追蹤與顯示系統與嵌入式晶片系統開發(II)

Abstract

本研究計畫為開發一3D 手勢感測(3D gesture sensing)、追蹤與顯示(3D display)系統，並搭配針對其所開發之嵌入式系統晶片作為控制。本研究計畫可 劃分為兩大技術類別：一、3D 感測技術；二、3D 顯示技術。在3D 感測技術中， 硬體方面將提出一種系統架構以及兩種關鍵光學透鏡技術。本計畫中的系統架構 為「紅外光圖案掃描偵測技術」，而關鍵光學透鏡技術則為 「色差式景深之透鏡」 以及「液晶式Hartmann‐Shack 波前感測器」。軟體方面則將以嵌入式系統(FPGA)， 完成CMOS 影像感測器當中所需的數位影像處理演算法計算。「紅外光圖案掃描 偵測技術」之系統架構使用兩組如手機相機或webcam 等CMOS 影像感測模組， 搭配一紅外線特徵光源作為系統主要架構，CMOS 主要為感測紅外光源，而紅外 線特徵光源將會投射出一特殊圖案至待測物上，再利用CMOS 影像感測模組對待 測物體定位，並感測待測目標物之中的紅外光圖案。根據圖案的輪廓以及特術的 細節，即可以數位影像處理演算法計算出其 3D 物體的輪廓，並將其瞄繪出來。 其中，紅外線特徵光源的產生可藉由微機電技術、濾波片或是繞射光學元件所產 生，使紅外光源能產生出特殊的特徵圖型。另外在關鍵光學透鏡技術「色差式景 深之透鏡」以及「液晶式Hartmann‐Shack 波前感測器」方面，將與合作廠商鴻 海精密配合開發兩種特殊光學透鏡組，可與目前市場中普遍的CMOS 影像感測模 組相整合，且整合鴻海目前既有的微型相機模組致動器可以完成影像追蹤之用。 在3D 顯示技術裡，採用2D 多工式的3D 顯示技術，其利用一特殊的分光機制， 達到左、右眼分別接收不同的資訊，進而產生3D 的錯覺，此技術最大的特點為 使用者無需配戴特殊的分光眼鏡，直接裸眼觀測即可，其中，本研究計畫使用液 晶透鏡陣列，能夠達到2D 多工式的3D 顯示效果，最終可達成2D/3D 顯示切換 以及調整可視距離兩大目標。整合上述所提及的3D 感測技術與3D 顯示技術， 可達到使用者與3D 影像間的互動的目標， 並實現虛擬實境的空間。

This study proposes a novel three-dimension (3D) gesture sensing, tracking, display technology and with the embedded system to control. It can be divided into two major categories of other technologies. One is the 3D sensing technology, and the other is the 3D display technology. In the 3D sensing technology, the hardware proposes a detection system structure and it with a key optical technology to create a novel 3D sensing technology. And its detection system structure is the IR (Infra-red) light pattern detection system which consists of one camera module, IR band-pass filter, an IR laser diode and an IR grid filter. The other optical technology is depth of field of the chromatic lens technology which consists of the other camera module and a chromatic lens. As for the 3D display technology, a tunable LC (Liquid crystal) lenticular lens array is proposed to compose an auto-stereoscopic 3D display which is also 2D/3D switchable. The focusing can be achieved based on non-uniform phase retardation across the width of the LC lenticular lens, mimicking the effects of gradient index (GRIN) lens. The viewing distance and zones of this display can be adjusted in an on-line fashion to track the viewer position relative to the display. The proposed scheme can present the lenticular lens and LC GRIN lens simultaneously, so that the optical simulation results can express the value of crosstalk by the lenticular lens array and the LC GRIN lens array.