影像偵測技術應用於3D互動環境

以作者查詢圖書館館藏

、以作者查詢臺灣博碩士

、以作者查詢全國書目

、勘誤回報

、線上人數：34

、訪客IP：3.144.113.30

姓名

黃明傑(Ming-Chieh Huang) 查詢紙本館藏

畢業系所

電機工程學系

論文名稱

影像偵測技術應用於3D互動環境
(Image Detection Techniques Application to 3D Interactive Environment)

相關論文

★ 直接甲醇燃料電池混合供電系統之控制研究	★ 利用折射率檢測法在水耕植物之水質檢測研究
★ DSP主控之模型車自動導控系統	★ 旋轉式倒單擺動作控制之再設計
★ 高速公路上下匝道燈號之模糊控制決策	★ 模糊集合之模糊度探討
★ 雙質量彈簧連結系統運動控制性能之再改良	★ 桌上曲棍球之影像視覺系統
★ 桌上曲棍球之機器人攻防控制	★ 模型直昇機姿態控制
★ 模糊控制系統的穩定性分析及設計	★ 門禁監控即時辨識系統
★ 桌上曲棍球：人與機械手對打	★ 麻將牌辨識系統
★ 相關誤差神經網路之應用於輻射量測植被和土壤含水量	★ 三節式機器人之站立控制

檔案

[Endnote RIS 格式]

[Bibtex 格式]

[相關文章]

[文章引用]

[完整記錄]

[館藏目錄]

[檢視]

[下載]

本電子論文使用權限為同意立即開放。
已達開放權限電子全文僅授權使用者為學術研究之目的，進行個人非營利性質之檢索、閱讀、列印。
請遵守中華民國著作權法之相關規定，切勿任意重製、散佈、改作、轉貼、播送，以免觸法。

摘要(中)

最近任天堂公司以及新力公司開發出了Wii以及Play Station 3，使用者可以利用手中感測器的按鈕或揮動感測器來控制遊戲畫面當中人物的一舉一動以及視野的改變，可以讓使用者感覺有趣好玩。本論文的目的為捨棄所有的感測器，單單只利用一台便宜的視訊攝影機來達到以上功能。本論文完成的主要目的有以下三大項：
1. 3D虛擬環境開發，用以和影像偵測結果互動。
2. 利用影像偵測與辨識技術抓取視訊畫面當中人臉的區塊，然後驅使所建立好的3D虛擬環境做出對應人臉移動的視野轉換，讓使用者感覺電腦螢幕上之3D視野是會隨著使用者頭部移動而有所改變，彷彿在看真實的物體一般。
3. 使用者手中抓取著一個簡單的有色光源(比如手電筒)，利用影像偵測技術抓取出光源的位置，並且判斷光源的移動方向，藉此移動電腦螢幕上之3D虛擬實境當中的物件。
本論文最大的成就是不用藉由貴重的感測器，只要一台視訊攝影機就可以在電腦螢幕上完成和3D環境互動的效果。此技術成本低廉且不只是可以應用在遊戲上面，舉凡有使用到3D虛擬實境相關應用皆可以直接套用，而且不用另外特製的立體眼鏡或是面板。期許此技術推出之後可以達到拋磚引玉的效果，讓現有的3D技術可以更引人注目並引進更大的商機。

摘要(英)

Recently, both Nintendo and Sony produce some fashionable 3D video game consoles such as Wii and Play Station 3. The 3D objects or 3D view could be controlled by pressing the buttons of the gamepad or by waving a remote control. It is much more fun when more interaction is added to the 3D environment. This thesis provides some methods which make the 3D environment have more interactive with users using only one webcam, without any other sensors, gamepad or remote controller held in hand. The goals of this thesis are as follows. First, the 3D environment is developed. Second, using image detection techniques to obtain the position of user’s face and change 3D view according to the moving of user’s face such that the user sees a real object in front of his face. Finally, the user holds a color flashlight. The moving direction of the flashlight is detected and then makes the 3D objects move following the moving direction of the flashlight. The most important achievement of this thesis is that there is much interaction between user and computer in 3D environment without any gamepads and sensors except a webcame. These techniques can be applied to not only 3D games, but also any other virtual realities. Furthermore, it does not need a special-make monitor or 3D-glasses.

關鍵字(中)

★ 3D互動環境
★ 影像處理

關鍵字(英)

論文目次

目錄
頁次
摘要……………………………………………………………………i
Abstract………………………………………………………………ii
致謝……………………………………………………………………iii
目錄……………………………………………………………………iv
圖目錄…………………………………………………………………vii
表目錄…………………………………………………………………xi
第一章緒論……………………………………………………………1
1.1前言與動機…………………………………………………………1
1.2文獻回顧……………………………………………………………1
1.3研究目的……………………………………………………………2
1.4本文架構……………………………………………………………3
第二章整體架構與開發環境…………………………………………4
2.1整體架構……………………………………………………………4
2.2軟體開發環境………………………………………………………6
第三章影像辨識技術…………………………………………………8
3.1影像前處理…………………………………………………………9
3.2臉部位置偵測………………………………………………………10
3.2.1膚色偵測………………………………………………………11
3.2.2斷開運算………………………………………………………12
3.2.3找出臉部區塊…………………………………………………12
3.3嘴唇的偵測…………………………………………………………14
3.3.1 NCC色彩模型…………………………………………………15
3.3.2臉部區塊內嘴唇偵測…………………………………………15
3.4眼睛與眉毛的偵測…………………………………………………17
3.4.1水平與垂直補點………………………………………………17
3.4.2眼睛與眉毛的特徵偵測………………………………………18
3.4.3去除眼睛眉毛以外區域………………………………………19
3.4.4偵測眼睛和眉毛的中心位置…………………………………24
3.5有色光源的位置偵測………………………………………………26
3.6輸入給3D虛擬環境的訊號…………………………………………28
3.7本章總結……………………………………………………………33
第四章 3D環境設計……………………………………………………35
4.1模型建立與貼圖設計………………………………………………35
4.1.1簡單空間模型…………………………………………………35
4.1.2簡單空間加上球碰撞模型……………………………………37
4.1.3遊戲一模型……………………………………………………38
4.1.4遊戲二模型……………………………………………………40
4.1.5平面貼圖模型…………………………………………………43
4.2粒子系統……………………………………………………………44
4.2.1雪球軌跡………………………………………………………44
4.2.2雪球擊中敵人之散開效果……………………………………45
4.2.3下雪場景………………………………………………………46
4.3本章總結…………………………………………………………47
第五章互動方法與實驗成果…………………………………………48
5.1人臉偵測控制3D視野改變…………………………………………48
5.2遊戲一互動成果……………………………………………………52
5.3光源偵測控制3D物件移動…………………………………………54
5.4遊戲二互動成果……………………………………………………55
5.5結合光源與人臉偵測………………………………………………56
5.6套用實際產品………………………………………………………57
第六章結論與未來展望………………………………………………59
6.1結論…………………………………………………………………59
6.2未來展望……………………………………………………………59
參考文獻………………………………………………………………61

參考文獻

參考文獻
[1] A. Bhuiyan, “On Gesture Recognition for Human-Robot Symbiosis,” The 15th IEEE International Symposium on Robot and Human Interactive Communication, Hatfield, UK, pp. 541-545, September 6-8, 2006.
[2] J. Yven and H. Wechsler, “Smart interfaces for human-computer intelligent interaction,” Proceedings of 2003 IEEE Conference on Control Applications, vol. 2, pp. 1192-1197, June 23-25, 2003.
[3] C. Y. Fang, S. W. Chen, and C. S. Fuh, “Road-sign detection and tracking,” IEEE Transactions on Vehicular Technology, vol. 52, pp.1329-1341, September 2003.
[4] S. Maldonado-Bascon, S. Lafuente-Arroyo, P. Gil-Jimenez, H. Gomez-Moreno, and F. Lopez-Ferreras, “Road-Sign Detection and Recognition Based on Support Vector Machines,” IEEE Transactions on Intelligent Transportation Systems, vol. 8, pp. 264-278, June 2007.
[5] H. Fujiyoshi and A. J. Lipton, “Real-time human motion analysis by image skeletonization,” Proceedings of Fourth IEEE Workshop on Applications of Computer Vision, Princeton, NJ, pp. 15-21, October 19-21, 1998.
[6] M. Turk and A. Pentland, “Eigenfaces for Recognition,” Journal of Cognitive Neuroscience, vol. 3, no. 1, pp. 71-86, 1991.
[7] P. T. Jackway and M. Deriche, “Scale-space properties of the multiscale morphological dilation-erosion,” IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 18, pp. 38-51, January 1996.
[8] R. L. Hsu, M. Abdel-Mottaleb, and A. K. Jain, “Face detection in color images,” IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 24, pp. 696-706, May 2006.
[9] C. C. Chiang, W. K. Tai, M. T. Yang, Y. T. Huang, and C. J. Huang, “A novel method for detecting lips, eyes and faces in real time,” Real-Time Imaging, vol.9, no.4, pp.277-287, August 2003.
[10] http://johnnylee.net/projects/wii/
[11] C. Rafael and E. Richard, Digital Image Processing, Prentice Hall, 2002.
[12] 黃文吉，C++ Builder與影像處理，儒林圖書有限公司，2006。
[13] 余明興、吳明哲、黃世陽，Borland C++ Builder 6 程式設計經典，松崗電腦圖書有限公司，2002。
[14] 吳權威、曹紋蓮，Visual C# 2005 入門與應用，2006。
[15] 曹祖聖、吳明哲、林兆爃，Visual C#.NET 程式設計經典，松崗電腦圖
書有限公司，2002。
[16] Autodesk，3ds Max9 動畫奧義，悅知文化，2007。
[17] B. Gaines, Managed DirectX9 Graphics and Game Programming, Sams Publishing, 2003.
[18] 陳翔傑，自動化車牌辨識系統設計，國立中央大學，電機工程研究所，碩士論文，2005。(王文俊教授指導)
[19] http://140.115.70.172/xoops/modules/wfdownloads/viewcat.php?cid=4

指導教授

王文俊(Wen-June Wang)

審核日期

2009-7-3

推文