| 研究生: |
陳彥全 Yan-Cyuan Chen |
|---|---|
| 論文名稱: |
Loka:元宇宙架構下的跨平台 VR 串流框架 Loka: A Cross-Platform VR streaming Framework for the Metaverse |
| 指導教授: |
吳曉光
Hsiao Kuang Wu 葉士青 Shih Ching Yeh |
| 口試委員: | |
| 學位類別: |
碩士 Master |
| 系所名稱: |
資訊電機學院 - 資訊工程學系 Department of Computer Science & Information Engineering |
| 論文出版年: | 2025 |
| 畢業學年度: | 113 |
| 語文別: | 英文 |
| 論文頁數: | 36 |
| 中文關鍵詞: | 元宇宙 、虛擬實境 、雲端渲染 、物聯網 、串流媒體 |
| 外文關鍵詞: | Metaverse, Virtual Reality, Cloud Rendering, Internet of Things, Multimedia Streaming |
| 相關次數: | 點閱:31 下載:0 |
| 分享至: |
| 查詢本校圖書館目錄 查詢臺灣博碩士論文知識加值系統 勘誤回報 |
隨著元宇宙技術的不斷迭新,虛擬實境(VR)在打造沉浸式且具社交互動的環境方面扮演了關鍵角色,成為這個互相連結的虛擬宇宙之核心基礎。然而,目前的 VR 技術時常面臨到硬體限制、平台不相容,以及難以支援即時多人互動等挑戰。VR 串流提供了一個可行的解決方案,透過將複雜的運算工作轉移至遠端伺服器,如此不僅可在效能較低的裝置上實現高品質的 VR 體驗,也能擴展潛在的使用族群。
在本論文中,我們提出一個名為 Loka 的多功能且易於擴充的 VR 串流架構,用於解決上述挑戰,並內建支援社交互動與即時協作等元宇宙核心要素所需的基礎要素。Loka 基於 Unity 與 WebRTC 實現,能夠提供跨平台的 VR 體驗,且無需安裝針對特定裝置的 SDK。它同時支援即時整合各種自訂資料串流,例如來自物聯網(IoT)裝置的動作捕捉和生理訊號,以提升虛擬環境中的互動性與個人化,並提供更方便的研究平台。
此外,Loka 原生的本地多人連線功能,能促進協作式及互動式的社交體驗,呼應元宇宙的核心目標。透過雲端進行低延遲串流,Loka 允許使用者在多種類型、不同等級的裝置上進行沉浸式 VR 體驗,而不需仰賴高階硬體。其模組化架構具備良好的擴充性,讓研究人員和開發者能更輕鬆地整合自定義的資料類型與實驗設計。我們相信,憑藉 Loka 對沉浸式 VR 場景、社交互動與複雜虛擬環境的支援,能為元宇宙的未來發展與研究帶來更多可能性。
隨著元宇宙技術的不斷迭新,虛擬實境(VR)在打造沉浸式且具社交互動的環境方面扮演了關鍵角色,成為這個互相連結的虛擬宇宙之核心基礎。然而,目前的 VR 技術時常面臨到硬體限制、平台不相容,以及難以支援即時多人互動等挑戰。VR 串流提供了一個可行的解決方案,透過將複雜的運算工作轉移至遠端伺服器,如此不僅可在效能較低的裝置上實現高品質的 VR 體驗,也能擴展潛在的使用族群。
在本論文中,我們提出一個名為 Loka 的多功能且易於擴充的 VR 串流架構,用於解決上述挑戰,並內建支援社交互動與即時協作等元宇宙核心要素所需的基礎要素。Loka 基於 Unity 與 WebRTC 實現,能夠提供跨平台的 VR 體驗,且無需安裝針對特定裝置的 SDK。它同時支援即時整合各種自訂資料串流,例如來自物聯網(IoT)裝置的動作捕捉和生理訊號,以提升虛擬環境中的互動性與個人化,並提供更方便的研究平台。
此外,Loka 原生的本地多人連線功能,能促進協作式及互動式的社交體驗,呼應元宇宙的核心目標。透過雲端進行低延遲串流,Loka 允許使用者在多種類型、不同等級的裝置上進行沉浸式 VR 體驗,而不需仰賴高階硬體。其模組化架構具備良好的擴充性,讓研究人員和開發者能更輕鬆地整合自定義的資料類型與實驗設計。我們相信,憑藉 Loka 對沉浸式 VR 場景、社交互動與複雜虛擬環境的支援,能為元宇宙的未來發展與研究帶來更多可能性。
1. Wang, H., et al., Experimental Studies of Metaverse Streaming. IEEE Consumer Electronics Magazine, 2024.
2. Kizilkaya, B., et al., 5G-enabled education 4.0: Enabling technologies, challenges, and solutions. IEEE Access, 2021. 9: p. 166962-166969.
3. Latha, D.H., et al., A Study on 5th Generation Mobile Technology-Future Network Service. IJCSIT) International Journal of Computer Science and Information Technologies, 2014. 5(6): p. 8309-8313.
4. Yu, H., H. Lee, and H. Jeon, What is 5G? Emerging 5G mobile services and network requirements. Sustainability, 2017. 9(10): p. 1848.
5. Framework and overall objectives of the future development of IMT for 2030 and beyond. 2024; Available from: https://www.itu.int/dms_pub/itu-d/oth/07/31/D07310000090015PDFE.pdf.
6. Saad, W., M. Bennis, and M. Chen, A vision of 6G wireless systems: Applications, trends, technologies, and open research problems. IEEE network, 2019. 34(3): p. 134-142.
7. Huang, C.-Y., et al. GamingAnywhere: An open cloud gaming system. in Proceedings of the 4th ACM multimedia systems conference. 2013.
8. Huang, C.-Y., et al., GamingAnywhere: The first open source cloud gaming system. ACM Transactions on Multimedia Computing, Communications, and Applications (TOMM), 2014. 10(1s): p. 1-25.
9. NVIDIA GeForce Now. Available from: https://www.nvidia.com/geforce-now/.
10. Di Domenico, A., et al., A network analysis on cloud gaming: Stadia, geforce now and psnow. Network, 2021. 1(3): p. 247-260.
11. Suznjevic, M., I. Slivar, and L. Skorin-Kapov. Analysis and QoE evaluation of cloud gaming service adaptation under different network conditions: The case of NVIDIA GeForce NOW. in 2016 Eighth International Conference on Quality of Multimedia Experience (QoMEX). 2016. IEEE.
12. Virtual Desktop. Available from: https://www.vrdesktop.net/.
13. ALVR (Air Light VR). Available from: tps://github.com/alvr-org/ALVR.
14. NVIDIA CloudXR Suite. Available from: https://developer.nvidia.com/cloudxr-sdk.
15. Kim, H., et al., Recent advances in wearable sensors and integrated functional devices for virtual and augmented reality applications. Advanced Functional Materials, 2021. 31(39): p. 2005692.
16. Rosu, A.G., et al. BeTwin: Enhancing VR Experiences with BLE Beacon-Based Digital Twins. in ICC 2023-IEEE International Conference on Communications. 2023. IEEE.
17. Mancuso, V., et al., IAVRS—International Affective Virtual Reality System: Psychometric Assessment of 360° Images by Using Psychophysiological Data. Sensors, 2024. 24(13): p. 4204.
18. Shin, R., et al., Implementation and evaluation of walk-in-place using a low-cost motion-capture device for virtual reality applications. Sensors, 2024. 24(9): p. 2848.
19. Kulozik, J. and N. Jarrassé, Evaluating the precision of the HTC VIVE Ultimate Tracker with robotic and human movements under varied environmental conditions. arXiv preprint arXiv:2409.01947, 2024.
20. Queck, D., et al. SpiderClip: towards an open source system for wearable device simulation in virtual reality. in CHI Conference on Human Factors in Computing Systems Extended Abstracts. 2022.
21. Unity Render Streaming. Available from: https://github.com/Unity-Technologies/UnityRenderStreaming.
22. Han, J., et al., A technical overview of AV1. Proceedings of the IEEE, 2021. 109(9): p. 1435-1462.
23. Illahi, G., M. Siekkinen, and E. Masala. Foveated video streaming for cloud gaming. in 2017 IEEE 19th international workshop on multimedia signal processing (MMSP). 2017. IEEE.
24. Hsiao, L., et al., Towards retina-quality VR video streaming: 15ms could save you 80% of your bandwidth. ACM SIGCOMM Computer Communication Review, 2022. 52(1): p. 10-19.
25. Yu, H., et al., Toward 6g-based metaverse: Supporting highly-dynamic deterministic multi-user extended reality services. IEEE Network, 2023. 37(4): p. 30-38.